亚洲精品久久久久久久久久久,亚洲国产精品一区二区制服,亚洲精品午夜精品,国产成人精品综合在线观看,最近2019中文字幕一页二页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

詳解卷積神經網(wǎng)絡卷積過程

電子工程師 ? 來源:工程師曾玲 ? 2019-05-02 15:39 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

卷積過程是卷積神經網(wǎng)絡最主要的特征。然而卷積過程有比較多的細節(jié),初學者常會有比較多的問題,這篇文章對卷積過程進行比較詳細的解釋。

1、卷積運算

首先我們需要知道什么是卷積計算,它其實是一種簡單數(shù)學運算,有兩個步驟:一個是矩陣內積乘法,另一個是將內積乘法的結果進行全加。

(1)矩陣內積乘法

矩陣的內積乘法非常簡單,就是把兩個相乘的矩陣,相同位置的元素進行乘法運算,這個時候會得到一個新的矩陣(在這里我們需要注意一下,卷積是在作矩陣內積乘法,而不是矩陣乘法)。

(2)全加計算

這個新矩陣的全部值會進行相加,然后會得到一個值,這個值才是卷積運算的結果。

卷積計算過程如下圖所示:

詳解卷積神經網(wǎng)絡卷積過程

2、特征圖像與卷積核

對于實際的卷積過程中,它一方面有輸入圖像,這些圖像被稱作是特征圖像(注:卷積神經網(wǎng)絡中,原始的輸入是真實的圖像,經過卷積后會生成特征圖像),另一方面還需要有卷積核。

卷積核的值是人為設定的,它是可以調節(jié)的,在實際的卷積神經網(wǎng)絡中,卷積核的值就是網(wǎng)絡的參數(shù)。對卷積網(wǎng)絡進行訓練,就是在調節(jié)這些卷積核心的參數(shù)。在實際中一般不會用太大的卷積核,常見的卷積核大小有3*3,5*5,1*1的大小。

特征圖像和卷積核都是以矩陣的形式存在,因此它們可以進行卷積計算。卷積計算的輸入不僅可以是圖像,還可以是其它的二維矩陣信息(當然還有一維和三維的卷積,這里就不多介紹了)。卷積核首先會對特征圖像的第一個區(qū)域進行卷積運算,這個卷積計算的結果,會作為輸出特征圖像上的一個點,如下圖所示。

詳解卷積神經網(wǎng)絡卷積過程

3、卷積核在特征圖像上的滑動過程

每次卷積計算的結果會作為輸出特征圖像的一個點,而特征圖像在進行卷積過程后,會輸出一幅新的特征圖像,這需要卷積核與特征圖像進行多次卷積計算。形象的來說,卷積核會在輸入的特征圖像上滑動。這個滑動的過程,一般是沿著從左到右,從上到下這樣的次序。如下圖所示。

詳解卷積神經網(wǎng)絡卷積過程

詳解卷積神經網(wǎng)絡卷積過程

這里還需要注意的是滑動的步長,上面所說的是滑動的步長為1的情況?;瑒拥牟介L還可以取不為1的情況,不同的滑動步長,輸出特征圖的大小不同,如下圖所示。

詳解卷積神經網(wǎng)絡卷積過程

4、多通道特征圖像的卷積過程

使用一個卷積核對一幅特征圖像進行卷積之后,會產生一幅新的特征圖像,所以我們很自然的能想到,使用多個卷積核對特征圖像進行卷積會得到多幅特征圖像。在一個實際卷積神經網(wǎng)絡中通常有很多個卷積層次,每個卷積層都有很多個卷積核,那么在每個層次也會產生很多幅特征圖像,這些特征圖像的數(shù)目,被稱為是“通道”數(shù)目。

此時會面臨一個問題是,怎樣對多個通道的特征像進行卷積。這個時候我們需要對卷積核進行分組,每組卷積核的數(shù)目,對應的是輸入通道特征圖像的數(shù)目,而輸出通道的數(shù)目是卷積核一共有多少組。所以總的卷積核心數(shù)目是:輸入通道數(shù)目*輸出通道數(shù)目。

另外還需要注意的是,每組卷積核心通常還有一個偏置項,所以下圖的卷積過程是,第一組的三個卷積核進行卷積計算后的結果,再加上一個偏執(zhí)項的值,才是輸出特征相應位置的值。

還需要注意的是,輸入特征圖的外圍經常會填充一圈的零,這樣的處理是為了讓特征圖邊緣的值能對準卷積核,可以減少一些信息的損失。

下面兩幅圖是多通道卷積過程的示意圖。

詳解卷積神經網(wǎng)絡卷積過程

詳解卷積神經網(wǎng)絡卷積過程

后記

理解卷積過程對于學習深度神經網(wǎng)絡非常重要,在這篇文章對卷積過程進行了較為詳細的解釋。其實基本的卷積過程并不復雜,但是有一些細節(jié)需要多去思考才能消化。另外現(xiàn)在人們對卷積神經網(wǎng)絡特性,也有了越來越深入的認識......

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 神經網(wǎng)絡

    關注

    42

    文章

    4822

    瀏覽量

    106456
  • 卷積
    +關注

    關注

    0

    文章

    95

    瀏覽量

    18912
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    卷積神經網(wǎng)絡入門資料

    卷積神經網(wǎng)絡入門詳解
    發(fā)表于 02-12 13:58

    卷積神經網(wǎng)絡如何使用

    卷積神經網(wǎng)絡(CNN)究竟是什么,鑒于神經網(wǎng)絡在工程上經歷了曲折的歷史,您為什么還會在意它呢? 對于這些非常中肯的問題,我們似乎可以給出相對簡明的答案。
    發(fā)表于 07-17 07:21

    什么是圖卷積神經網(wǎng)絡

    卷積神經網(wǎng)絡
    發(fā)表于 08-20 12:05

    卷積神經網(wǎng)絡原理及發(fā)展過程

    Top100論文導讀:深入理解卷積神經網(wǎng)絡CNN(Part Ⅰ)
    發(fā)表于 09-06 17:25

    卷積神經網(wǎng)絡的優(yōu)點是什么

    卷積神經網(wǎng)絡的優(yōu)點
    發(fā)表于 05-05 18:12

    卷積神經網(wǎng)絡一維卷積的處理過程

    。本文就以一維卷積神經網(wǎng)絡為例談談怎么來進一步優(yōu)化卷積神經網(wǎng)絡使用的memory。文章(卷積神經網(wǎng)絡
    發(fā)表于 12-23 06:16

    卷積神經網(wǎng)絡模型發(fā)展及應用

    過程中存在梯度消失的問題[23],神經網(wǎng)絡再 次慢慢淡出人們的視線。1998 年 LeCun 發(fā)明了 LeNet-5,并在 Mnist 數(shù)據(jù) 集達到 98%以上的識別準確率,形成影響深遠的卷積
    發(fā)表于 08-02 10:39

    卷積神經網(wǎng)絡原理:卷積神經網(wǎng)絡模型和卷積神經網(wǎng)絡算法

    卷積神經網(wǎng)絡原理:卷積神經網(wǎng)絡模型和卷積神經網(wǎng)絡算法 卷積
    的頭像 發(fā)表于 08-17 16:30 ?2068次閱讀

    卷積神經網(wǎng)絡詳解 卷積神經網(wǎng)絡包括哪幾層及各層功能

    卷積神經網(wǎng)絡詳解 卷積神經網(wǎng)絡包括哪幾層及各層功能 卷積神經
    的頭像 發(fā)表于 08-21 16:41 ?7325次閱讀

    卷積神經網(wǎng)絡概述 卷積神經網(wǎng)絡的特點 cnn卷積神經網(wǎng)絡的優(yōu)點

    卷積神經網(wǎng)絡概述 卷積神經網(wǎng)絡的特點 cnn卷積神經網(wǎng)絡的優(yōu)點?
    的頭像 發(fā)表于 08-21 16:41 ?4101次閱讀

    卷積神經網(wǎng)絡的基本原理 卷積神經網(wǎng)絡發(fā)展 卷積神經網(wǎng)絡三大特點

    卷積神經網(wǎng)絡的基本原理 卷積神經網(wǎng)絡發(fā)展歷程 卷積神經網(wǎng)絡三大特點?
    的頭像 發(fā)表于 08-21 16:49 ?3426次閱讀

    卷積神經網(wǎng)絡層級結構 卷積神經網(wǎng)絡卷積層講解

    卷積神經網(wǎng)絡層級結構 卷積神經網(wǎng)絡卷積層講解 卷積神經網(wǎng)絡
    的頭像 發(fā)表于 08-21 16:49 ?1w次閱讀

    卷積神經網(wǎng)絡的介紹 什么是卷積神經網(wǎng)絡算法

    卷積神經網(wǎng)絡的介紹 什么是卷積神經網(wǎng)絡算法 卷積神經網(wǎng)絡涉及的關鍵技術
    的頭像 發(fā)表于 08-21 16:49 ?2585次閱讀

    卷積神經網(wǎng)絡模型搭建

    卷積神經網(wǎng)絡模型搭建 卷積神經網(wǎng)絡模型是一種深度學習算法。它已經成為了計算機視覺和自然語言處理等各種領域的主流算法,具有很大的應用前景。本篇文章將詳細介紹
    的頭像 發(fā)表于 08-21 17:11 ?1471次閱讀

    卷積神經網(wǎng)絡訓練的是什么

    、訓練過程以及應用場景。 1. 卷積神經網(wǎng)絡的基本概念 1.1 卷積神經網(wǎng)絡的定義 卷積
    的頭像 發(fā)表于 07-03 09:15 ?1227次閱讀