亚洲精品久久久久久久久久久,亚洲国产精品一区二区制服,亚洲精品午夜精品,国产成人精品综合在线观看,最近2019中文字幕一页二页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

RGPNET:復雜環(huán)境下實時通用語義分割網(wǎng)絡

電子設計 ? 來源:電子設計 ? 作者:電子設計 ? 2020-12-10 19:15 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

本文介紹的論文提出了一種新的實時通用語義分割體系結構RGPNet,在復雜環(huán)境下取得了顯著的性能提升。
作者: Tom Hardy
首發(fā):3D視覺工坊微信公眾號

論文:RGPNet: A Real-Time General Purpose Semantic Segmentation (文末可下載)
論文鏈接:https://arxiv.org/abs/1912.01394

一、主要思想

本文提出了一種新的實時通用語義分割體系結構RGPNet,在復雜環(huán)境下取得了顯著的性能提升。RGPNet由一個輕量級的非對稱編碼器-解碼器和一個適配器組成。適配器有助于從編碼器和解碼器之間的多層分布式表示中保留和細化抽象概念。它也有助于從較深層到較淺層的梯度流動。大量實驗表明,與目前最先進的語義分割網(wǎng)絡相比,RGPNet具有更好的性能。

此外還證明了在保持性能的同時,使用改進的標簽松弛技術和逐步調(diào)整大小可以減少60%的訓練時間。論文還對應用在資源受限的嵌入式設備上的RGPNet進行了優(yōu)化,使推理速度提高了400%,性能損失可以忽略不計。RGPNet在多個數(shù)據(jù)集之間獲得了更好的速度和精度權衡。

二、創(chuàng)新點

1、提出的RGPNet作為一種通用的實時語義分割體系結構,它可以在單分支網(wǎng)絡中獲得高分辨率的深層特征,從而提高準確性和降低延遲,在復雜的環(huán)境中具有競爭力。

2、引入一個適配器模塊來捕獲多個抽象級別,以幫助細分的邊界細化,適配器還通過添加較短的路徑來輔助漸變梯度流。

3、對于green AI,在訓練期間采用漸進式調(diào)整大小技術,從而使訓練時間和環(huán)境影響減少60%,并且采用一種改進的標簽松弛來消除低分辨率標簽映射中的混疊效應。

4、使用TensorRT(一個高性能深度學習推理平臺)優(yōu)化RGPNet,以便部署在邊緣計算設備上,從而使推理速度提高400%。

5、RGPNet在Cityscpes、CamVid和Mapillary數(shù)據(jù)集上分別實現(xiàn)了Resnet-101作為backbone 下80.9%、69.2%和50.2% mIoU以及Resnet-18作為backbone下74.1%、66.9%和41.7% mIoU。對于1024×2048分辨率的圖像,RGPNet在CityScapes數(shù)據(jù)集上單NVIDIA GTX2080Ti GPU下達到37.4 FPS。

三、網(wǎng)絡結構

RGPNet的整體結構如下所示,每個箭頭都有對應的操作模式:

  • 中間一列操作為編碼器
  • 最右邊操作為解碼器
  • “+”操作為適配器(Adaptor)

其中“+”詳細操作如下所示:
1、T(:)是一個轉(zhuǎn)換函數(shù),它用來減少編碼器模塊輸出通道數(shù)量并將其傳輸?shù)絘daptor。
2、D(:)和U(:)是下采樣和上采樣功能。

Adaptor有許多優(yōu)點:

1、Adaptor聚合來自不同上下文和空間級別的特征。
2、通過引入較短的路徑,有助于梯度從較深的層流向較淺的層。
3、Adaptor允許使用輕量解碼器的不對稱設計,這將減少卷積層,進一步增強梯度流。因此,Adaptor使網(wǎng)絡適合于實時應用,因為它在保留空間信息的同時提供了豐富的語義信息。

針對帶標簽松弛的漸進式調(diào)整

論文采取了最大化像素周圍區(qū)域相似度分布,而不是單個像素級別的標簽最大可能化,針對邊界類別,提出了邊界損失函數(shù)。

四、實驗結果

多種網(wǎng)絡在Mapillary Vistas數(shù)據(jù)集上的測試結果:

幾種網(wǎng)絡在Mapillary Vistas數(shù)據(jù)集上的性能對比:

在CamVid數(shù)據(jù)集上的性能對比:

RGPNet使用TensorRT在GTX2080Ti和Xavier上速度對比:

綜合速度和準確率以及實際部署下的性能,RGPNet都非常具有競爭力~!

推薦閱讀

重點介紹:1、3D視覺算法;2、vslam算法;3、圖像處理;4、深度學習;5、自動駕駛;6、技術干貨博主及合伙人分別來國內(nèi)自知名大廠、??笛芯吭?,深研3D視覺、深度學習、圖像處理、自動駕駛、目標檢測、VSLAM算法等領域。
歡迎關注微信公眾號

審核編輯:符乾江
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 人工智能
    +關注

    關注

    1813

    文章

    49597

    瀏覽量

    260058
  • 計算機視覺
    +關注

    關注

    9

    文章

    1713

    瀏覽量

    47424
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    復雜電磁環(huán)境構建與測試軟件系統(tǒng)解析(精簡版)

    復雜電磁環(huán)境構建與測試軟件系統(tǒng)解析(精簡版)
    的頭像 發(fā)表于 09-15 21:05 ?376次閱讀
    <b class='flag-5'>復雜</b>電磁<b class='flag-5'>環(huán)境</b>構建與測試軟件系統(tǒng)解析(精簡版)

    時間同步設備在復雜網(wǎng)絡環(huán)境中的調(diào)試要點

    時間同步設備是保障網(wǎng)絡系統(tǒng)協(xié)同運行的基礎設施,尤其在金融、電力、通信等領域?qū)纫筝^高的場景中,其穩(wěn)定性直接影響業(yè)務連續(xù)性。在實際部署中,網(wǎng)絡環(huán)境復雜性常給同步精度帶來挑戰(zhàn)。本文將
    的頭像 發(fā)表于 08-13 15:48 ?249次閱讀
    時間同步設備在<b class='flag-5'>復雜</b><b class='flag-5'>網(wǎng)絡</b><b class='flag-5'>環(huán)境</b>中的調(diào)試要點

    北京迅為itop-3588開發(fā)板NPU例程測試deeplabv3 語義分割

    北京迅為itop-3588開發(fā)板NPU例程測試deeplabv3 語義分割
    的頭像 發(fā)表于 07-22 15:51 ?761次閱讀
    北京迅為itop-3588開發(fā)板NPU例程測試deeplabv3 <b class='flag-5'>語義</b><b class='flag-5'>分割</b>

    工業(yè)質(zhì)檢再升級:復雜網(wǎng)絡檢測模型破解多場景檢測難題

    、模糊目標、多尺寸多類別等難題迎刃而解。復雜網(wǎng)絡三大核心優(yōu)勢1、標注高效,使用便捷僅需矩形框即可完成標注,顯著降低了數(shù)據(jù)準備的時間與人力成本。對比像素級分割標注,
    的頭像 發(fā)表于 07-16 15:52 ?508次閱讀
    工業(yè)質(zhì)檢再升級:<b class='flag-5'>復雜</b><b class='flag-5'>網(wǎng)絡</b>檢測模型破解多場景檢測難題

    迅為RK3576開發(fā)板攝像頭實時推理測試-ppseg?圖像分割

    迅為RK3576開發(fā)板攝像頭實時推理測試-ppseg 圖像分割
    的頭像 發(fā)表于 07-11 14:31 ?651次閱讀
    迅為RK3576開發(fā)板攝像頭<b class='flag-5'>實時</b>推理測試-ppseg?圖像<b class='flag-5'>分割</b>

    【正點原子STM32MP257開發(fā)板試用】基于 DeepLab 模型的圖像分割

    是谷歌團隊提出的一種用于語義分割的深度學習模型,屬于 DeepLab 系列模型的第三代版本。它在圖像語義分割任務中表現(xiàn)優(yōu)異,能夠高效地捕獲圖像的多尺度上下文信息,并生成高分辨率的
    發(fā)表于 06-21 21:11

    SMA接口在汽車電子復雜環(huán)境的適應性剖析

    德索SMA接口在汽車電子復雜環(huán)境既具備一定的適應性優(yōu)勢,也面臨諸多挑戰(zhàn)。通過持續(xù)的技術創(chuàng)新與工藝改進,德索有望進一步提升SMA接口在汽車電子領域的適應性與可靠性,為汽車電子技術的發(fā)展提供有力支持。
    的頭像 發(fā)表于 06-04 09:04 ?585次閱讀
    SMA接口在汽車電子<b class='flag-5'>復雜</b><b class='flag-5'>環(huán)境</b><b class='flag-5'>下</b>的適應性剖析

    Matter 智能家居的通用語

    Matter由連接標準聯(lián)盟(CSA)創(chuàng)建,旨在解決智能家居的互操作性問題。Matter 基于簡單性、互操作性、可靠性和安全性四大核心原則 。 是采用基于 IP 應用層的開源協(xié)議,本質(zhì)上是一種“通用語
    發(fā)表于 05-19 15:35

    復雜電磁環(huán)境構建與測試軟件系統(tǒng)

    復雜電磁環(huán)境構建與測試軟件系統(tǒng)
    的頭像 發(fā)表于 04-29 20:47 ?420次閱讀
    <b class='flag-5'>復雜</b>電磁<b class='flag-5'>環(huán)境</b>構建與測試軟件系統(tǒng)

    標準網(wǎng)絡時鐘系統(tǒng):數(shù)字時代的通用語

    ? ? ? 跨洲手術機器人執(zhí)刀切割的瞬間,遠程會診系統(tǒng)的影像數(shù)據(jù)正以0.1秒延遲同步呈現(xiàn);沙漠光伏電站的逆變器陣列,在標準網(wǎng)絡時鐘系統(tǒng)指揮實現(xiàn)毫秒級功率調(diào)節(jié);元宇宙演唱會中,10萬虛擬觀眾的互動
    的頭像 發(fā)表于 03-03 10:08 ?582次閱讀

    SparseViT:以非語義為中心、參數(shù)高效的稀疏化視覺Transformer

    (IML)都遵循“語義分割主干網(wǎng)絡”與“精心制作的手工制作非語義特征提取”相結合的設計,這種方法嚴重限制了模型在未知場景的偽影提取能力。 論文標題: Can We Get Rid
    的頭像 發(fā)表于 01-15 09:30 ?729次閱讀
    SparseViT:以非<b class='flag-5'>語義</b>為中心、參數(shù)高效的稀疏化視覺Transformer

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人的基礎模塊

    ,還有基于深度神經(jīng)網(wǎng)絡的Fast R-CNN和Faster R-CNN。 語義分割是將圖像劃分為具有不同語義類別的區(qū)域。 立體視覺通過模擬人類雙眼的視覺系統(tǒng),利用兩天相機從略微不同的角
    發(fā)表于 01-04 19:22

    【AIBOX應用】通過 NVIDIA TensorRT 實現(xiàn)實時快速的語義分割

    設計,高效散熱,保障在高溫運行狀態(tài)的運算性能和穩(wěn)定性,滿足各種工業(yè)級的應用需求。NVIDIATensorRTNVIDIA系列AIBOX支持深度學習框架Tensor
    的頭像 發(fā)表于 12-18 16:33 ?1071次閱讀
    【AIBOX應用】通過 NVIDIA TensorRT 實現(xiàn)<b class='flag-5'>實時</b>快速的<b class='flag-5'>語義</b><b class='flag-5'>分割</b>

    利用VLM和MLLMs實現(xiàn)SLAM語義增強

    語義同步定位與建圖(SLAM)系統(tǒng)在對鄰近的語義相似物體進行建圖時面臨困境,特別是在復雜的室內(nèi)環(huán)境中。本文提出了一種面向?qū)ο骃LAM的語義
    的頭像 發(fā)表于 12-05 10:00 ?2066次閱讀
    利用VLM和MLLMs實現(xiàn)SLAM<b class='flag-5'>語義</b>增強

    復雜環(huán)境多無人智能車輛協(xié)同調(diào)控

    摘要: 該文對多無人智能車以領航-跟隨法在復雜環(huán)境運動的編隊控制問題進行了探討,通過采用閉環(huán)控制律設計了一種編隊控制器和編隊控制方案,該編隊控制器的優(yōu)點在于其主要考慮智能車之間的距離和角度,同時
    的頭像 發(fā)表于 11-16 10:12 ?1725次閱讀
    <b class='flag-5'>復雜</b><b class='flag-5'>環(huán)境</b><b class='flag-5'>下</b>多無人智能車輛協(xié)同調(diào)控