無(wú)線圖像處理板工藝

在如今的作業(yè)中，無(wú)人機(jī)路面巡查替代傳統(tǒng)的人工巡查，展現(xiàn)出巨大的效率優(yōu)勢(shì)。像高速施工工地這樣的環(huán)境下，施工方為了保障施工安全，就需要對(duì)施工范圍進(jìn)行嚴(yán)格管控，傳統(tǒng)的人工巡查效率低，受限于地形、時(shí)間等問(wèn)題，容易出現(xiàn)盲點(diǎn)。相比人工，利用無(wú)人機(jī)進(jìn)行AI識(shí)別則可以逐幀圖像監(jiān)測(cè)，即便是夜晚也能夠利用紅外傳感器進(jìn)行數(shù)據(jù)收集，幾乎不會(huì)遺漏任何信息。而交通管理部門，則可以利用無(wú)人機(jī)快速到底事故地點(diǎn)進(jìn)行疏導(dǎo)，緩解交通壓力。慧視Viztra-LE034圖像處理板。無(wú)線圖像處理板工藝

長(zhǎng)時(shí)間一直進(jìn)行這樣的圖像標(biāo)注工作，那無(wú)疑是枯燥而乏味的，手酸不說(shuō)，更多的是精神上的折磨，進(jìn)而效率大打折扣。但這又是算法提升的必要途徑，無(wú)法跳過(guò)，當(dāng)項(xiàng)目緊急時(shí)，甚至需要多人加班加點(diǎn)趕進(jìn)度。這樣的痛苦現(xiàn)狀急需改變！慧視光電的算法工程師為了提高這一的效率，開發(fā)了一個(gè)深度學(xué)習(xí)算法開發(fā)平臺(tái)SpeedDP。它的基本邏輯是基于一個(gè)手動(dòng)標(biāo)注一定量的數(shù)據(jù)集進(jìn)行訓(xùn)練，形成一個(gè)可用的預(yù)選模型（如果已有模型可以直接使用），然后訓(xùn)練一定階段后，可以評(píng)估此模型的能力，如果能夠滿足使用就可以對(duì)相同目標(biāo)的新數(shù)據(jù)集（未進(jìn)行任何標(biāo)注）進(jìn)行AI自動(dòng)化標(biāo)注。這一過(guò)程的省去了大量需要對(duì)新數(shù)據(jù)集的手動(dòng)拉框工作，同時(shí)也在不斷反哺此模型算法，幫助提升性能。數(shù)據(jù)圖像處理板參考價(jià)慧視光電開發(fā)了多款圖像跟蹤板。

實(shí)現(xiàn)這些功能的技術(shù)中，圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識(shí)別的硬件能力，植入相應(yīng)的AI算法，無(wú)人機(jī)就相當(dāng)于裝上了“智慧眼”，而且這個(gè)“智慧眼”居于高空，能夠在一個(gè)定點(diǎn)，俯瞰大范圍，實(shí)時(shí)監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信，通過(guò)和圖像處理板的結(jié)合，能夠?qū)崿F(xiàn)低延時(shí)低帶寬的圖像傳輸處理。在實(shí)際落地應(yīng)用中，可以采用成都慧視開發(fā)的高性能圖像處理板，其中RV1126系列的Viztra-LE026圖像處理板，就是無(wú)人機(jī)的完美搭子。這款圖像處理板具備2.0TOPS的算力，能夠根據(jù)無(wú)人機(jī)型號(hào)進(jìn)行接口定制，整體尺寸在40mm×40mm×10mm左右（核心板+接口板），小巧的外形即便是小型無(wú)人機(jī)也能夠裝上。此外，板卡整體功耗在4W左右，不會(huì)過(guò)多增加無(wú)人機(jī)的負(fù)擔(dān)。

城市濕地公園是“城市之肺”，是生態(tài)建設(shè)的重要一環(huán)，因此對(duì)于濕地公園的日常巡邏必不可少。但是大面積的濕地公園地形復(fù)雜交錯(cuò)，許多區(qū)域依靠傳統(tǒng)的人工巡邏，無(wú)法到達(dá)。此外，人工巡邏的效率遠(yuǎn)遠(yuǎn)不夠，無(wú)法做到及時(shí)響應(yīng)和精確記錄，久而久之，成本就不斷累計(jì)增加。無(wú)人機(jī)的落地應(yīng)用，能夠有效減少人工成本的問(wèn)題。無(wú)人機(jī)能夠憑借小巧的身型，在濕地錯(cuò)綜復(fù)雜的環(huán)境中自由穿梭，確保無(wú)死角。利用無(wú)人機(jī)打造智能巡檢系統(tǒng)，通過(guò)高清攝像頭抵近觀察，能夠?qū)崿F(xiàn)濕地全域的高效巡檢。其中，智能化的措施在于可以在攝像頭的基礎(chǔ)上加裝圖像處理板，通過(guò)圖像處理板和算法的共同作用，能夠讓無(wú)人機(jī)攝像頭變成“智慧眼”，這只“智慧眼”能夠精細(xì)AI識(shí)別動(dòng)物、樹木、水中的雜物等等信息，通過(guò)大量的數(shù)據(jù)收集，為管理決策提供依據(jù)?；垡暪怆娔軌蚨ㄖ芔SB接口的圖像處理板。

“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮，并完成各項(xiàng)功能性測(cè)試，達(dá)到車規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片，但并非單一芯片，而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配，再結(jié)合靈活的封裝方式，快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連，雙芯雙向帶寬128GB/s，四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入，可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu)，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。圖像處理板可以幫助動(dòng)物紀(jì)錄片拍攝中鎖定跟蹤目標(biāo)。浙江圖像處理板檢測(cè)

慧視Viztra-ME025圖像處理板。無(wú)線圖像處理板工藝

SpeedDP作為一個(gè)服務(wù)型AI平臺(tái)，它能提供從數(shù)據(jù)標(biāo)注、模型訓(xùn)練、測(cè)試驗(yàn)證到RockChip嵌入式硬件平臺(tái)模型部署的可視化AI開發(fā)功能。平臺(tái)所需算法并不是固定的，使用者可以根據(jù)自身實(shí)際應(yīng)用場(chǎng)景進(jìn)行AI算法的定制化開發(fā)，例如平臺(tái)經(jīng)過(guò)不斷的迭代，目前能夠支持YOLOv8系列算法進(jìn)行圖像標(biāo)注。SpeedDP這個(gè)平臺(tái)使用起來(lái)十分簡(jiǎn)便，在圖像標(biāo)注領(lǐng)域其基本使用方法是：1.首先有一個(gè)比較好的預(yù)選模型2.用這個(gè)預(yù)選模型做自動(dòng)標(biāo)注3.后期人工審核修正無(wú)線圖像處理板工藝