河北省時省力目標(biāo)識別自主可控

利用圖像處理技術(shù)實現(xiàn)導(dǎo)彈的遠(yuǎn)程打擊是一項運用了比較長時間的技術(shù)，相比于現(xiàn)代化的電子控制，它具備低受干擾的特點，特別是無人機在軍備領(lǐng)域的廣泛應(yīng)用，圖像處理的作用重新受到重視。遠(yuǎn)程打擊時，需要對整個彈的識別能力進行深度學(xué)習(xí)訓(xùn)練，不斷的訓(xùn)練能夠讓AI更加聰明，讓AI知道該打擊什么，從而提升打擊精度。在前期的試驗印證階段，需要進行大量反復(fù)的試驗訓(xùn)練，通過在導(dǎo)彈前端植入導(dǎo)引頭，給導(dǎo)彈裝上眼睛，可以實時記錄導(dǎo)彈打出后的視頻畫面，然后將大量的視頻數(shù)據(jù)采集到一起用于分析改進。AI識別怎么選擇合適的模塊？河北省時省力目標(biāo)識別自主可控

實現(xiàn)這些功能的技術(shù)中，圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力，植入相應(yīng)的AI算法，無人機就相當(dāng)于裝上了“智慧眼”，而且這個“智慧眼”居于高空，能夠在一個定點，俯瞰大范圍，實時監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信，通過和圖像處理板的結(jié)合，能夠?qū)崿F(xiàn)低延時低帶寬的圖像傳輸處理。在實際落地應(yīng)用中，可以采用成都慧視開發(fā)的高性能圖像處理板，其中RV1126系列的Viztra-LE026圖像處理板，就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力，能夠根據(jù)無人機型號進行接口定制，整體尺寸在40mm×40mm×10mm左右（核心板+接口板），小巧的外形即便是小型無人機也能夠裝上。此外，板卡整體功耗在4W左右，不會過多增加無人機的負(fù)擔(dān)。天津視頻目標(biāo)識別辦公平臺可見光AI識別模塊定制。

這個過程中，采用無人機是個高效的辦法。無人機高空觀察能夠獲得更多的視野，并且針對許多人無法到達的地方，還能夠快速抵近觀察，防止驚擾。此外，更高效的措施是在無人機上加裝具備圖像處理的板卡，這時候無人機就是一個智慧眼，它能夠在算法的輔助下，對野豬等動物進行AI搜尋，并且具備目標(biāo)鎖定功能。當(dāng)無人機發(fā)現(xiàn)疑似目標(biāo)就可以抵近觀察，一旦確認(rèn)目標(biāo)就能夠立即鎖定跟蹤，這樣，地面圍剿人員就可以快速像區(qū)域靠攏，對野豬進行逮捕驅(qū)逐。這樣的無人機智慧眼可以用成都慧視開發(fā)的Viztra-HE030圖像處理板來實現(xiàn)，這塊板卡采用瑞芯微旗艦級芯片RK3588，算力能夠達到6.0TOPS，處理村落、樹林等復(fù)雜環(huán)境不在話下。同時，針對于野生動物目標(biāo)識別算法的AI訓(xùn)練，成都慧視還可以提供專門的AI訓(xùn)練平臺SpeedDP，通過大量的模型訓(xùn)練實現(xiàn)AI自動圖像標(biāo)注，進而幫助提升算法識別性能。

在很長一段時間內(nèi)，傳統(tǒng)的糧庫害蟲檢查方法是依靠人工巡檢，用肉眼觀察，逐倉篩查的方法，這種方法覆蓋面不足且效率低下，篩查一次將耗費工作人員的大量時間精力。隨著技術(shù)的發(fā)展，AI化的篩查逐步采用，通過算法的AI識別實現(xiàn)自動化篩查。方法基于高像素高清攝像機，實時遠(yuǎn)程監(jiān)控糧庫，一旦發(fā)現(xiàn)害蟲就能夠立即向管理平臺發(fā)出告警，有效降低巡檢成本和壓力，提升工作效率。這之中，實現(xiàn)AI識別處理的傳感器同樣重要，面對復(fù)雜的糧庫環(huán)境，一個高性能能夠快速處理數(shù)據(jù)的圖像處理板是關(guān)鍵。應(yīng)急無人機用AI圖像處理板選慧視光電。

“啟明935A”系列芯片已經(jīng)成功點亮，并完成各項功能性測試，達到車規(guī)級量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動駕駛芯片，但并非單一芯片，而是一個家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配，再結(jié)合靈活的封裝方式，快速形成不同性能等級的SoC芯片。它還支持高帶寬的PBLink多芯互連，雙芯雙向帶寬128GB/s，四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入，可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu)，初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。如何精確的識別弱小目標(biāo)？上?？焖倌繕?biāo)識別定制

慧視圖像處理板都有哪些接口？河北省時省力目標(biāo)識別自主可控

但這也遇到很多難點，通常情況下，視頻回傳的延遲大概在200ms左右，隨著大量的彈打出，視頻傳輸所需帶寬就面臨壓力，如何在通信帶寬有限的情況下，保證視頻順暢、清晰、無卡頓地傳輸，是分析改進這個工作需要解決的前期難點。針對于這個問題，慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合，推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內(nèi)，例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi)，多路視頻和交互控制共用一對收發(fā)信道，信道支持?jǐn)?shù)據(jù)透傳，外部系統(tǒng)可以使用該信道，傳輸任意格式的數(shù)據(jù)；可實時調(diào)整視頻碼率，在低至500K帶寬情況下依然可以回傳清晰流暢的圖像?？梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實現(xiàn)視頻中繼轉(zhuǎn)發(fā)；能夠基于H265實時視頻編碼；可實現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機，實現(xiàn)15ms的低延遲編解碼，加上數(shù)據(jù)鏈傳輸延遲時間在30ms左右，目前業(yè)界前列。通用性強，使用更加靈活，適用更多應(yīng)用場景；支持多路SDI視頻在低至500K帶寬情況下的同時傳輸（1080P60FPS），徹底解決“帶寬苦惱”；整體時延約60ms（含相機、編解碼、顯示，不含傳輸），實現(xiàn)實時控制、實時打擊。河北省時省力目標(biāo)識別自主可控