“啟明935A”系列芯片已經(jīng)成功點(diǎn)亮,并完成各項(xiàng)功能性測試,達(dá)到車規(guī)級(jí)量產(chǎn)標(biāo)準(zhǔn)。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構(gòu)集成范式的自動(dòng)駕駛芯片,但并非單一芯片,而是一個(gè)家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,再結(jié)合靈活的封裝方式,快速形成不同性能等級(jí)的SoC芯片。它還支持高帶寬的PBLink多芯互連,雙芯雙向帶寬128GB/s,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,可應(yīng)用于各類端側(cè)AI部署。得益于大熊星座NPU天然支持Transformer結(jié)構(gòu),初步支持的模型有Yolo系列、ResNet50、PSPNet、PointNet++、TrafficSign_Retinanet、BevDet、miniCPM、Unet_ResNet50、PointPillars、PillarNest、M2track、BevFusion、PaliGemma、LLaMa-3B、8B等等。慧視光電基于AI圖像處理的監(jiān)控監(jiān)管方案能夠?qū)崿F(xiàn)安全生產(chǎn)。工業(yè)目標(biāo)跟蹤推薦廠家
長時(shí)間一直進(jìn)行這樣的圖像標(biāo)注工作,那無疑是枯燥而乏味的,手酸不說,更多的是精神上的折磨,進(jìn)而效率大打折扣。但這又是算法提升的必要途徑,無法跳過,當(dāng)項(xiàng)目緊急時(shí),甚至需要多人加班加點(diǎn)趕進(jìn)度。這樣的痛苦現(xiàn)狀急需改變!慧視光電的算法工程師為了提高這一的效率,開發(fā)了一個(gè)深度學(xué)習(xí)算法開發(fā)平臺(tái)SpeedDP。它的基本邏輯是基于一個(gè)手動(dòng)標(biāo)注一定量的數(shù)據(jù)集進(jìn)行訓(xùn)練,形成一個(gè)可用的預(yù)選模型(如果已有模型可以直接使用),然后訓(xùn)練一定階段后,可以評(píng)估此模型的能力,如果能夠滿足使用就可以對(duì)相同目標(biāo)的新數(shù)據(jù)集(未進(jìn)行任何標(biāo)注)進(jìn)行AI自動(dòng)化標(biāo)注。這一過程的省去了大量需要對(duì)新數(shù)據(jù)集的手動(dòng)拉框工作,同時(shí)也在不斷反哺此模型算法,幫助提升性能。哪里有目標(biāo)跟蹤服務(wù)電話AI圖像處理板能實(shí)現(xiàn)24小時(shí)、無間隙信息化監(jiān)控。
但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對(duì)收發(fā)信道,信道支持?jǐn)?shù)據(jù)透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像。可以使設(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。
無人機(jī)在軍備領(lǐng)域有著突出作用,它不僅能幫助進(jìn)行信息偵查,還能進(jìn)行智能炮彈高空精細(xì)打擊。其中,在智能精細(xì)打擊領(lǐng)域,少不了人工智能的參與。通過人工智能的控制分析,能夠?qū)崿F(xiàn)對(duì)打擊目標(biāo)的AI識(shí)別。選擇這樣的方式,能夠減少末端打擊時(shí)對(duì)方電子干擾的影響,盡可能保證無人機(jī)的重復(fù)使用,圖像處理設(shè)備顯然比無人機(jī)本身更加經(jīng)濟(jì)。除了硬件方面,要實(shí)現(xiàn)這樣的精細(xì)打擊,算法的能力至關(guān)重要。在實(shí)際應(yīng)用落地之前就需要大量的模擬試驗(yàn)來驗(yàn)證算法的識(shí)別能力,這個(gè)過程周期不可估量。傳統(tǒng)方式下,需要大量的外場測試驗(yàn)證,整個(gè)流程繁瑣費(fèi)時(shí)費(fèi)力。而這個(gè)工具的出現(xiàn),則很好的優(yōu)化了這個(gè)過程?;垡曃⑿碗p光吊艙能夠?qū)崿F(xiàn)晝夜成像。
另外,經(jīng)典的跟蹤方法還有基于特征點(diǎn)的光流跟蹤,在目標(biāo)上提取一些特征點(diǎn),然后在下一幀計(jì)算這些特征點(diǎn)的光流匹配點(diǎn),統(tǒng)計(jì)得到目標(biāo)的位置。在跟蹤的過程中,需要不斷補(bǔ)充新的特征點(diǎn),刪除置信度不佳的特征點(diǎn),以此來適應(yīng)目標(biāo)在運(yùn)動(dòng)中的形狀變化。本質(zhì)上可以認(rèn)為光流跟蹤屬于用特征點(diǎn)的來表征目標(biāo)模型的方法。在深度學(xué)習(xí)和相關(guān)濾波的跟蹤方法出現(xiàn)后,經(jīng)典的跟蹤方法都被舍棄,這主要是因?yàn)檫@些經(jīng)典方法無法處理和適應(yīng)復(fù)雜的跟蹤變化,它們的魯棒性和準(zhǔn)確度都被前沿的算法所超越,但是,了解它們對(duì)理解跟蹤過程是有必要的,有些方法在工程上仍然有十分重要的應(yīng)用,常常被當(dāng)作一種重要的輔助手段。振動(dòng)測試是否通過正是確定板卡能否在這樣的環(huán)境下正常完成工作的關(guān)鍵手段。哪里有目標(biāo)跟蹤服務(wù)電話
慧視RV1126板卡可以用于大型公共停車場。工業(yè)目標(biāo)跟蹤推薦廠家
首先攝像機(jī)采用的是可見光高清攝像機(jī),具備1920*1080的分辨率,系統(tǒng)視場31.11°×17.8°,其中搜索視場15.8°×15.8°(1080P像素)。而圖像處理則采用慧視開發(fā)的RV1126高性能圖像處理板,之所以采用這塊板卡,一方面得益于其低功耗、微型外觀的設(shè)計(jì),非常契合“智慧眼”這樣對(duì)于空間要求嚴(yán)格的應(yīng)用場景;另一方面RV1126具備2.0TOPS的算力,在國產(chǎn)化方面也十分完整,安全性十足。兩者結(jié)合,就能夠形成重量不超過100g的“智慧眼”。在算法的作用下,能夠達(dá)到≥50Hz的跟蹤幀率,≥25Hz的檢測幀率,實(shí)現(xiàn)捕獲4m*4m目標(biāo)超過800m、6m*6m目標(biāo)超過1000m。這就是“機(jī)器狼”的智慧化措施,通過一個(gè)“小小的”“智慧眼”的加入,便能夠讓其實(shí)現(xiàn)許多自動(dòng)化任務(wù)。隨著技術(shù)的不斷發(fā)展,“機(jī)器狼”的形態(tài)將會(huì)不斷進(jìn)步,滿足更多多樣化需求。工業(yè)目標(biāo)跟蹤推薦廠家