福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā)

來源: 發(fā)布時(shí)間:2025-06-11

無(wú)人機(jī)的迅猛發(fā)展,使得無(wú)人機(jī)的反制技術(shù)也水漲船高,常見的有電子干擾、無(wú)人機(jī)識(shí)別對(duì)抗等方式。后者采用圖像識(shí)別技術(shù),通過在無(wú)人機(jī)攝像頭的基礎(chǔ)上加裝AI高性能圖像處理板,在算法的作用下,就具備無(wú)人機(jī)識(shí)別的功能,為無(wú)人機(jī)對(duì)抗創(chuàng)造條件。由于無(wú)人機(jī)飛行速度極快,因此針對(duì)于這樣環(huán)境下的AI識(shí)別需要“與眾不同”的圖像處理板。我們都知道,當(dāng)視頻幀率越高時(shí),視頻越能夠體現(xiàn)畫面細(xì)節(jié)信息,而圖像識(shí)別算法正是逐幀進(jìn)行識(shí)別,因此,攝像頭捕捉到的畫面細(xì)節(jié)越多,識(shí)別的精度就會(huì)越高。慧視光電能夠深度定制RK339pro系列的目標(biāo)識(shí)別模塊。福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā)

圖像識(shí)別模塊

在無(wú)人機(jī)攝像頭的基礎(chǔ)上加裝慧視光電開發(fā)的Viztra-LE026圖像處理板,這是一塊輕型化、低功耗的圖像處理板,用在無(wú)人機(jī)上面既不會(huì)過多占用空間,也不會(huì)過多消耗續(xù)航,通過目標(biāo)識(shí)別算法的賦能,就可以針對(duì)像東北虎這樣的動(dòng)物AI自動(dòng)識(shí)別,一旦識(shí)別到老虎的特征物體,無(wú)人機(jī)就能夠立即鎖定并抵近觀察,為消防和公安提供精確坐標(biāo)。Viztra-LE026圖像處理板采用的是瑞芯微RV1126芯片,能夠輸出2.0TOPS的算力。而在算法方面,成都慧視能夠提供一站式AI算法訓(xùn)練平臺(tái)SpeedDP,通過對(duì)大量動(dòng)物的標(biāo)注數(shù)據(jù)集的模型訓(xùn)練,能夠?qū)崿F(xiàn)對(duì)新數(shù)據(jù)集的快速AI自動(dòng)標(biāo)注,然后提升識(shí)別算法的性能。軌跡圖像識(shí)別模塊識(shí)別夜間AI識(shí)別模塊定制。

福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā),圖像識(shí)別模塊

無(wú)人裝備作戰(zhàn)狼群,有“狼”負(fù)責(zé)偵查,有“狼”負(fù)責(zé)打擊,而有的“狼”則負(fù)責(zé)后勤保障,這種無(wú)人裝備集群作戰(zhàn)能夠有效輔助特種作戰(zhàn)?!皺C(jī)器狼”的升級(jí)之所以能夠滿足多樣化的任務(wù),得益于其智能化的建設(shè)。就是下面這樣的一個(gè)"智慧眼"的加入,使得機(jī)器狼能夠自主完成許多任務(wù)。這個(gè)智慧眼由光學(xué)系統(tǒng)(彩色圖像)、攝像機(jī)、圖像處理、電源系統(tǒng)及機(jī)械結(jié)構(gòu)組成,然后在外面加上外殼,形成一個(gè)整體。而拆分來看,產(chǎn)品主要就由高清攝像機(jī)和高性能的圖像處理板組成。

在很長(zhǎng)一段時(shí)間內(nèi),傳統(tǒng)的糧庫(kù)害蟲檢查方法是依靠人工巡檢,用肉眼觀察,逐倉(cāng)篩查的方法,這種方法覆蓋面不足且效率低下,篩查一次將耗費(fèi)工作人員的大量時(shí)間精力。隨著技術(shù)的發(fā)展,AI化的篩查逐步采用,通過算法的AI識(shí)別實(shí)現(xiàn)自動(dòng)化篩查。方法基于高像素高清攝像機(jī),實(shí)時(shí)遠(yuǎn)程監(jiān)控糧庫(kù),一旦發(fā)現(xiàn)害蟲就能夠立即向管理平臺(tái)發(fā)出告警,有效降低巡檢成本和壓力,提升工作效率。這之中,實(shí)現(xiàn)AI識(shí)別處理的傳感器同樣重要,面對(duì)復(fù)雜的糧庫(kù)環(huán)境,一個(gè)高性能能夠快速處理數(shù)據(jù)的圖像處理板是關(guān)鍵。慧視光電開發(fā)的RK3588圖像處理板能夠選擇哪些接口?

福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā),圖像識(shí)別模塊

但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無(wú)卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對(duì)收發(fā)信道,信道支持?jǐn)?shù)據(jù)透?jìng)?,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”?;谄胀?0幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場(chǎng)景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。 如何提升無(wú)人機(jī)的AI識(shí)別精度?重慶視覺算法圖像識(shí)別模塊

各類飛行器識(shí)別的模塊定制。福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā)

騰訊開發(fā)的機(jī)器人小五,采用輪、腿、足復(fù)合設(shè)計(jì),使得它具備越障能力的同時(shí),也保持了輪式機(jī)器人的運(yùn)行效率。每條腿都可以單獨(dú)伸長(zhǎng)縮短,能有效提升承載能力。裝上了雙編碼器大扭矩密度的執(zhí)行器后,就能承受住一般成年人的重量。將機(jī)器人用于養(yǎng)老服務(wù)領(lǐng)域,能夠幫老人取快遞,抱老人起床,帶老人進(jìn)行活動(dòng)。機(jī)器人內(nèi)置RGBD相機(jī),在圖像處理板的賦能下,能夠?qū)崟r(shí)檢測(cè)周邊環(huán)境,進(jìn)行路線規(guī)劃和避障,以高效完成各項(xiàng)工作指令。同時(shí)能夠?qū)ξ矬w進(jìn)行AI識(shí)別,判斷老人位置、行為動(dòng)作,為老人的行動(dòng)做出幫助。福建RK3399Pro開發(fā)板圖像識(shí)別模塊算法研發(fā)