無人機(jī)的智能化是推動低空經(jīng)濟(jì)發(fā)展的重要引擎,,打造智能無人機(jī)需要通信,、控制,、傳感器等多種技術(shù)的共同作用,,其中圖像處理板的目標(biāo)檢測識別技術(shù)能夠在智慧巡檢,、智慧交通管理,、智慧河湖巡查等領(lǐng)域有著積極作用,。在成都慧視開發(fā)的多款圖像處理板中,Viztra-LE026以小型化,、低功耗的特點深受行業(yè)青睞,。Viztra-LE026圖像處理板采用了全國產(chǎn)化芯片RV1126,,板卡外形呈圓形設(shè)計,,尺寸為Φ38mm*12mm,,重量12g,雖然小巧,,但是算力可達(dá)2.0TOPS,,能夠憑借1路MIPI視頻輸入和1路DVP視頻輸入實現(xiàn)對目標(biāo)實時自主檢測,、識別,并自動或手動鎖定跟蹤人,、車,、船等目標(biāo),。振動測試是否通過正是確定板卡能否在這樣的環(huán)境下正常完成工作的關(guān)鍵手段,。甘肅目標(biāo)跟蹤功效
成都慧視開發(fā)的RK3588系列高性能圖像處理板Viztra-HE030,能夠在-40℃~65℃的環(huán)境中進(jìn)行工作,,用在寒冷的北方冬天電力巡檢領(lǐng)域,可以有效支撐無人機(jī)的穩(wěn)定工作,。此外,,這款板卡的存儲溫度范圍在-55℃~75℃,,遇到更加極端寒冷的天氣時,,不使用也能夠有效抗寒,。RK3588屬于旗艦機(jī)芯片,,搭載八核64位CPU,,主頻高達(dá)2.4GHz,。集成ARMMali-G610MP4四核GPU,,內(nèi)置AI加速器NPU,可提供6Tops算力,,用在電力巡檢領(lǐng)域能夠快速穩(wěn)定處理復(fù)雜的場景,,幫助進(jìn)行保供電工作,。甘肅目標(biāo)跟蹤功效成都慧視的跟蹤版是國產(chǎn)化的,!
目標(biāo)跟蹤時,,多維度、多層級信息融合也十分重要,。為了提高對運動目標(biāo)表觀描述的準(zhǔn)確度與可信性,現(xiàn)有的檢測與跟蹤算法通常對時域,、空域、頻域等不同特征信息進(jìn)行融合,綜合利用各種冗余,、互補(bǔ)信息提升算法的精確性與魯棒性.然而,目前大多算法還只是對單一時間,、單一空間的多尺度信息進(jìn)行融合,使用者可以考慮從時間、推理等不同維度,對特征,、決策等不同層級的多源互補(bǔ)信息進(jìn)行融合,提升檢測與跟蹤的準(zhǔn)確性,。成都慧視開發(fā)的Viztra-HE030圖像處理板采用了RK3588高性能芯片,工業(yè)級的處理能力能夠運用到諸多行業(yè),。
多目標(biāo)跟蹤是指在連續(xù)的圖像中,,通過目標(biāo)檢測算法識別出每一幀中的目標(biāo),并在時間上跟蹤它們的位置和狀態(tài),。但目標(biāo)會不斷發(fā)生尺度,、形變、遮擋等變化,,而且還會有目標(biāo)出現(xiàn)和消失的情況,,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況(例如無人機(jī)高空檢測),就會給多目標(biāo)跟蹤造成一定的困難,。由于我們不能控制目標(biāo),,所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,,成都慧視針對于多目標(biāo)檢測跟蹤抖動丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法,。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級別的語義特征,,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運動模型,,在算法中加入對攝像頭運動的估計,通過補(bǔ)償攝像頭運動來減小目標(biāo)真實運動與預(yù)測之間的差距,。4.數(shù)據(jù)關(guān)聯(lián)策略,,設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo),。成都慧視光電技術(shù)有限公司推出基于全國產(chǎn)化RV1126板的高性能圖像跟蹤板卡,。
另外,經(jīng)典的跟蹤方法還有基于特征點的光流跟蹤,,在目標(biāo)上提取一些特征點,,然后在下一幀計算這些特征點的光流匹配點,統(tǒng)計得到目標(biāo)的位置,。在跟蹤的過程中,,需要不斷補(bǔ)充新的特征點,刪除置信度不佳的特征點,,以此來適應(yīng)目標(biāo)在運動中的形狀變化,。本質(zhì)上可以認(rèn)為光流跟蹤屬于用特征點的來表征目標(biāo)模型的方法。在深度學(xué)習(xí)和相關(guān)濾波的跟蹤方法出現(xiàn)后,經(jīng)典的跟蹤方法都被舍棄,,這主要是因為這些經(jīng)典方法無法處理和適應(yīng)復(fù)雜的跟蹤變化,,它們的魯棒性和準(zhǔn)確度都被前沿的算法所超越,但是,,了解它們對理解跟蹤過程是有必要的,,有些方法在工程上仍然有十分重要的應(yīng)用,常常被當(dāng)作一種重要的輔助手段,?;垡暪怆婇_發(fā)的慧視RV1126圖像處理板,采用了國產(chǎn)高性能CPU,。湖南附近目標(biāo)跟蹤
智能圖像處理板在邊海防中的應(yīng)用,。甘肅目標(biāo)跟蹤功效
目前,采用圖像識別技術(shù)來實現(xiàn)無人機(jī)規(guī)避其他障礙物是一個有效的方法,。通過在無人機(jī)上植入圖像識別模塊,,這個模塊由圖像處理板和相機(jī)組合而成,通過算法的賦能,,就能針對不同物體實現(xiàn)快速AI識別,,然后實現(xiàn)規(guī)避。而在圖像處理板的選擇上,,成都慧視開發(fā)的Viztra-LE026圖像處理板就十分合適,。這塊板卡采用了RV1126開發(fā)設(shè)計而成,外形呈圓形,,體積小巧,,尺寸為Ф38mm*12mm,重量只有12g,,用在無人機(jī)上不會過多占用空間,。此外,該板卡功耗≤4W,,也不會增加無人機(jī)的續(xù)航負(fù)擔(dān),。甘肅目標(biāo)跟蹤功效