在如今的作業(yè)中,,無人機路面巡查替代傳統(tǒng)的人工巡查,,展現(xiàn)出巨大的效率優(yōu)勢。像高速施工工地這樣的環(huán)境下,,施工方為了保障施工安全,就需要對施工范圍進行嚴格管控,,傳統(tǒng)的人工巡查效率低,,受限于地形、時間等問題,,容易出現(xiàn)盲點,。相比人工,利用無人機進行AI識別則可以逐幀圖像監(jiān)測,,即便是夜晚也能夠利用紅外傳感器進行數(shù)據(jù)收集,,幾乎不會遺漏任何信息。而交通管理部門,,則可以利用無人機快速到底事故地點進行疏導,,緩解交通壓力?;垡昖iztra-LE034圖像處理板,。無線圖像處理板工藝
長時間一直進行這樣的圖像標注工作,那無疑是枯燥而乏味的,,手酸不說,,更多的是精神上的折磨,進而效率大打折扣,。但這又是算法提升的必要途徑,,無法跳過,當項目緊急時,,甚至需要多人加班加點趕進度,。這樣的痛苦現(xiàn)狀急需改變!慧視光電的算法工程師為了提高這一的效率,開發(fā)了一個深度學習算法開發(fā)平臺SpeedDP,。它的基本邏輯是基于一個手動標注一定量的數(shù)據(jù)集進行訓練,,形成一個可用的預選模型(如果已有模型可以直接使用),然后訓練一定階段后,,可以評估此模型的能力,,如果能夠滿足使用就可以對相同目標的新數(shù)據(jù)集(未進行任何標注)進行AI自動化標注。這一過程的省去了大量需要對新數(shù)據(jù)集的手動拉框工作,,同時也在不斷反哺此模型算法,,幫助提升性能。數(shù)據(jù)圖像處理板參考價慧視光電開發(fā)了多款圖像跟蹤板,。
實現(xiàn)這些功能的技術中,,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,,植入相應的AI算法,,無人機就相當于裝上了“智慧眼”,而且這個“智慧眼”居于高空,,能夠在一個定點,,俯瞰大范圍,實時監(jiān)控貨物的存放狀態(tài),。遠程控制技術基于網(wǎng)絡通信,,通過和圖像處理板的結合,能夠實現(xiàn)低延時低帶寬的圖像傳輸處理,。在實際落地應用中,,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,,就是無人機的完美搭子,。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機型號進行接口定制,,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),,小巧的外形即便是小型無人機也能夠裝上。此外,,板卡整體功耗在4W左右,,不會過多增加無人機的負擔。
城市濕地公園是“城市之肺”,,是生態(tài)建設的重要一環(huán),,因此對于濕地公園的日常巡邏必不可少。但是大面積的濕地公園地形復雜交錯,,許多區(qū)域依靠傳統(tǒng)的人工巡邏,,無法到達,。此外,人工巡邏的效率遠遠不夠,,無法做到及時響應和精確記錄,,久而久之,成本就不斷累計增加,。無人機的落地應用,,能夠有效減少人工成本的問題。無人機能夠憑借小巧的身型,,在濕地錯綜復雜的環(huán)境中自由穿梭,,確保無死角。利用無人機打造智能巡檢系統(tǒng),,通過高清攝像頭抵近觀察,,能夠實現(xiàn)濕地全域的高效巡檢。其中,,智能化的措施在于可以在攝像頭的基礎上加裝圖像處理板,,通過圖像處理板和算法的共同作用,能夠讓無人機攝像頭變成“智慧眼”,,這只“智慧眼”能夠精細AI識別動物,、樹木、水中的雜物等等信息,,通過大量的數(shù)據(jù)收集,為管理決策提供依據(jù),?;垡暪怆娔軌蚨ㄖ芔SB接口的圖像處理板。
“啟明935A”系列芯片已經成功點亮,,并完成各項功能性測試,,達到車規(guī)級量產標準。啟明935A是行業(yè)首顆基于Chiplet(芯粒/小芯片)異構集成范式的自動駕駛芯片,,但并非單一芯片,,而是一個家族系列。啟明935HUBChiplet可以和不同數(shù)量的大熊星座AIChiplet互相搭配,,再結合靈活的封裝方式,,快速形成不同性能等級的SoC芯片。它還支持高帶寬的PBLink多芯互連,,雙芯雙向帶寬128GB/s,,四芯雙向帶寬64GB/s。啟明935A每顆芯片都支持比較大20路的1080p60攝像頭輸入,,可應用于各類端側AI部署,。得益于大熊星座NPU天然支持Transformer結構,初步支持的模型有Yolo系列、ResNet50,、PSPNet,、PointNet++、TrafficSign_Retinanet,、BevDet,、miniCPM、Unet_ResNet50,、PointPillars,、PillarNest、M2track,、BevFusion,、PaliGemma、LLaMa-3B,、8B等等,。圖像處理板可以幫助動物紀錄片拍攝中鎖定跟蹤目標。浙江圖像處理板檢測
慧視Viztra-ME025圖像處理板,。無線圖像處理板工藝
SpeedDP作為一個服務型AI平臺,,它能提供從數(shù)據(jù)標注、模型訓練,、測試驗證到RockChip嵌入式硬件平臺模型部署的可視化AI開發(fā)功能,。平臺所需算法并不是固定的,使用者可以根據(jù)自身實際應用場景進行AI算法的定制化開發(fā),,例如平臺經過不斷的迭代,,目前能夠支持YOLOv8系列算法進行圖像標注。SpeedDP這個平臺使用起來十分簡便,,在圖像標注領域其基本使用方法是:1.首先有一個比較好的預選模型2.用這個預選模型做自動標注3.后期人工審核修正無線圖像處理板工藝