目標檢測與目標跟蹤這兩個任務有著密切的聯(lián)系。針對目標跟蹤任務,微軟亞洲研究院提出了一種通過目標檢測技術來解決的新視角,采用簡潔、統(tǒng)一而高效的“目標檢測+小樣本學習”框架,在多個主流數(shù)據集上均取得了杰出性能。目標跟蹤(Object tracking)與目標檢測(Object detection)是計算機視覺中兩個經典的基礎任務。跟蹤任務需要由用戶指定跟蹤目標,然后在視頻的每一幀中給出該目標所在的位置,通常由一系列的矩形邊界框表示。而檢測任務旨在定位圖片中某幾類物體的坐標位置。對物體的檢測、識別和跟蹤能夠有效地幫助機器理解圖片視頻的內容,為后續(xù)的進一步分析打下基礎。RV1126圖像處理板是我司自主研發(fā)的目標跟蹤板,該板卡采用國產高性能CPU,搭載自研目標跟蹤及跟蹤算法。快速目標跟蹤哪里好
近年來,我國多地智慧城市建設取得較好的成效,諸多創(chuàng)新技術和解決方案得到廣泛應用。而在智慧停車方面,許多公共場所也開始逐步落地應用。一車一桿的系統(tǒng),智能識別進出入車輛,控制車輛進出入,統(tǒng)計車位空缺數(shù),在很大程度上能夠優(yōu)化公共停車場的交通擁堵等問題,能夠提高安全和通行效率。智慧停車閘道裝有車牌識別的機箱,該機箱集攝像頭、圖像處理板、顯示屏、內存卡等設備于一體,其中圖像處理板內置車牌識別算法,在攝像頭獲取車牌照片后,板卡算法就能進行快速又高精度的信息識別,并上傳數(shù)據到后端控制中心,能夠有效控制車輛的合理出入,方面管理者優(yōu)化管理。湖北目標跟蹤經驗豐富慧視RK3399PRO圖像處理板能實現(xiàn)24小時、無間隙信息化監(jiān)控。
我國西部地區(qū)地形復雜、天氣多變,許多電網架設在高山流水之間,給電網的巡檢維護造成了不小的困難。于是,不同于傳統(tǒng)人工巡檢的智能化巡檢維護開始逐步應用。這種方式采用無人機加智能化機器人,其中無人機承擔巡檢工作,而智能化機器人進行維護,兩者互相配合。無人機搭載智能化吊艙,吊艙內置圖像識別傳感器,工程師可以通過遠程識別、抵近觀察等方式,找出問題所在。無人機機動性靈活性十足,能夠便捷去到許多人工難以到達的區(qū)域,巡檢無死角。無人機巡檢一次能夠抵得上三個人工同時作業(yè),效率成倍提升。
但這也遇到很多難點,通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進這個工作需要解決的前期難點。針對于這個問題,慧視光電利用GS弱網高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結合,推出了低延遲低帶寬圖傳解決方案。在一個窄帶收發(fā)信道內,例如在信道有效帶寬0.5Mb/s~2Mb/s內,多路視頻和交互控制共用一對收發(fā)信道,信道支持數(shù)據透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據;可實時調整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O備飛的更遠、走的更遠;可實現(xiàn)視頻中繼轉發(fā);能夠基于H265實時視頻編碼;可實現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機,實現(xiàn)15ms的低延遲編解碼,加上數(shù)據鏈傳輸延遲時間在30ms左右,目前業(yè)界前列。通用性強,使用更加靈活,適用更多應用場景;支持多路SDI視頻在低至500K帶寬情況下的同時傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時延約60ms(含相機、編解碼、顯示,不含傳輸),實現(xiàn)實時控制、實時打擊?;垡曃⑿碗p光吊艙非常適用于無人機領域。
識別算法的性能提升依靠大量的圖像標注,傳統(tǒng)模式下,需要人工對同一識別目標的數(shù)據集進行一步一步手動拉框,但是這個過程的痛苦只有做過的人才知道。越多素材的數(shù)據集對于算法的提升越有幫助,常規(guī)情況下,一個20秒時長30幀的視頻就多達兩三百張畫面需要標注,如果視頻時長或者視頻的幀速率增加,需要標注的幀畫面將會更多。小編曾試過標注一個時長為1分30秒幀速率為60的視頻,需要標注的畫面竟然多達5000多張,當我標注到500張的時候,整個人都已經麻木,并且出現(xiàn)情緒波動,望著剩下的4500多張待標注畫面,看著都頭皮發(fā)麻,怎么都不想繼續(xù)了。無人機吊艙能夠通過定制算法和精細定位技術實現(xiàn)農藥精細噴灑、農作物精細拋糧等操作。耐用目標跟蹤功能
無人機可能會受到敵方勢力或者強風等因素干擾,造成不同幅度的振動,從而影響板卡能否正常完成任務。快速目標跟蹤哪里好
跟蹤任務與檢測任務有著密切的關系。從輸入輸出的形式上來看,這兩個任務是極為相似的。它們均以圖片(或者視頻幀)作為模型的輸入,經過處理后,輸出一堆目標物置的矩形框。它們之間比較大的區(qū)別體現(xiàn)在對“目標物體”的定義上。對于檢測任務來說,目標物體屬于預先定義好的某幾個類別,如圖1左圖所示;而對于跟蹤任務來說,目標物體指的是在首幀中所指定的跟蹤個體,如圖1右圖所示。實際上,如果我們將每一個跟蹤的個體當成是一個類別的話,跟蹤任務甚至能被當成是一種特殊的檢測任務,稱為個體檢測(Instance Detection)??焖倌繕烁櫮睦锖?/p>