從軟件的角度來看,整個視頻跟蹤系統(tǒng)主要是由電視攝像機及控制、圖像獲取模塊、圖像顯示模塊、數(shù)據(jù)庫,運動檢測,目標跟蹤,報警輸入和人機接口模塊等組成的。視覺計算模塊是視頻跟蹤系統(tǒng)的重點,是實現(xiàn)目標檢測和跟蹤的關(guān)鍵,如圖3所示。一般采取先檢測后跟蹤(Detect-before-Track)方式,目標的檢測和跟蹤是緊密結(jié)合的。檢測是跟蹤的前因,并為跟蹤提供了目標的信息(如目標的位置,大小,模式和速度估計等),而跟蹤則是檢測的延續(xù),實時利用檢測得到的知識去驗證目標的存在。RK3399圖像處理板是我司自主研發(fā)的目標跟蹤板,該板卡采用國產(chǎn)高性能CPU,搭載自研目標跟蹤及跟蹤算法。網(wǎng)絡(luò)目標跟蹤
視覺跟蹤技術(shù)是計算機視覺領(lǐng)域(人工智能分支)的一個重要課題,有著重要的研究意義;且在導(dǎo)彈制導(dǎo)、視頻監(jiān)控、機器人視覺導(dǎo)航、人機交互、以及醫(yī)療診斷等許多方面有著廣泛的應(yīng)用前景。隨著研究人員不斷地深入研究,視覺目標跟蹤在近十幾年里有了突破性的進展,使得視覺跟蹤算法不只是局限于傳統(tǒng)的機器學(xué)習(xí)方法,更是結(jié)合了近些年人工智能熱潮—深度學(xué)習(xí)(神經(jīng)網(wǎng)絡(luò))和相關(guān)濾波器等方法,并取得了魯棒(robust)、精確、穩(wěn)定的結(jié)果。網(wǎng)絡(luò)目標跟蹤慧視RV1126圖像跟蹤板支持目標跟蹤識別目標(人、車)。
在深度學(xué)習(xí)中,解決訓(xùn)練數(shù)據(jù)不足常用的一個技巧是“預(yù)訓(xùn)練-微調(diào)”(Pretraining-finetune),即大數(shù)據(jù)集上面預(yù)訓(xùn)練模型,然后在小數(shù)據(jù)集上去微調(diào)權(quán)重。但是,在訓(xùn)練數(shù)據(jù)極其稀少的時候(只有個位數(shù)的訓(xùn)練圖片),這個技巧是無法奏效的。圖2展示了一個檢測模型預(yù)訓(xùn)練過后,在單張訓(xùn)練圖片上微調(diào)的過程:盡管訓(xùn)練集上逐漸收斂,但是檢測器仍無法檢測出測試圖片中的物體。這反映出了“預(yù)訓(xùn)練-微調(diào)”框架的泛化能力不足。利用SpeedDP經(jīng)過大量的數(shù)據(jù)訓(xùn)練后,機器就能夠精確檢測跟蹤圖像中的物體。
跟蹤任務(wù)與檢測任務(wù)有著密切的關(guān)系。從輸入輸出的形式上來看,這兩個任務(wù)是極為相似的。它們均以圖片(或者視頻幀)作為模型的輸入,經(jīng)過處理后,輸出一堆目標物置的矩形框。它們之間比較大的區(qū)別體現(xiàn)在對“目標物體”的定義上。對于檢測任務(wù)來說,目標物體屬于預(yù)先定義好的某幾個類別,如圖1左圖所示;而對于跟蹤任務(wù)來說,目標物體指的是在首幀中所指定的跟蹤個體,如圖1右圖所示。實際上,如果我們將每一個跟蹤的個體當(dāng)成是一個類別的話,跟蹤任務(wù)甚至能被當(dāng)成是一種特殊的檢測任務(wù),稱為個體檢測(Instance Detection)。成都智能化目標跟蹤供應(yīng)商。
目標運動估計是根據(jù)目標在過去的位置對目標的運動規(guī)律加以總結(jié),并以此對目標將來的運動狀態(tài)進行預(yù)測。正確的預(yù)測,可以縮小匹配的計算區(qū)域,大幅的降低匹配計算量。在視頻跟蹤系統(tǒng)中由于被跟蹤的目標處于運動狀態(tài),為了把目標始終保持在攝像機視野之內(nèi),必須對攝像機加以控制。在實際應(yīng)用中,攝像機被固定在云臺上,云臺本身不做平移運動,但可以控制云臺進行水平擺動和上下俯仰,從而帶動攝像機做相應(yīng)運動。所以,對攝像機的控制就是對云臺的控制?;垡暪怆妼V1126跟蹤板進行二次開發(fā),實現(xiàn)AI智能應(yīng)用。流暢目標跟蹤哪里買
慧視RK3399圖像跟蹤板支持目標跟蹤識別目標(人、車)。網(wǎng)絡(luò)目標跟蹤
目標跟蹤算法具有不同的分類標準,可根據(jù)檢測圖像序列的性質(zhì)分為可見光圖像跟蹤和紅外圖像跟蹤;又可根據(jù)運動場景對象分為靜止背景目標跟蹤和運動背景下的目標跟蹤。由于基于區(qū)域的目標跟蹤算法用的是目標的全局信息,比如灰度、色彩、紋理等。因此當(dāng)目標未被遮擋時,跟蹤精度非常高、跟蹤非常穩(wěn)定,對于跟蹤小目標效果很好,可信度高。但是在灰度級的圖像上進行匹配和全圖搜索,計算量較大,非常費時間,所以在實際應(yīng)用中實用性不強;其次,算法要求目標不能有太大的遮擋及其形變,否則會導(dǎo)致匹配精度下降,造成運動目標的丟失。網(wǎng)絡(luò)目標跟蹤