多源視頻與遙感智能監管平臺為北京愛(ài)特拉斯信息科技有限公司(下文簡(jiǎn)稱(chēng):公司)完全自主知識產(chǎn)權服務(wù)產(chǎn)品,核心應用為利用視頻 AI 技術(shù),實(shí)現對違法事件、現場(chǎng)情況的自動(dòng)收集和記錄,并與各業(yè)務(wù)系統打通,形成業(yè)務(wù)流程閉環(huán),探索非接觸執法模式,能夠輔助政府對突發(fā)事件進(jìn)行快速響應,為政府遠程執法提供技術(shù)支持。
1.實(shí)現攝像頭視頻全景影像自動(dòng)拼接、勻光勻色;
2.實(shí)現視頻像素坐標與大地坐標相互轉換;
3.自然資源違法行為AI識別;
4.業(yè)務(wù)功能定制化。
產(chǎn)品的核心功能聚焦主要在:正射影像、全景處理、違法圖斑輔助核查、視頻AI場(chǎng)景識別、坐標雙向轉化五個(gè)方面。
核心功能 |
功能敘述 |
正射影像 |
對特定視頻段按照地理坐標進(jìn)行轉化。(具體方法為:計算地面點(diǎn)坐標、計算像點(diǎn)坐標、灰度內插、灰度賦值,主要步驟包括校正控制點(diǎn)采集和區域網(wǎng)平差,利用攝像機等提供的一些姿態(tài)參數以及與地面系統相關(guān)的處理參數來(lái)進(jìn)行粗校正,再結合衛星影像和DEM數據對影像做精細校正。) |
全景處理 |
對特定視頻段進(jìn)行全景拼接。(具體方法為:特征點(diǎn)提取,特征點(diǎn)匹配,控制點(diǎn)生成,全景模型優(yōu)化,接縫線(xiàn)提取,圖像勻色。為了提高拼接的速度,首先需要從視頻數據中抽取關(guān)鍵幀,關(guān)鍵幀之間有明顯的旋轉變化。對關(guān)鍵幀提取特征點(diǎn)和匹配,利用匹配的結果來(lái)生成控制點(diǎn),然后基于全景模型來(lái)進(jìn)行整體優(yōu)化計算出每個(gè)關(guān)鍵幀的姿態(tài),最后根據姿態(tài)來(lái)進(jìn)行拼接。在拼接過(guò)程中,接縫線(xiàn)提取和勻色算法可以解決不同關(guān)鍵幀的色調不一致的問(wèn)題) |
違法圖斑輔助核查 |
通過(guò)衛星影像傳違法圖斑的上傳,自動(dòng)檢索出對應的攝像頭,輔助查驗違法事件。(具體方法為:針對違法圖斑進(jìn)行樣本采集和深度學(xué)習模型訓練,實(shí)現違法圖斑在視頻中的智能識別;并通過(guò)像地坐標系的轉換,將違法圖斑的位置、時(shí)間投射到相應視頻或監控中,輔助違法圖斑核查) |
視頻AI場(chǎng)景識別 |
目前AI識別樣本場(chǎng)景有:施工行為識別(挖掘機開(kāi)挖)、建房進(jìn)度識別(違規建筑、建筑變化)、河湖監測(河道河灘修筑道路、河道河灘建設房屋、河道河灘種植樹(shù)木、河道河灘挖沙取土、河道河灘亂堆垃圾、網(wǎng)箱養殖)、耕地監測(耕地變化檢測)、人為破壞監測(人或者其他動(dòng)物進(jìn)入識別、傾倒垃圾、暴露垃圾、區域入侵、工程車(chē)監測)生態(tài)修復監測(黑臭水體、邊坡種草)渣土監測(傾倒渣土),在樣本的基礎上,針對不同的地物進(jìn)行深度學(xué)習模型訓練算法,主要采用全卷積網(wǎng)絡(luò )(CNN)與條件隨機場(chǎng)(CRF)算法。在經(jīng)過(guò)不斷的模型研發(fā)和測試之后,構建較為穩健的應用模型。針對實(shí)際地物識別應用場(chǎng)景、進(jìn)行相應的違法行為規則編制。 |
坐標雙向轉化 |
滿(mǎn)足大地坐標轉視頻坐標,同時(shí)也滿(mǎn)足視頻坐標轉大地坐標。 |
執法監測、視頻監控、智能交通、行車(chē)輔助等。