算法視頻分析服務(wù)平臺(tái)(以下簡(jiǎn)稱IAS100)由和普威視自主研發(fā),該平臺(tái)內(nèi)部采用基于傳統(tǒng)機(jī)器學(xué)習(xí)+深度學(xué)習(xí)融合的智能分析算法,可高效實(shí)現(xiàn)對(duì)關(guān)注事物如人、車(chē)、船、無(wú)人機(jī)、動(dòng)物等目標(biāo)的結(jié)構(gòu)化信息提取,為應(yīng)用軟件系統(tǒng)提供有效的智能分析結(jié)果,為24小時(shí)無(wú)人值守的監(jiān)控場(chǎng)景提供智能化手段、節(jié)省人力和物力。平臺(tái)采用Socket+Http+RestAPI實(shí)現(xiàn)了對(duì)傳入視頻幀中的關(guān)注目標(biāo)進(jìn)行檢測(cè)、分類、跟蹤等智能化的分析,實(shí)現(xiàn)可見(jiàn)光、熱像雙光視頻的智能分析,并以結(jié)構(gòu)化信息輸出檢測(cè)結(jié)果。
在傳統(tǒng)算法上主要涉及背景建模、報(bào)警入侵、單目標(biāo)跟蹤、多目標(biāo)軌跡分析和全景拼接,深度學(xué)習(xí)方面通過(guò)對(duì)水、陸、空等常見(jiàn)目標(biāo)的訓(xùn)練,已具備檢測(cè)識(shí)別人、車(chē)、船、無(wú)人機(jī)等不下于45種目標(biāo)和動(dòng)作。通過(guò)在邊防線、軍事基地、沙漠、湖泊、海洋等各個(gè)場(chǎng)景的應(yīng)用和錘煉,平臺(tái)已具備較強(qiáng)的環(huán)境適應(yīng)能力,可有效應(yīng)對(duì)雨、雪、風(fēng)、沙、煙霧等各種弱視覺(jué)的環(huán)境。
公司基于光電技術(shù)領(lǐng)域的優(yōu)勢(shì),提供遠(yuǎn)距離目標(biāo)觀瞄光電設(shè)備的同時(shí),在視頻圖像處理上具備對(duì)遠(yuǎn)距離小目標(biāo)的算法檢測(cè)和識(shí)別技術(shù),并結(jié)合光電控伺服制技術(shù)有效利用在了邊海防、基地、化工、林業(yè)等各種行業(yè)領(lǐng)域,并對(duì)各個(gè)領(lǐng)域進(jìn)行了深耕細(xì)化,使得算法技術(shù)更能切合實(shí)際使用的場(chǎng)景,發(fā)揮出巨大的價(jià)值。同其他廠家對(duì)比,我司的算法技術(shù)傾向于可見(jiàn)光、熱成像的小目標(biāo)檢測(cè)和識(shí)別,并能基于場(chǎng)景做深入的優(yōu)化,在同類行業(yè)中具有領(lǐng)先的優(yōu)勢(shì)。
1)動(dòng)目標(biāo)強(qiáng)化檢測(cè):支持采用目標(biāo)識(shí)別、目標(biāo)軌跡跟蹤的方式強(qiáng)化極大和極小目標(biāo)的運(yùn)動(dòng)檢測(cè)、拌線檢測(cè)和區(qū)域入侵檢測(cè);
2)人體動(dòng)作多樣性檢測(cè):支持人體在蹲、走、跑、跳、匍匐、游泳等各種動(dòng)作下的極大和極小目標(biāo)檢測(cè);
3)多種類目標(biāo)檢測(cè):支持檢測(cè)人、車(chē)、船、動(dòng)物、鳥(niǎo)、無(wú)人機(jī)、空飄物、飛機(jī)、起落架等各種目標(biāo);
4)雙光視頻檢測(cè):支持可見(jiàn)光、熱成像視頻同步同規(guī)則、同步異規(guī)則、錯(cuò)時(shí)同規(guī)則和錯(cuò)時(shí)異規(guī)則的檢測(cè)方式;
5)遠(yuǎn)距離小目標(biāo):支持對(duì)5*5像素以下的小目標(biāo)實(shí)現(xiàn)入侵告警檢測(cè);支持對(duì)15*15像素以下的超小目標(biāo)進(jìn)行檢測(cè)識(shí)別;
6)云邊端多形態(tài)部署:支持整體的系統(tǒng)解決方案,實(shí)現(xiàn)軟件+算法的業(yè)務(wù)整合;支持后端算法分析平臺(tái)、智能算法分析套件和算法模型授權(quán)的合作方式。
廣泛應(yīng)用于人車(chē)目標(biāo)檢測(cè),森林、油庫(kù)、化工廠、園區(qū)煙火檢測(cè),機(jī)場(chǎng)、核電站、城市低空無(wú)人機(jī)檢測(cè),港口、碼頭、湖泊、海洋船舶檢測(cè)。
型號(hào)名稱 | IAS100 AI算法視頻分析服務(wù)平臺(tái) | |
適用設(shè)備 | 光電轉(zhuǎn)臺(tái)、光電云臺(tái)、電子哨兵、 通用安防攝像機(jī) | |
系統(tǒng)性能 | 單服務(wù)支持不少于16路視頻實(shí)時(shí)檢測(cè)(具體路數(shù)受限于硬件配置) 單服務(wù)支持不少于100路視頻分時(shí)檢測(cè)(具體路數(shù)受限于硬件配置) | |
圖像分析 | 1. 目標(biāo)跟蹤:支持單目標(biāo)和多目標(biāo)的跟蹤算法、目標(biāo)軌跡實(shí)時(shí)顯示;支持目標(biāo)識(shí)別自動(dòng)跟蹤(選配)、目標(biāo)入侵區(qū)域自動(dòng)跟蹤、目標(biāo)撞線自動(dòng)跟蹤、手動(dòng)選擇目標(biāo)跟蹤、跟蹤目標(biāo)算法識(shí)別(選配)、跟蹤過(guò)程自動(dòng)變倍、目標(biāo)丟失自動(dòng)找回;支持水、陸、空?qǐng)鼍跋碌哪繕?biāo)跟蹤;支持KCF、光流跟蹤法算法;支持可見(jiàn)光視頻跟蹤、熱成像視頻跟蹤、轉(zhuǎn)臺(tái)類設(shè)備角速度跟蹤和PID跟蹤、云臺(tái)類設(shè)備速度等級(jí)跟蹤 2. 全景拼接:支持可見(jiàn)光全景拼接、熱成像全景拼接;支持水平360°、俯仰≥50°的無(wú)縫全景拼接;支持全景圖上傳、下載的功能 3. 語(yǔ)義分割:支持可見(jiàn)光視頻語(yǔ)義分割、熱成像視頻語(yǔ)義分割;支持基于deeplabv3系列的語(yǔ)義分割、基于DNANet的目標(biāo)分割模型;支持對(duì)人、車(chē)、船、無(wú)人機(jī)、動(dòng)物等目標(biāo)、物體的像素級(jí)分割;支持天空和地面的分離、小目標(biāo)和雜亂背景的分離 4. 動(dòng)目標(biāo)檢測(cè):支持運(yùn)動(dòng)目標(biāo)檢測(cè)、目標(biāo)拌線檢測(cè)、區(qū)域入侵檢測(cè);支持采用目標(biāo)識(shí)別(選配)、目標(biāo)軌跡跟蹤的方式強(qiáng)化極大和極小目標(biāo)的運(yùn)動(dòng)檢測(cè)、拌線檢測(cè)和區(qū)域入侵檢測(cè);支持可見(jiàn)光視頻動(dòng)目標(biāo)檢測(cè)、熱成像視頻動(dòng)目標(biāo)檢測(cè)、運(yùn)動(dòng)目標(biāo)軌跡實(shí)時(shí)顯示 | |
運(yùn)動(dòng)目標(biāo)檢測(cè)能力 | 可見(jiàn)光1080P分辨率下支持檢測(cè)不小于5*5像素的目標(biāo) | |
熱成像D1分辨率下支持檢測(cè)不小于3*3像素的目標(biāo) | ||
增強(qiáng)后檢測(cè)準(zhǔn)確度達(dá)到95%以上 | ||
地面目標(biāo)識(shí)別服務(wù)(選配) | 1. 人員檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)人員目標(biāo)的檢測(cè);支持人體在蹲、走、跑、跳、匍匐、游泳等各種動(dòng)作下的極大和極小目標(biāo)檢測(cè) 2. 支持可見(jiàn)光視頻、熱成像視頻對(duì)人臉的檢測(cè) 3. 車(chē)輛檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)車(chē)輛目標(biāo)的檢測(cè);支持檢測(cè)轎車(chē)、面包車(chē)、客車(chē)、卡車(chē)、皮卡、油罐車(chē)、三輪車(chē)、自行車(chē)、挖掘機(jī)、拖拉機(jī)、工程車(chē)等不同類型的車(chē)輛目標(biāo) 4. 動(dòng)物檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)動(dòng)物目標(biāo)的檢測(cè);支持檢測(cè)牛、羊、馬、駱駝、貓、狗等各種動(dòng)物的目標(biāo) 5. 煙火檢測(cè):支持可見(jiàn)光視頻對(duì)煙和火目標(biāo)的檢測(cè)、熱成像視頻對(duì)火的檢測(cè);支持太陽(yáng)、反光、煙筒等常見(jiàn)熱源目標(biāo)的檢測(cè) | |
檢測(cè)能力 | 可見(jiàn)光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于8*8,最大目標(biāo)像素不小于200*160 | ||
人、車(chē)、動(dòng)物目標(biāo)像素高于30*30時(shí),檢測(cè)準(zhǔn)確率可達(dá)96%以上 | ||
煙火目標(biāo)像素高于50*50時(shí),檢測(cè)準(zhǔn)確率可達(dá)90%以上 | ||
單顯卡支持不低于100幀/s的檢測(cè)速度 單服務(wù)支持不少于4張顯卡同時(shí)檢測(cè) | ||
水面目標(biāo)識(shí)別服務(wù)(選配) | 1. 船舶檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)船舶目標(biāo)的檢測(cè);支持檢測(cè)客輪、貨船、漁船、快艇、艦艇、采砂船等不同類型的船舶目標(biāo) 2. 支持熱成像視頻對(duì)水面上人體游泳目標(biāo)的檢測(cè) 3. 支持可見(jiàn)光視頻、熱成像視頻對(duì)垂釣?zāi)繕?biāo)的檢測(cè)(選配) 4. 支持可見(jiàn)光視頻、熱成像視頻對(duì)漂浮物目標(biāo)的檢測(cè)(選配) | |
檢測(cè)能力 | 可見(jiàn)光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于15*15,最大目標(biāo)像素不小于200*160 | ||
船舶目標(biāo)像素高于30*30時(shí),檢測(cè)準(zhǔn)確率可達(dá)95%以上 | ||
游泳、垂釣?zāi)繕?biāo)素高于35*35時(shí),檢測(cè)準(zhǔn)確率可達(dá)85%以上 | ||
漂浮物目標(biāo)素高于50*50時(shí),檢測(cè)準(zhǔn)確率可達(dá)85%以上 | ||
單顯卡支持不低于100幀/s的檢測(cè)速度 單服務(wù)支持不少于4張顯卡同時(shí)檢測(cè) | ||
低空目標(biāo)識(shí)別服務(wù)(選配) | 1. 無(wú)人機(jī)檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)無(wú)人機(jī)目標(biāo)的檢測(cè);支持檢測(cè)四旋翼、六旋翼、固定翼等低空無(wú)人機(jī)目標(biāo) 2. 空飄物檢測(cè):支持可見(jiàn)光視頻對(duì)風(fēng)箏、氣球等空飄物目標(biāo)的檢測(cè);支持熱成像視頻對(duì)氣球目標(biāo)的檢測(cè) 3. 支持可見(jiàn)光視頻、熱成像視頻對(duì)低空中鳥(niǎo)的檢測(cè) 4. 飛機(jī)檢測(cè):支持可見(jiàn)光視頻、熱成像視頻對(duì)飛機(jī)目標(biāo)的檢測(cè);支持直升機(jī)、民航、起落架、戰(zhàn)斗機(jī)(選配)等目標(biāo)的檢測(cè) | |
檢測(cè)能力 | 可見(jiàn)光1080P分辨率下可檢出的 最小目標(biāo)像素不大于10*10,最大目標(biāo)像素不小于300*240 | |
熱成像D1分辨率下可檢出的 最小目標(biāo)像素不大于8*8,最大目標(biāo)像素不小于200*160 | ||
無(wú)人機(jī)目標(biāo)像素高于30*30時(shí),檢測(cè)準(zhǔn)確率可達(dá)95%以上 | ||
空飄物目標(biāo)像素高于30*30時(shí),檢測(cè)準(zhǔn)確率可達(dá)80%以上 | ||
單顯卡支持不低于100幀/s的檢測(cè)速度 單服務(wù)支持不少于4張顯卡同時(shí)檢測(cè) | ||
視頻處理 | 1. 拉流解碼:支持設(shè)備直連取流、流媒體轉(zhuǎn)發(fā)取流的視頻解碼;支持1080P、1280*1024、720P、D1、640*512等常見(jiàn)視頻分辨率視頻的解碼、裁剪和壓縮;支持一處解碼供多模型、多算法同步使用 2. 視頻編碼:支持解碼視頻和推理信息的融合編碼;支持編碼視頻的壓縮、視頻服務(wù)發(fā)布和定向推送 3. 推理回放:支持視頻幀的模型推理、目標(biāo)標(biāo)記、遮擋、屬性提取、目標(biāo)信息存儲(chǔ)、推理視頻存儲(chǔ)和目標(biāo)告警推送;支持1幀/Ns—25幀/s的推理幀率控制;支持推理記錄、視頻的查詢、回放和下載 4. 模型管理:支持模型上傳、刪除、升級(jí)等管理操作;支持增加、刪除、瀏覽、更名、隱藏等推理標(biāo)簽的管理操作;支持多進(jìn)程、多模型的算法業(yè)務(wù)調(diào)度;支持手動(dòng)上傳視頻、圖片測(cè)試算法模型的推理效果 | |
硬件適配 | 1. 支持海思芯片、atlas、寒武紀(jì)、英偉達(dá)等各類芯片、GPU的算法移植和適配 2. 支持云、邊、端的形式部署;支持后端服務(wù)分布式組網(wǎng)、邊端智能1+N檢測(cè)以及端側(cè)小模型移植適配 | |
接口協(xié)議 | 1. 接入?yún)f(xié)議: RTSP、GB28181(選配)視頻協(xié)議接入;支持海康、大華、宇視等主流廠家設(shè)備協(xié)議接入 2. 二次開(kāi)發(fā):支持SDK二次開(kāi)發(fā);支持Restful API平臺(tái)對(duì)接;支持提供RTSP格式的推理視頻流 |