快科技2月18日消息,據(jù)“??低暋惫傥l(fā)文,??低晫⒋髤?shù)量、大樣本量的圖文多模態(tài)大模型與嵌入式智能硬件深度融合,發(fā)布多模態(tài)大模型文搜存儲(chǔ)系列產(chǎn)品——文搜NVR、文搜CVR。
??低曃乃汛鎯?chǔ)系列產(chǎn)品利用多模態(tài)大模型實(shí)現(xiàn)自然語(yǔ)言與視頻圖像的跨模態(tài)信息檢索應(yīng)用,輸入一句話(huà)、一個(gè)詞就能秒級(jí)檢索目標(biāo)圖像。
基于多模態(tài)大模型,文搜存儲(chǔ)產(chǎn)品實(shí)現(xiàn)了海量視圖數(shù)據(jù)的開(kāi)放式語(yǔ)義檢索,不再局限于傳統(tǒng)的錄像回放及固定屬性查找。
根據(jù)需求,在搜索框內(nèi)輸入文字描述(一句話(huà)或一個(gè)詞等),例如輸入“打電話(huà)”、“白色面包車(chē)”、 “騎電瓶車(chē)未戴頭盔”、“自行車(chē)”、“小推車(chē)”、“小狗”等開(kāi)放文字語(yǔ)義描述,即可搜索出相關(guān)目標(biāo)。
搜索范圍廣,既支持人、機(jī)動(dòng)車(chē)、非機(jī)動(dòng)車(chē)等安防場(chǎng)景的高頻目標(biāo)搜索 ,也廣泛支持特定物品、異常行為等特征搜索。
利用多模態(tài)大模型技術(shù),提取圖像與擬搜索語(yǔ)言的特征,并將圖像特征與搜索語(yǔ)言中關(guān)鍵語(yǔ)義特征對(duì)齊,實(shí)現(xiàn)高精度搜索。
如能夠理解 “穿紅色衣服”、“黑色背包”、“戴帽子”、“拉桿箱”、“棍棒”等對(duì)目標(biāo)的文字描述,精準(zhǔn)搜索出相關(guān)目標(biāo)。針對(duì)常見(jiàn)目標(biāo)的檢索,TOP20命中率可達(dá)90%以上。
同時(shí),其采用數(shù)據(jù)三級(jí)緩存、均衡抽樣、異步加載等創(chuàng)新技術(shù),實(shí)現(xiàn)文本搜索結(jié)果的秒級(jí)顯示。
除了手動(dòng)輸入文本進(jìn)行檢索外,貼合用戶(hù)常用情景,增設(shè)找人、找機(jī)動(dòng)車(chē)、找非機(jī)動(dòng)車(chē)、找寵物、找常用物品等快捷搜索入口,還支持用戶(hù)自定義編輯搜索慣語(yǔ),讓操作更簡(jiǎn)單,使用更便捷。
- QQ:61149512