http://bfqmb.cn 2023-04-10 14:29 來源:財聯(lián)社
短短一周不到,視覺領域接連迎來新模型“炸場”,圖像識別門檻大幅降低——
這場AI熱潮中鮮見動靜的Meta終于出手,推出Segment Anything工具,可準確識別圖像中的對象,模型和數(shù)據(jù)全部開源;
國內智源研究院視覺團隊也提出了通用分割模型SegGPT(Segment Everything in Context),這也是首個利用視覺上下文完成各種分割任務的通用視覺模型。
其中,Meta的項目包括模型Segment Anything Model(SAM)、數(shù)據(jù)集Segment Anything 1-Billion mask dataset(SA-1B),公司稱后者是有史以來最大的分割數(shù)據(jù)集。
引起業(yè)內轟動的便是這一SAM模型:
英偉達人工智能科學家Jim Fan將Meta的這項研究稱作計算機視覺領域的“GPT-3時刻”之一——其分割方法可以通用,可對不熟悉的物體和圖像進行零樣本泛化,初步驗證了多模態(tài)技術路徑及其泛化能力。
進一步來說,SAM可以靈活集成于更大的AI系統(tǒng)。例如,理解網(wǎng)頁的視覺和文本內容;在AR/VR領域,將頭顯用戶視線作為提示來選擇對象,然后將其“提升”到3D中;對于內容創(chuàng)作者,SAM可提取圖像區(qū)域以進行拼貼或視頻編輯;SAM還可通過定位動物或物體在視頻中進行研究和跟蹤。
另一方面,智源研究院視覺團隊的SegGPT模型則更偏重于批量化標注分割能力。無論是在圖像還是視頻環(huán)境,用戶在畫面上標注識別一類物體,即可批量化識別分割出其他所有同類物體。
例如,若在一張圖像中標注彩虹,便可將其他圖像中的彩虹也一同批量識別分割出來。
西部證券指出,Meta此次推出SAM,預示著大模型在多模態(tài)發(fā)展方面更進一步,布局計算機視覺/視頻的廠商有望持續(xù)受;還有券商補充稱,SAM模型突破了機器視覺底層技術。
國盛證券預計,預計1-5年內,多模態(tài)發(fā)展將帶來AI泛化能力提升,通用視覺、通用機械臂、通用物流搬運機器人、行業(yè)服務機器人、真正的智能家居會進入生活;5-10年內,結合復雜多模態(tài)方案的大模型有望具備完備的與世界交互的能力,在通用機器人、虛擬現(xiàn)實等領域得到應用。