圖源：Pixabay

芥末堆文  近日，中國科學院自動化研究所發(fā)布了該所研制的新一代人工智能大模型——紫東太初 2.0。

據(jù)悉，“紫東太初”全模態(tài)大模型是在千億參數(shù)多模態(tài)大模型“紫東太初”1.0基礎上升級打造的2.0版本，在語音、圖像和文本三模態(tài)的基礎上，加入視頻、信號、3D點云等模態(tài)數(shù)據(jù)，研究突破了認知增強的多模態(tài)關聯(lián)等關鍵技術，具備全模態(tài)理解能力、生成能力和關聯(lián)能力，面向數(shù)字經濟時代加速通用人工智能的實現(xiàn)。

早在5月6日，在華為昇騰AI開發(fā)者峰會上，中國科學院自動化研究所“紫東太初”大模型研究中心常務副主任王金橋提到，基于華為全棧國產化軟硬件平臺昇騰AI，中國科學院自動化研究所和武漢人工智能研究院正在聯(lián)合打造“紫東太初”2.0全模態(tài)大模型。

據(jù)介紹，2019年開始，中科院自動化所在語音、文本、圖像等單模態(tài)大模型研究和應用基礎上，瞄準多模態(tài)大模型領域開始聯(lián)合攻關，2021年7月正式發(fā)布了全球首個千億參數(shù)多模態(tài)大模型“紫東太初”，以多模態(tài)技術探索通用人工智能發(fā)展道路。

“紫東太初”2.0可以理解三維場景、信號等數(shù)字物聯(lián)時代的重要信息，完成了音樂、圖片和視頻等數(shù)據(jù)之間的跨模態(tài)對齊，能夠處理音樂視頻分析、三維導航等多模態(tài)關聯(lián)應用需求，并可實現(xiàn)音樂、視頻等多模態(tài)內容理解和生成。

目前，產業(yè)應用前景方面，“紫東太初”大模型在神經外科手術導航、短視頻內容審核、法律咨詢、醫(yī)療多模態(tài)鑒別診斷、交通違規(guī)圖像研讀等領域開始了一系列應用。

中國科學院自動化研究所所長徐波表示：“自動化所以“紫東太初”大模型為基礎，持續(xù)探索與類腦智能、博弈智能等技術路徑的相互融合，最終實現(xiàn)可自主進化的通用人工智能，并將探索在更多領域發(fā)揮賦能價值，為促進我國數(shù)字經濟快速發(fā)展貢獻力量?！?/p>