圖源：Pixabay

芥末堆文  近日，中國科學(xué)院自動(dòng)化研究所發(fā)布了該所研制的新一代人工智能大模型——紫東太初 2.0。

據(jù)悉，“紫東太初”全模態(tài)大模型是在千億參數(shù)多模態(tài)大模型“紫東太初”1.0基礎(chǔ)上升級打造的2.0版本，在語音、圖像和文本三模態(tài)的基礎(chǔ)上，加入視頻、信號、3D點(diǎn)云等模態(tài)數(shù)據(jù)，研究突破了認(rèn)知增強(qiáng)的多模態(tài)關(guān)聯(lián)等關(guān)鍵技術(shù)，具備全模態(tài)理解能力、生成能力和關(guān)聯(lián)能力，面向數(shù)字經(jīng)濟(jì)時(shí)代加速通用人工智能的實(shí)現(xiàn)。

早在5月6日，在華為昇騰AI開發(fā)者峰會(huì)上，中國科學(xué)院自動(dòng)化研究所“紫東太初”大模型研究中心常務(wù)副主任王金橋提到，基于華為全棧國產(chǎn)化軟硬件平臺昇騰AI，中國科學(xué)院自動(dòng)化研究所和武漢人工智能研究院正在聯(lián)合打造“紫東太初”2.0全模態(tài)大模型。

據(jù)介紹，2019年開始，中科院自動(dòng)化所在語音、文本、圖像等單模態(tài)大模型研究和應(yīng)用基礎(chǔ)上，瞄準(zhǔn)多模態(tài)大模型領(lǐng)域開始聯(lián)合攻關(guān)，2021年7月正式發(fā)布了全球首個(gè)千億參數(shù)多模態(tài)大模型“紫東太初”，以多模態(tài)技術(shù)探索通用人工智能發(fā)展道路。

“紫東太初”2.0可以理解三維場景、信號等數(shù)字物聯(lián)時(shí)代的重要信息，完成了音樂、圖片和視頻等數(shù)據(jù)之間的跨模態(tài)對齊，能夠處理音樂視頻分析、三維導(dǎo)航等多模態(tài)關(guān)聯(lián)應(yīng)用需求，并可實(shí)現(xiàn)音樂、視頻等多模態(tài)內(nèi)容理解和生成。

目前，產(chǎn)業(yè)應(yīng)用前景方面，“紫東太初”大模型在神經(jīng)外科手術(shù)導(dǎo)航、短視頻內(nèi)容審核、法律咨詢、醫(yī)療多模態(tài)鑒別診斷、交通違規(guī)圖像研讀等領(lǐng)域開始了一系列應(yīng)用。

中國科學(xué)院自動(dòng)化研究所所長徐波表示：“自動(dòng)化所以“紫東太初”大模型為基礎(chǔ)，持續(xù)探索與類腦智能、博弈智能等技術(shù)路徑的相互融合，最終實(shí)現(xiàn)可自主進(jìn)化的通用人工智能，并將探索在更多領(lǐng)域發(fā)揮賦能價(jià)值，為促進(jìn)我國數(shù)字經(jīng)濟(jì)快速發(fā)展貢獻(xiàn)力量?！?/p>