歡迎來到 阿儀網

免費注冊

首頁 | 產品 | 求購 | 資訊 | 專題 | 找廠商 | 打聽 | 人才 | 品牌 | 資料 | 技術文獻 | 展會 | 耗材 | 配件 | 新品 | 促銷 | 書籍 | 招標 | 優質儀器
廣告
廣告

您的位置:首頁>儀器儀表資訊>實驗室動態>自動化所研發出跨模態通用人工智能平臺“紫東太初”

自動化所研發出跨模態通用人工智能平臺“紫東太初”

發布時間:2021/7/14 16:46:38編輯:Ma Liang
已有1062人關注

 
   7月9日,中國科學院自動化研究所在2021世界人工智能大會(WAIC2021)上就人工智能的最新進展進行報告,發布了自動化所研發的跨模態通用人工智能平臺——“紫東太初”。
  “紫東太初”跨模態通用人工智能平臺以多模態大模型為核心,基于全棧國產化基礎軟硬件平臺,可支撐全場景AI應用。多模態預訓練模型被廣泛認為是從限定領域的弱人工智能邁向通用人工智能路徑的探索。“紫東太初”跨模態通用人工智能平臺瞄準成為實現通用人工智能的目標,對促進智能世界的發展具有重要意義。
  依托面向超大規模的高效分布式訓練框架,自動化所構建了具有性能優良的中文預訓練模型、語音預訓練模型和視覺預訓練模型,并開拓性地通過跨模態語義關聯實現了視覺-文本-語音三模態統一表示,構建了三模態預訓練大模型,賦予跨模態通用人工智能平臺多種核心能力。
  “紫東太初”兼具跨模態理解和生成能力。與單模態和圖文兩模態相比,其采用一個大模型就能夠靈活支撐圖-文-音全場景AI應用,具有了在無監督情況下多任務聯合學習、并快速遷移到不同領域數據的能力。引入語音模態后的多模態預訓練模型,可實現共性圖文音語義空間表征和利用,并直接實現三模態的統一表示。特別的是,該研究使“以圖生音”和“以音生圖”成為現實,為更廣泛、更多樣的下游任務提供了模型基礎支撐,達成AI在如視頻配音、語音播報、標題摘要、海報創作等更多元場景的應用。
  此外,自動化所研發團隊還提出了弱關聯三模態數據的語義統一表達,可同時支持三種或任兩種模態弱關聯數據進行預訓練,有效降低了多模態數據收集與清洗成本。
  總結來說,此跨模態通用人工智能平臺包括三大關鍵技術和六大核心能力。三大關鍵技術是多模態理解與生成的多任務統一建模、面向國產化軟硬件的高效訓練與部署、多模態預訓練模型架構設計與優化。六大核心能力體現為多模態統一表示與語義關聯、跨模態內容轉化與生成、預訓練模型網絡架構設計、標注受限自監督模型學習、模型適配與分布式訓練、模型輕量化與推理加速。
  會上,自動化所長徐波展示了基于“紫東太初”平臺打造的虛擬人“小初”,并進行通用多模態大模型的人機對話演示,展示了不同模態間的互相轉換和生成實例,涵蓋視頻描述、智能問答、圖像檢索、吟詩作賦、中文續寫、雙語翻譯、語音識別等多個功能。這表明,通過圖文音三模態的關聯與協同能夠有效提升機器的理解和生成能力。
  “大數據 大模型 多模態”將改變當前單一模型對應單一任務的人工智能研發范式,多模態大模型將成為不同領域的共性平臺技術,是邁向通用人工智能路徑的探索,具有廣闊的應用前景;全棧國產化通用人工智能平臺的實踐對我國實現AI領域科技創新具有重要意義。
 

微信號:ayiwangapp17

(來源: 中國科學院科技產業網 )

標簽:

上一篇:南京地理所在太湖溶解有機碳儲量和收支遙感研究中取得進展 下一篇:地質地球所揭示木星極區軟X-射線極光成因之謎

為您推薦

相關新聞

關于2021上半年色譜類儀器新品的盤點 發布時間:2021/7/30 17:22:42
       導讀:作為分析儀器的主要分類之一,色譜類儀器無論在實驗室檢測還是在現場檢測都發揮著重要作用,廣泛應用于環境、食品、制藥、化工以
“十四五”規劃大力發展制造業,對藥機行業將有影響 發布時間:2021/7/30 17:17:32
       此前,我國“十四五”規劃綱要提出,將加快發展現代產業體系,鞏固壯大實體經濟根基,包括深入實施制造強國戰
科學儀器助力古老動物探尋與研究 發布時間:2021/7/30 17:13:32
導讀:四十六億年前,世界混元。從單細胞生物到多細胞生物,無脊椎動物到脊椎動物,從四肢爬行到獨立行走。生命發展至今是自然生命開花散葉、不斷進化的結果,其中化石是重要親歷者和見證者。   化石是
分子細胞卓越中心發現長非編碼RNA對細胞核仁結構和RNA聚合酶I轉錄的調控機制 發布時間:2021/7/30 17:08:47
  7月30日,《科學》(Science)以Research Article形式發表了中國科學院分子細胞科學卓越創新中心(生物化學與細胞生物學研究所)研究員陳玲玲研究組和研究員劉珈
研究基于三明治型核殼結構設計實現稀土納米晶高效能量遷移上轉換發光 發布時間:2021/7/30 17:07:41
  稀土摻雜上轉換納米晶作為新型熒光探針已廣泛應用于生物檢測和成像中。特別地,由于鋱離子(Tb3 )的5D4→7FJ躍遷的能量遷移上轉換發光不受納米晶表面或近鄰有機分子/
山東省淄博第五中學內配-實驗室設備、實驗器材項目招標公告 發布時間:2021/7/30 16:57:22
山東省淄博第五中學內配-實驗室設備、實驗器材項目招標公告項目概況山東省淄博第五中學內配-實驗室設備、實驗器材項目 招標項目的潛在投標人應登錄淄博市公共資源交易平臺獲取招標文件,并于2021年
廣告

圖片視點

分子細胞卓越中心發現長非編碼RNA對細胞核仁結構和RNA聚合酶I轉錄的調控機制

優質產品

版權聲明

凡本網注明"來源:阿儀網"的所有作品,版權均屬于阿儀網,未經本網授權不得轉載、摘編或利 用其它方式使用。已獲本網授 權的作品,應在授權范圍內使用,并注明"來源:阿儀網"。違者本網將追究相關法律責任。

本網凡注明"來源:xxx(非本網)"的作品,均轉載自其它媒體,轉載目的在于傳遞更多信息,并不代表本網贊同其觀點和對其 真實性負責,且不承擔此類作品侵權行為的直接責任及連帶責任。如其他媒體、網站或個人從本網下載使用 ,必須保留本網注明 的"稿件來源",并自負版權等法律責任。

如涉及作品內容、版權等問題,請在作品發表之日起兩周內與本網聯系,否則視為放棄相關權利。

旗下頻道

色譜儀 光譜儀 反應釜 試驗箱 試驗機 攪拌器 培養箱 離心機 水分測定 氣體檢測 量熱儀 石油儀器 純水器 比表面儀 溫度記錄 流量計 萬用表 顯微鏡 粒度儀 測厚儀 硬度計 酸度計 元素分析 生物試劑 電線電纜 天平衡器 傳感器 食品檢測 壓力儀表 電化學 測厚儀 閥門儀表 電力儀表 干燥設備 藥物檢測
N.第三、第四季度阿儀網實驗室常用設備采購意向有獎調研
亚洲精品无码鲁网中文电影_亚洲精品无码不卡在线播放_亚洲精品无播放器在线播放