“紫東太初”全模態(tài)大模型發(fā)布 AI聽《月光曲》就能聊貝多芬
(資料圖)
湖北日?qǐng)?bào)訊（記者張真真、通訊員詹欣芮）透過《月光曲》就可以暢談貝多芬的故事，在三維場景里實(shí)現(xiàn)精準(zhǔn)定位，通過圖像與聲音結(jié)合完成場景分析……6月16日，在人工智能框架生態(tài)峰會(huì)2023上，中國科學(xué)院自動(dòng)化研究所聯(lián)合武漢人工智能研究院正式發(fā)布“紫東太初”全模態(tài)大模型，種種新奇表現(xiàn)贏得現(xiàn)場觀眾熱烈反響。
“紫東太初”全模態(tài)大模型，是在千億參數(shù)多模態(tài)大模型“紫東太初”1.0基礎(chǔ)上升級(jí)打造的2.0版本。
2021年9月，中國科學(xué)院自動(dòng)化研究所成功打造了“紫東太初”1.0多模態(tài)大模型，貫通語音、圖像、文字等信息。比如，AI（人工智能）在學(xué)習(xí)時(shí)，“看到”貓的圖像或者聽到貓的叫聲，就能準(zhǔn)確識(shí)別出是貓。
除“圖-音-文”外，“紫東太初”2.0加入了視頻、傳感信號(hào)、3D點(diǎn)云等更多模態(tài)，完成了音樂、圖片和視頻等數(shù)據(jù)之間的跨模態(tài)對(duì)齊，能夠處理音樂視頻分析、三維導(dǎo)航等多模態(tài)關(guān)聯(lián)應(yīng)用需求，并可實(shí)現(xiàn)音樂、視頻等多模態(tài)內(nèi)容理解和生成。
中國科學(xué)院自動(dòng)化研究所相關(guān)負(fù)責(zé)人表示，從1.0到2.0，“紫東太初”大模型打通了感知、認(rèn)知乃至決策的交互屏障，使人工智能進(jìn)一步感知世界、認(rèn)知世界，從而延伸出更加強(qiáng)大的通用能力。
“紫東太初”2.0以自動(dòng)化所自研算法為核心，以國產(chǎn)化基礎(chǔ)軟硬件平臺(tái)昇騰AI為基礎(chǔ)，依托武漢人工智能計(jì)算中心算力支持，著力打造全棧國產(chǎn)化通用人工智能底座，協(xié)同構(gòu)建我國通用人工智能自主可控發(fā)展生態(tài)。
目前，“紫東太初”大模型已展現(xiàn)出廣闊的產(chǎn)業(yè)應(yīng)用前景，在神經(jīng)外科手術(shù)導(dǎo)航、短視頻內(nèi)容審核、法律咨詢、醫(yī)療多模態(tài)鑒別診斷、交通違規(guī)圖像研讀等領(lǐng)域開始了一系列引領(lǐng)性、示范性應(yīng)用。
在醫(yī)療場景，“紫東太初”大模型部署于神經(jīng)外科機(jī)器人，可實(shí)現(xiàn)在術(shù)中實(shí)時(shí)融合視覺、觸覺等多模態(tài)信息，協(xié)助醫(yī)生對(duì)手術(shù)場景進(jìn)行實(shí)時(shí)推理判斷，并嘗試在人類罕見病診療這個(gè)挑戰(zhàn)性醫(yī)學(xué)領(lǐng)域有所突破。
標(biāo)簽：
搶先讀
- 世界熱點(diǎn)評(píng)！廣西桂林市舉辦2023年“世界認(rèn)可日”活動(dòng)
- 全球觀速訊丨黑河：愛輝區(qū)璦琿鎮(zhèn)大棚養(yǎng)螞蚱 “蹦”出致富路
- 祝學(xué)生中考加油的句子有哪些 快播報(bào)
- 2018黑龍江預(yù)科班有哪些學(xué)?？忌〈髮I(yè) 每日速看
- 投資平穩(wěn)增長，服務(wù)業(yè)回升向好 1-5月杭州經(jīng)濟(jì)運(yùn)行延續(xù)恢復(fù)態(tài)勢 世界快報(bào)
- 湖南今起三天迎強(qiáng)降雨過程 長沙常德等地有暴雨
- 云南勐綠高速建設(shè)順利推進(jìn) 實(shí)現(xiàn)首個(gè)標(biāo)段雙幅貫通 熱訊
- 統(tǒng)計(jì)數(shù)據(jù)里的樓市倒春寒
- 要聞：青島市市南區(qū)金門路街道職工巧手剪紙迎端午
- CSGO開箱多少錢一個(gè)？csgo開箱必須花錢嗎？ 世界焦點(diǎn)
- 環(huán)球微頭條丨祝兒子生日的俏皮句子 祝福兒子生日精辟短句
- 韓媒評(píng)論：日本排了核污水，也丟了良心
- 領(lǐng)克09亞運(yùn)行政五座版上市 售價(jià)28.99萬元
- 技塑股份股東趙新春擬以特定事項(xiàng)協(xié)議轉(zhuǎn)讓的方式將其直接持有的553.27萬股公司股份轉(zhuǎn)讓給汪品洋
- 官宣！常州入梅時(shí)間定了-當(dāng)前視訊
- 2023年非上海生源高校應(yīng)屆生進(jìn)滬就業(yè)工作已啟動(dòng)！嘉定新城用人單位看過來
- 安全狗云原生安全聯(lián)防聯(lián)抗策略告別冗長流量自學(xué)習(xí)
- C視頻｜52.5米、地下17層樓高！記者探訪成都在建最深基坑開挖見底 全球最資訊
- 【天天時(shí)快訊】《阿凡達(dá)：重返潘多拉》手游測試招募開始
- 全球今日訊！長沙市公共衛(wèi)生救治中心一期預(yù)計(jì)年底完工交付
- 江蘇省儀征市市場監(jiān)管局提前部署守護(hù)中考食品安全
- 全球微頭條丨2023精密儀器行業(yè)市場規(guī)模及未來發(fā)展方向分析
- 珈偉新能源股份有限公司與中國電建集團(tuán)貴州工程有限公司舉行新能源業(yè)務(wù)戰(zhàn)略簽約儀式
- “搖一搖”搖來詐騙犯
- 滬考欣語｜強(qiáng)軍報(bào)國正當(dāng)時(shí)
- 資訊：中國民航復(fù)蘇有望進(jìn)一步加快
- 當(dāng)前短訊！在不在今天？賽前解說一致看好TES擊敗LGD
- 中使館：菲律賓發(fā)生6.2級(jí)地震 暫無中國公民傷亡報(bào)告
- 【天天速看料】大電池+超清影像 vivo Y35+陪你解鎖夏日新體驗(yàn)
- 國內(nèi)塑料管材行業(yè)發(fā)展分析 塑料管材市場供需狀況2023
- 李一男造車夢(mèng)“復(fù)活”自由家NV換標(biāo)大乘V07已通過工信部申報(bào) 全球焦點(diǎn)
- 花唄逾期三個(gè)月收到律師函但是金額不對(duì)咋辦？結(jié)清后能漲嗎？
- A3手游《戰(zhàn)之刃：幸存者》首次刪檔測試正式開啟！超值福利活動(dòng)上線！-全球觀點(diǎn)
- 當(dāng)前關(guān)注：吉利年產(chǎn)10萬噸物理法多晶硅及光伏全產(chǎn)業(yè)鏈項(xiàng)目在寧夏賀蘭縣開工
- 河北哪些公立大學(xué)有?？频呐琶胺?jǐn)?shù)線醫(yī)校|世界觀點(diǎn)
- 平南縣氣象臺(tái)發(fā)布雷電橙色預(yù)警信號(hào)【II級(jí)/嚴(yán)重】【2023-06-16】 微速訊
- 深海花膠怎么煮?-焦點(diǎn)滾動(dòng)
- 當(dāng)一周家長-難忘的經(jīng)歷周記250字
- 歐盟評(píng)估一種6'-唾液乳糖鈉鹽作為新型食品的安全性|當(dāng)前視訊
- 高考出分前的“關(guān)鍵14天”：志愿填報(bào)選擇權(quán)增加，生涯規(guī)劃既突然又迫切
- 全球今頭條！激光手臂脫毛后毛發(fā)會(huì)越來越粗嗎
- “政校企”共建促就業(yè) 浙江新城立一個(gè)數(shù)字經(jīng)濟(jì)產(chǎn)教融合聯(lián)盟
- 當(dāng)前速遞！黑河：優(yōu)質(zhì)農(nóng)產(chǎn)品亮相“哈洽會(huì)”
- 12周歲女生生日禮物
- 《花戎》魔君想起魏枝了嗎？
- 快資訊丨2018有哪些二本會(huì)降分比較大云南投檔
- 當(dāng)前信息：百色學(xué)院本科專業(yè)有哪些各錄取分?jǐn)?shù)線
- 持續(xù)深化新技術(shù)應(yīng)用 新疆吐魯番保障高溫期間居民用電安全
- 當(dāng)前快訊:阿爾巴尼亞針織法
- 銀聯(lián)支付助力激活線上消費(fèi)新動(dòng)能 “百行百家App快樂購”活動(dòng)開啟 天天短訊
- 世界快資訊：信用卡怎么知道還有多少額度？網(wǎng)貸逾期七年了起訴有效嗎？
- 合肥市元宇宙產(chǎn)業(yè)協(xié)會(huì)成立，將協(xié)助政府制定元宇宙產(chǎn)業(yè)發(fā)展規(guī)劃
- 安徽軍地檢察服務(wù)中心揭牌
- 金融機(jī)構(gòu)遇到網(wǎng)絡(luò)輿情如何應(yīng)對(duì)？來看看中原網(wǎng)提供的應(yīng)對(duì)策略
- 環(huán)球觀速訊丨聯(lián)想ideapad（yoga）
- “四治融合”調(diào)和出幸?！皸鳌蔽?天天觀焦點(diǎn)
- 視訊！* 張江REIT擴(kuò)募上市
- vivo X90 Pro+手機(jī)獲推OriginOS 3 21.4：新增隱私打碼、斷點(diǎn)續(xù)傳
- 天津小學(xué)學(xué)位控制政策匯總（持續(xù)更新）-熱文
- “非典型”熱浪席卷墨西哥 部分地區(qū)氣溫將達(dá)45℃|天天觀點(diǎn)
- 當(dāng)前關(guān)注：呂梁：把非遺“厚家底”轉(zhuǎn)為發(fā)展新動(dòng)能
- 快訊：國防部：加方在涉華問題上應(yīng)謹(jǐn)言慎行
- 即時(shí)看！北京城建搖中北京朝陽區(qū)一宗住宅地塊，成交金額34.5億元+1.2萬平現(xiàn)房銷售
- 他們用科技守護(hù)大江大河的“健康”-世界關(guān)注
- 新業(yè)態(tài)有新?lián)?dāng)！“溫小愛”融入基層治理“大格局”|每日頭條
- 世界速讀：今天，開幕！
- 剛剛！5月份河南省金融運(yùn)行情況公布-全球快看點(diǎn)
- 全球?qū)崟r(shí)：今天，這個(gè)寶“藏”朋友圈你刷到了嗎？
- 全球快訊:歐洲經(jīng)濟(jì)“火車頭”經(jīng)濟(jì)增長發(fā)乏力 德國淪為“差等生”？
- 【環(huán)球時(shí)快訊】銀行業(yè)高管大調(diào)整，一批“新面孔”成為掌舵人
- 海報(bào)大事記｜聽說頂端新聞2歲啦？
- 當(dāng)前焦點(diǎn)!獎(jiǎng)勵(lì)一套房！慰問金10萬！網(wǎng)友：就應(yīng)該這樣
- 高考考生們，這些“套路”騙局要當(dāng)心-天天新消息
- 天天快消息！國家發(fā)改委：熱點(diǎn)消費(fèi)較快增長，經(jīng)濟(jì)向好趨勢依然穩(wěn)固
- 世界微速訊：淮陽縣民政局（關(guān)于淮陽縣民政局介紹）
- 世界通訊！欠網(wǎng)貸辦居住證會(huì)怎樣？信用卡逾期?？ㄟ€可以申請(qǐng)分期還款嗎？
- 近百所在皖招生院校參與！2023安徽省高招公益咨詢會(huì)等你來_全球報(bào)道
- 千城勝景｜內(nèi)蒙古額爾古納：枝頭繁花綻放|今日?qǐng)?bào)
- 618新消費(fèi)③丨此熱彼冷：OTA的618“雙城記”-全球觀速訊
- 股票行情快報(bào)：派林生物（000403）6月16日主力資金凈賣出65.57萬元
- 每日速看!呼吁跳出“單人單面”信息繭房 廣輕這一作品斬獲省賽特等獎(jiǎng)
- 五部門：依法合規(guī)加大對(duì)新市民等群體保障性租賃住房建設(shè)融資支持力度
- 環(huán)球信息:海爾智家：今日以1777.25萬元回購75萬股公司A股
- 柯城區(qū)營商辦參加企業(yè)社區(qū)實(shí)體化工作實(shí)地調(diào)研
- “要么倒閉，要么成為巨頭”，余承東最新發(fā)言：未來車市洗牌會(huì)非常慘烈，比亞迪是少數(shù)能活下來的車企之一
- 哈弗全新插混SUV申報(bào) 命名“翔龍”/搭載1.5T Hi4混動(dòng)
- 天天快消息！紅酒知識(shí)?
- 端午節(jié)家宴，推薦6道家常菜，葷素搭配營養(yǎng)又好吃！
- 每日資訊：社區(qū)電商轉(zhuǎn)型新探索，10分鐘送貨到家 “蜂團(tuán)到家”華東區(qū)戰(zhàn)略發(fā)布會(huì)在杭召開
- 重慶三峽有什么土特產(chǎn)嗎
- 【天天時(shí)快訊】友情價(jià)？快船太離譜了，他們竟然想用380萬年薪簽回威少
- 要聞：預(yù)警！岳陽市局地可能發(fā)生山洪災(zāi)害
- 世界熱資訊！智能制造下半場，軟硬一體化的智能工廠方案是王炸！
- 警方提醒：謹(jǐn)防冒充領(lǐng)導(dǎo)干部類詐騙！
- 國家金融監(jiān)督管理總局：同意解散渤海鋼鐵集團(tuán)財(cái)務(wù)有限公司
- 奧迪a4怎么樣優(yōu)點(diǎn)缺點(diǎn)（月薪多少適合開奧迪a4） 全球最資訊
- 內(nèi)鄉(xiāng)縣：發(fā)展金蟬產(chǎn)業(yè) 助力鄉(xiāng)村振興
- 全球速看：北流市氣象臺(tái)發(fā)布暴雨橙色預(yù)警信號(hào)【II級(jí)/嚴(yán)重】【2023-06-16】
- 昔日私募冠軍遭“強(qiáng)制平倉”！發(fā)生了什么？
- 網(wǎng)貸欠太多無力償還怎么處理？網(wǎng)貸負(fù)債太多怎么辦