清華大學(xué)聯(lián)合字節(jié)跳動(dòng)，開(kāi)源聽(tīng)覺(jué)大語(yǔ)言模型 SALMONN
【資料圖】
IT之家 8 月 22 日消息，清華大學(xué)電子工程系日前與字節(jié)跳動(dòng)的火山語(yǔ)音團(tuán)隊(duì)攜手合作，推出一款開(kāi)源大語(yǔ)言模型 SALMONN。
▲ 圖源 SALMONN 的 GitHub 頁(yè)面
IT之家經(jīng)過(guò)查詢得知，SALMONN 模型支持語(yǔ)音、音頻以及音樂(lè)輸入，它可以感知和理解不同類型的音頻內(nèi)容輸入，并具備多語(yǔ)言語(yǔ)音識(shí)別和翻譯以及語(yǔ)音推理等功能。
▲ 官方發(fā)布的模型解析圖
官方表示，SALMONN 支持語(yǔ)音、音頻以及音樂(lè)輸入，它可以感知和理解不同類型的音頻內(nèi)容輸入，并具備多語(yǔ)言語(yǔ)音識(shí)別和翻譯以及語(yǔ)音推理等功能。
▲ 圖源 SALMONN 的 Demo 頁(yè)面
官方同時(shí)表示，目前 SALMONN 能夠勝任英語(yǔ)語(yǔ)音識(shí)別、英語(yǔ)到中文的語(yǔ)音翻譯、情感識(shí)別、音頻字幕生成、音樂(lè)描述等重要的語(yǔ)音和音頻任務(wù)，同時(shí)又涌現(xiàn)出多種在模型訓(xùn)練中沒(méi)有專門學(xué)習(xí)過(guò)的多語(yǔ)言和跨模態(tài)能力，涵蓋非英語(yǔ)語(yǔ)音識(shí)別、英語(yǔ)到（中文以外）其他語(yǔ)言的語(yǔ)音翻譯、對(duì)語(yǔ)音內(nèi)容的摘要和關(guān)鍵詞提取、基于音頻的故事生成、音頻問(wèn)答、語(yǔ)音和音頻聯(lián)合推理等任務(wù)。
目前該模型已經(jīng)發(fā)布于 GitHub 中，官方同時(shí)放出了項(xiàng)目的 Demo 鏈接，感興趣的小伙伴們可以前往了解。
關(guān)鍵詞：
相關(guān)文章
清華大學(xué)聯(lián)合字節(jié)跳動(dòng)，開(kāi)源聽(tīng)覺(jué)大語(yǔ)言模型 SALMONN
IT之家8月22日消息，清華大學(xué)電子工程系日前與字節(jié)跳動(dòng)的火山語(yǔ)音團(tuán)隊(duì)
中國(guó)科技館《致敬科學(xué)家——點(diǎn)亮科學(xué)夢(mèng)想》暑期特別推出8集節(jié)目
中國(guó)科技館22日向媒體發(fā)布消息稱，中國(guó)科技館《致敬科學(xué)家——點(diǎn)
熱門中概股多數(shù)下跌 愛(ài)奇藝跌近6%
【熱門中概股多數(shù)下跌愛(ài)奇藝跌近6%】!!!今天受到全網(wǎng)的關(guān)注度非常高，
攻關(guān)前沿技術(shù) 產(chǎn)學(xué)研共聚力 ——企業(yè)科技創(chuàng)新一線見(jiàn)聞
科技是第一生產(chǎn)力，創(chuàng)新是第一動(dòng)力。記者近日走訪各地高新技術(shù)企業(yè)、產(chǎn)
建滔積層板（01888.HK）：8月22日南向資金增持3.55萬(wàn)股
8月22日北向資金增持3 55萬(wàn)股建滔積層板（01888 HK）。近5個(gè)交易日中，
華安證券給予智明達(dá)買入評(píng)級(jí)，在手訂單穩(wěn)健增長(zhǎng)，嵌入式計(jì)算機(jī)領(lǐng)域潛力新星
每經(jīng)AI快訊，華安證券08月21日發(fā)布研報(bào)稱，給予智明達(dá)（688636 SH，最
世紀(jì)證券投行業(yè)務(wù)“三道防線”被點(diǎn)名交作業(yè) 與“帶病”IPO項(xiàng)目存利益交織
來(lái)源：新浪證券出品：新浪財(cái)經(jīng)上市公司研究院作者：IPO再融資組 靳澤近
港股異動(dòng) | 航空股全線走低 多國(guó)出現(xiàn)新冠新變異株 機(jī)構(gòu)指航空股有望向強(qiáng)貝塔演進(jìn)
A股機(jī)場(chǎng)航運(yùn)板塊早盤持續(xù)下挫，港股航空股跟隨走低，截至發(fā)稿，美蘭空
精彩推送
清華大學(xué)聯(lián)合字節(jié)跳動(dòng)，開(kāi)源聽(tīng)覺(jué)大語(yǔ)言模型 SALMONN
IT之家8月22日消息，清華大學(xué)電子工程系日前與字節(jié)跳動(dòng)的火山語(yǔ)音團(tuán)隊(duì)
“5個(gè)人搶一套房”，南京“搶跑”發(fā)布樓市新政，新房交易量回暖
本文來(lái)源：時(shí)代財(cái)經(jīng)作者：鐘黛圖片來(lái)源：圖蟲(chóng)2023年7月底，多部門密集
內(nèi)存徹底“白菜價(jià)”，12GB+256GB僅1149元，還有1億像素+5000mAh
隨著存儲(chǔ)顆粒價(jià)格的一跌再跌，大內(nèi)存已經(jīng)不再是高昂的價(jià)格，如今24GB超
生物制品板塊8月22日跌1.8%，沃森生物領(lǐng)跌，主力資金凈流出5.91億元
8月22日生物制品板塊較上一交易日下跌1 8%，沃森生物領(lǐng)跌。當(dāng)日上證指
2023成都車展引萬(wàn)眾矚目,全新捷豹E-PACE展現(xiàn)豪華典范
眾所周知在本周末我們又將迎來(lái)一場(chǎng)重磅車展－-2023成都車展，讓我們一
大龍村：多措并舉 深入推進(jìn)人居環(huán)境整治村莊清潔行動(dòng)工作
華聲在線訊（通訊員：姚全）根據(jù)鎮(zhèn)黨委、政府統(tǒng)一關(guān)于農(nóng)村人居環(huán)境整治
董立(關(guān)于董立簡(jiǎn)述)
，你們好，今天0471房產(chǎn)來(lái)聊聊一篇立，立簡(jiǎn)述的文章,網(wǎng)友們對(duì)這件事情
蘋果 iPhone 15/15+ 顏色陣容曝光：有 6 種，主打橙色和粉色
IT之家8月22日消息，消息源Unknownz21今天發(fā)布推文，曝光了iPhone15和i
蔣劍書(shū)(關(guān)于蔣劍書(shū)簡(jiǎn)述)
，你們好，今天0471房產(chǎn)來(lái)聊聊一篇?jiǎng)?shū)，劍書(shū)簡(jiǎn)述的文章,網(wǎng)友們對(duì)這件
五部門部署開(kāi)展集中用餐單位食品安全問(wèn)題專項(xiàng)治理行動(dòng)
市場(chǎng)監(jiān)管總局、教育部等五部門今天（22日）聯(lián)合召開(kāi)電視電話會(huì)議，部署
寧夏火災(zāi)事故調(diào)查報(bào)告（寧夏一姐在努力：未做核酸但查到報(bào)告寧夏官方回應(yīng)）
銀川頭條 “沒(méi)做核酸，哪來(lái)的核酸檢測(cè)結(jié)果？”又辟謠了！昨天看到銀川
美迪凱：美迪凱控股集團(tuán)擬1000萬(wàn)至2000萬(wàn)元增持股份
e公司訊，美迪凱(688079)8月21日晚間公告，美迪凱控股集團(tuán)擬增持公司股
海川生物2023年上半年凈利361.53萬(wàn) 同比增加24.15%
挖貝網(wǎng)2023年8月21日，海川生物（873637）近日發(fā)布2023年半年度報(bào),報(bào)告
Redmi K60至尊版首批升級(jí)MIUI 15：5年OTA更新
Redmi官微發(fā)布消息稱，RedmiK60至尊版已加入MIUI15首批升級(jí)名單，未來(lái)
“親水經(jīng)濟(jì)”升溫帶火相關(guān)產(chǎn)業(yè) 水上運(yùn)動(dòng)產(chǎn)業(yè)潛力進(jìn)一步釋放
酷熱之下，玩水是消暑的好方式。除了大家所熟知的沖浪板、游泳圈，還有
聯(lián)城科技擬投資9016萬(wàn)組建唐山曹妃甸區(qū)港闊城新能源科技有限公司 持股49%
聯(lián)城科技擬投資9016萬(wàn)組建唐山曹妃甸區(qū)港闊城新能源科技有限公司持股49
澳門：8月24日起禁止日本10個(gè)都縣區(qū)食品進(jìn)口
原標(biāo)題：澳門：8月24日起禁止日本10個(gè)都縣區(qū)食品進(jìn)口中新網(wǎng)8月22日電據(jù)
陸金所控股延續(xù)業(yè)績(jī)復(fù)蘇，二季度凈利潤(rùn)環(huán)比增長(zhǎng)37%
陸金所控股延續(xù)業(yè)績(jī)復(fù)蘇，二季度凈利潤(rùn)環(huán)比增長(zhǎng)37%,母凈利潤(rùn),陸金所控股
標(biāo)普下調(diào)美國(guó)多家地區(qū)銀行評(píng)級(jí)
繼本月初國(guó)際評(píng)級(jí)機(jī)構(gòu)穆迪下調(diào)十家美國(guó)銀行信用評(píng)級(jí)后，8月21日，另一
今日鄭州裕達(dá)國(guó)貿(mào)酒店介紹（誰(shuí)知道鄭州裕達(dá)國(guó)貿(mào)酒店，這個(gè)酒店的名聲還有周圍的治安情況）
您好，來(lái)為大家解答以上問(wèn)題。鄭州裕達(dá)國(guó)貿(mào)酒店介紹，誰(shuí)知道鄭州裕達(dá)國(guó)
俄媒：“月球-25”號(hào)探測(cè)器發(fā)射失敗，或致俄航天局“高層人事變動(dòng)”
俄羅斯《消息報(bào)》8月22日消息，三名知情人士透露，俄羅斯“月球-25”號(hào)
破解無(wú)線網(wǎng)用什么軟件（破解無(wú)線網(wǎng)絡(luò)密碼的軟件）
來(lái)為大家解答以上問(wèn)題，破解無(wú)線網(wǎng)用什么軟件，破解無(wú)線網(wǎng)絡(luò)密碼的軟件
之江智庫(kù)｜多措并舉激發(fā)浙江民營(yíng)經(jīng)濟(jì)新活力
潮新聞客戶端閻逸編輯周宇晗《中共中央國(guó)務(wù)院關(guān)于促進(jìn)民營(yíng)經(jīng)濟(jì)發(fā)展壯大
靈寶市城市管理局開(kāi)展七夕中華經(jīng)典誦讀會(huì)活動(dòng)
河南經(jīng)濟(jì)報(bào)記者丁光展見(jiàn)習(xí)記者王盾通訊員袁克甲為大力弘揚(yáng)中華優(yōu)秀傳統(tǒng)
科大訊飛AI智能鼠標(biāo)AM50酷炫來(lái)襲 搭載訊飛星火認(rèn)知大模型能聽(tīng)會(huì)寫(xiě)
8月15日，訊飛星火認(rèn)知大模型V2 0正式發(fā)布，諸多重磅升級(jí)的功能備受眾
4-2！C羅助攻+不滿傅明判罰，利雅得勝利補(bǔ)時(shí)絕殺，躋身亞冠正賽
第11分鐘B羅角球開(kāi)出，塔利斯卡頭球攻門得手，利雅得勝利隊(duì)1-0取得領(lǐng)先
失傳2000多年的“扁鵲醫(yī)書(shū)”被修復(fù)！藥方子時(shí)至今日還能用
短短200多字的《扁鵲見(jiàn)蔡桓公》，讓我們見(jiàn)識(shí)了扁鵲醫(yī)術(shù)的高明。作為中
云帆瑞達(dá)：雷達(dá)技術(shù)引領(lǐng)智能科技發(fā)展
【云帆瑞達(dá)】將亮相2023WAIE物聯(lián)網(wǎng)與人工智能展覽會(huì)云帆瑞達(dá)科技（深圳
早教機(jī)是否值得購(gòu)買？ 你知道嗎
在競(jìng)爭(zhēng)激烈的現(xiàn)代社會(huì)，孩子們的起跑線越來(lái)越提前。為了不讓孩子輸在起
交易所債券市場(chǎng)收盤 地產(chǎn)債多數(shù)下跌
南方財(cái)經(jīng)8月22日電，交易所債券市場(chǎng)收盤，地產(chǎn)債多數(shù)下跌。“21金地04
越野車市場(chǎng)“群雄”激戰(zhàn) 自主車企扎堆布局 哈弗喬心昱：硬派越野的“黃金十年”已來(lái)
在奇瑞四驅(qū)越野SUV探索06上市的第二天，新哈弗H5也高調(diào)上市，官方售價(jià)
西甲希望杯時(shí)隔3年再回歸昆明 誰(shuí)會(huì)是下一個(gè)“金童”？
記者22日從西甲聯(lián)盟獲悉，繼2019年首屆賽事成功舉辦后，“西甲希
邁為股份大宗交易成交1226.67萬(wàn)元
邁為股份8月22日大宗交易平臺(tái)出現(xiàn)一筆成交，成交量6 49萬(wàn)股，成交金額1
社區(qū)書(shū)記酒后打砸夜宵攤，互毆還是尋釁滋事？
據(jù)新京報(bào)報(bào)道，近日，網(wǎng)傳四川樂(lè)山某鎮(zhèn)街道社區(qū)黨委書(shū)記何某，酒后與夜
廈門新會(huì)展中心項(xiàng)目、會(huì)議中心名稱有獎(jiǎng)?wù)骷顒?dòng)結(jié)果出爐
昨日，記者了解到，廈門新會(huì)展中心項(xiàng)目、會(huì)議中心名稱有獎(jiǎng)?wù)骷顒?dòng)結(jié)果
鹽城建湖近湖街道邀請(qǐng)政協(xié)委員助企解難題
“德容建材市場(chǎng)已運(yùn)營(yíng)了二十多年，排水設(shè)施陳舊老化，到了汛期地面積水
奧文科技擬在泰國(guó)投資8100萬(wàn)設(shè)立子公司奧文機(jī)電科技（泰國(guó)）有限公司 持股90%
奧文科技擬在泰國(guó)投資8100萬(wàn)設(shè)立子公司奧文機(jī)電科技（泰國(guó)）有限公司持
崇啟公鐵長(zhǎng)江大橋轉(zhuǎn)入大體積承臺(tái)施工階段
崇啟公鐵長(zhǎng)江大橋轉(zhuǎn)入大體積承臺(tái)施工階段---記者8月20日從中國(guó)鐵路上海
“探測(cè)”到中國(guó)衛(wèi)星干擾？第三次登月前夕，印度已為失敗找好借口
可問(wèn)題是，這個(gè)事情都過(guò)去4年了，嫦娥四號(hào)的任務(wù)也都完成了，中國(guó)近期
先聲再明就抗EGFR單抗藥物與邁博藥業(yè)達(dá)成合作
北京商報(bào)訊（記者姚倩）8月21日，先聲再明宣布與邁博藥業(yè)間接全資附屬
中國(guó)科技館《致敬科學(xué)家——點(diǎn)亮科學(xué)夢(mèng)想》暑期特別推出8集節(jié)目
中國(guó)科技館22日向媒體發(fā)布消息稱，中國(guó)科技館《致敬科學(xué)家——點(diǎn)
未來(lái)電器董秘回復(fù)：公司經(jīng)營(yíng)產(chǎn)品目前尚未用于核電項(xiàng)目
未來(lái)電器(301386)08月21日在投資者關(guān)系平臺(tái)上答復(fù)了投資者關(guān)心的問(wèn)題。
2023年8月7日-8月13日無(wú)條件批準(zhǔn)經(jīng)營(yíng)者集中案件列表
2023年8月7日-8月13日無(wú)條件批準(zhǔn)經(jīng)營(yíng)者集中案件列表序號(hào)案件名稱參與集
周口鹿邑縣趙村鄉(xiāng)人民政府四級(jí)主任科員郝保軍接受紀(jì)律審查和監(jiān)察調(diào)查
鹿邑縣趙村鄉(xiāng)人民政府四級(jí)主任科員郝保軍涉嫌嚴(yán)重違紀(jì)違法，目前正接受
艾力斯：伏美替尼一線治療III期臨床試驗(yàn)獲藥物臨床試驗(yàn)批準(zhǔn)
艾力斯8月22日公告，甲磺酸伏美替尼片（簡(jiǎn)稱“伏美替尼”）適用于具有E
北京日?qǐng)?bào)報(bào)道后，安全疏散生命通道通了！
8月14日，本報(bào)以《別讓生命通道“走不通”》為題，對(duì)部分商場(chǎng)超市疏散
南醫(yī)大友誼整形醫(yī)院正規(guī)嗎 值得選擇
現(xiàn)今社會(huì)的人們都希望擁有燦爛的人生，美好的未來(lái)，美麗的容貌會(huì)給人們
染色體異常可以買重疾險(xiǎn)嗎？染色體異常重疾險(xiǎn)報(bào)銷嗎？
重疾險(xiǎn)是一種保險(xiǎn)產(chǎn)品，旨在為被保險(xiǎn)人提供經(jīng)濟(jì)保障，以應(yīng)對(duì)嚴(yán)重疾病的
THENORTHFACE什么牌子
THENORTHFACE是一種享譽(yù)盛名的戶外品牌，它以其高品質(zhì)的產(chǎn)品而聞名。無(wú)
3個(gè)上手就會(huì)的摳圖換背景方法，各種復(fù)雜的圖片都能摳下來(lái)
分享3個(gè)上手就會(huì)的摳圖換背景方法，各種人物、物品都能快速摳下?lián)Q背景
海信南方大廈20.71億元ABS狀態(tài)更新為“已反饋”
8月22日，上交所更新了中信證券-2023海信南方大廈資產(chǎn)支持專項(xiàng)計(jì)劃狀態(tài)
內(nèi)置國(guó)產(chǎn)電源方案，簡(jiǎn)單亦高效，摩托羅拉20W快充充電器拆解
前言最近充電頭網(wǎng)拿到了MOTO摩托羅拉的一款美版20W充電器，相較此前拆
如何清理電腦磁盤空間不足筆記本_如何清理電腦磁盤空間
1、在電腦桌面上找到“計(jì)算機(jī)”標(biāo)識(shí)；2、鼠標(biāo)左鍵雙擊打開(kāi)，進(jìn)入我的電
詐騙罪的立案標(biāo)準(zhǔn)八種情況（詐騙罪的立案標(biāo)準(zhǔn)）
來(lái)為大家解答以上問(wèn)題，詐騙罪的立案標(biāo)準(zhǔn)八種情況，詐騙罪的立案標(biāo)準(zhǔn)很
杰普特：擬以1000萬(wàn)元-2000萬(wàn)元回購(gòu)公司股份
杰普特公告，擬以1000萬(wàn)元-2000萬(wàn)元回購(gòu)股份，回購(gòu)價(jià)格不超過(guò)人民幣100
董少的愛(ài)琴海之戀(關(guān)于董少的愛(ài)琴海之戀簡(jiǎn)述)
，你們好，今天0471房產(chǎn)來(lái)聊聊一篇少的愛(ài)琴海之戀，少的愛(ài)琴海之戀簡(jiǎn)述
國(guó)家醫(yī)保局：已有50余種罕見(jiàn)病用藥納入醫(yī)保藥品目錄
國(guó)家醫(yī)保局日前發(fā)布消息顯示，通過(guò)醫(yī)保目錄準(zhǔn)入談判，已累計(jì)將26種罕見(jiàn)
HICOOL 2023全球創(chuàng)業(yè)者峰會(huì)參賽創(chuàng)業(yè)項(xiàng)目及人才數(shù)量創(chuàng)歷史新高
8月21日，北京商報(bào)記者獲悉，HICOOL2023全球創(chuàng)業(yè)者峰會(huì)將于8月25日，在
新瀚新材最新股東戶數(shù)下降10.42%
證券時(shí)報(bào)網(wǎng)訊，新瀚新材8月22日在交易所互動(dòng)平臺(tái)中披露，截至8月20日公
渝開(kāi)發(fā)控股子公司收到民事訴訟傳票 被要求償還6059萬(wàn)元借款
原告上海復(fù)昭投資有限公司請(qǐng)求法院依法判令被告（重慶捷興置業(yè)有限公司
艾彼科技2023年上半年凈利1152.05萬(wàn) 扭虧為盈
挖貝網(wǎng)2023年8月22日，艾彼科技（838288）近日發(fā)布2023年半年度報(bào),報(bào)告
上海機(jī)場(chǎng)崩盤，因?yàn)槿ゾ挶辈挥米w機(jī)
今日份段子，問(wèn)：上海機(jī)場(chǎng)為什么崩盤啦？答：因?yàn)槿ゾ挶辈挥米w機(jī)！言
繃緊防汛救災(zāi)這根弦
今年入汛以來(lái)，受多輪臺(tái)風(fēng)和強(qiáng)降雨影響，我國(guó)多地自然災(zāi)害風(fēng)險(xiǎn)居高不下
瑞安房地產(chǎn)：上半年實(shí)現(xiàn)收入64.31億元
8月22日，瑞安房地產(chǎn)發(fā)布2023年中期業(yè)績(jī)報(bào)告。報(bào)告期內(nèi)，實(shí)現(xiàn)收入64 31
恩怨技能洛克王國(guó) 洛克王國(guó)的快意恩仇技能石怎么得
1、首先，打開(kāi)地圖，在王國(guó)城堡的最右上角，選擇“勇者大挑戰(zhàn)”。2、2
第五屆中美工商領(lǐng)導(dǎo)人對(duì)話會(huì)在京成功舉辦
8月21日，由中國(guó)貿(mào)促會(huì)、中國(guó)國(guó)際商會(huì)和美中貿(mào)委會(huì)共同主辦的第五屆中
好貸網(wǎng)怎么樣（好貸網(wǎng)官網(wǎng)）
1、好貸網(wǎng)是一家?guī)椭蛻粽业劫J款機(jī)構(gòu)同時(shí)幫助貸款機(jī)構(gòu)精準(zhǔn)匹配客戶的
浙江寧海千年古村以“愛(ài)”為名 燃起“庭院夜經(jīng)濟(jì)”
“七夕今宵看碧霄，牽牛織女渡河橋”。8月22日是農(nóng)歷七月初七，是中
博愛(ài)縣自然資源局：召開(kāi)綜合執(zhí)法大隊(duì)執(zhí)法工作推進(jìn)會(huì)
河南經(jīng)濟(jì)報(bào)記者杜美麗通訊員魏光力8月21日，博愛(ài)縣自然資源局召開(kāi)綜合
習(xí)近平在南非媒體發(fā)表署名文章
新華社北京8月21日電8月21日，在赴約翰內(nèi)斯堡出席金磚國(guó)家領(lǐng)導(dǎo)人第十五
甘州區(qū)舉行2023年暑假中小學(xué)語(yǔ)文學(xué)科教師能力提升培訓(xùn)
甘州融媒訊為了促進(jìn)全區(qū)教師適應(yīng)新時(shí)代教育改革和發(fā)展的新形勢(shì)、新要求
