1月15日，科大訊飛舉行訊飛星火大模型升級(jí)發(fā)布會(huì)。

發(fā)布首個(gè)基于全國(guó)產(chǎn)算力平臺(tái)訓(xùn)練的具備深度思考和推理能力的大模型——訊飛星火深度推理模型X1，聯(lián)合華為首次攻克國(guó)產(chǎn)算力訓(xùn)練深度推理模型難關(guān)實(shí)現(xiàn)多學(xué)段數(shù)學(xué)能力的國(guó)內(nèi)第一，率先落地教育、醫(yī)療等剛需場(chǎng)景。

訊飛星火4.0 Turbo底座再次全面升級(jí)，七大核心能力全面提升，行業(yè)首發(fā)混域知識(shí)搜索技術(shù)。

發(fā)布星火語(yǔ)音同傳大模型，國(guó)內(nèi)首個(gè)語(yǔ)音端到端同傳大模型，最快實(shí)現(xiàn)5秒以?xún)?nèi)的同傳時(shí)延，達(dá)到人類(lèi)專(zhuān)家譯員的水平。

以下是全程實(shí)錄：

發(fā)布訊飛星火深度推理模型X1

萬(wàn)里(產(chǎn)品經(jīng)理)：訊飛星火X1是我國(guó)首個(gè)基于全國(guó)產(chǎn)算力訓(xùn)練的具備深度思考和推理能力的大模型。前兩天我也體驗(yàn)了正式版本的效果，先請(qǐng)權(quán)哥給大家介紹一下，深度推理模型到底和通用大模型有什么不一樣的地方?

權(quán)哥(研究員)：深度推理模型更擅長(zhǎng)做數(shù)學(xué)題這樣的復(fù)雜任務(wù)，而且有全面的思考推理過(guò)程。我們直接讓星火X1做2024年高考數(shù)學(xué)卷第15題，這是一道大題。

萬(wàn)里：高考題目X1就算過(guò)關(guān)了，看起來(lái)很厲害啊。

權(quán)哥：我們讓X1參加了不少“考試”，現(xiàn)在看到的就是X1最近的“數(shù)學(xué)考試成績(jī)單”。

萬(wàn)里：很優(yōu)秀的成績(jī)單，考試類(lèi)型也很全面，覆蓋小學(xué)、初中、高中、大學(xué)，還有奧數(shù)。

權(quán)哥：我們利用更少的算力，實(shí)現(xiàn)了業(yè)界一流的效果，多項(xiàng)指標(biāo)國(guó)內(nèi)第一。在小初高數(shù)學(xué)上，X1已經(jīng)做到90多分，競(jìng)賽類(lèi)也有80多分，大學(xué)的答題和競(jìng)賽也達(dá)到了國(guó)內(nèi)領(lǐng)先。部分任務(wù)題目很難，在國(guó)產(chǎn)平臺(tái)適配跑通后的訓(xùn)練時(shí)間比較短，數(shù)據(jù)不太多，后面還有很大的提升空間。

萬(wàn)里：榜單上還有英文任務(wù)，也來(lái)試試。

想哥(研究員)：2024年AIME競(jìng)賽這道題比較難，里面有多個(gè)方程，還涉及到對(duì)數(shù)運(yùn)算。

想哥：再找個(gè)奧賽題給X1試試，這是我們國(guó)內(nèi)去年高中數(shù)學(xué)奧賽的題目。

權(quán)哥：X1主要有三個(gè)典型特點(diǎn)。首先，它能夠化繁為簡(jiǎn)，把復(fù)雜的問(wèn)題拆解成多個(gè)步驟進(jìn)行思考推理，剛才在做題的時(shí)候，右側(cè)對(duì)思考過(guò)程都有展示。第二，它能夠自我反思和驗(yàn)證，和我們直覺(jué)是一樣的。剛剛在解答奧賽題的時(shí)候，由于人類(lèi)標(biāo)注數(shù)據(jù)難度極大，X1模型會(huì)根據(jù)答案正確與否進(jìn)行強(qiáng)化訓(xùn)練，數(shù)學(xué)這種有明確答案和結(jié)果的任務(wù)，天然適配X1模型。

權(quán)哥：這方面的技術(shù)我們?cè)缬蟹e累。比如我們提出的基于自我評(píng)價(jià)迭代的評(píng)語(yǔ)模型技術(shù)，還有我們?cè)跀?shù)學(xué)答題領(lǐng)域提出的多路徑和反思迭代的強(qiáng)化學(xué)習(xí)，在教育高考作文評(píng)分、數(shù)學(xué)教師助手中應(yīng)用了，o1-preview發(fā)布后，訊飛星火X1在1個(gè)月內(nèi)就跑通了關(guān)鍵的算法。不過(guò)將整個(gè)系統(tǒng)在國(guó)產(chǎn)化平臺(tái)上全面實(shí)現(xiàn)，在數(shù)據(jù)構(gòu)建、框架調(diào)優(yōu)、模型驗(yàn)證等各個(gè)方面都還有很多難題，雖然多花了不少時(shí)間和代價(jià)，但是很自豪我們都搞定了。

萬(wàn)里：國(guó)產(chǎn)算力確實(shí)在單卡、集群、生態(tài)上都和國(guó)際領(lǐng)先水平有一定距離。在這種情況下，想訓(xùn)練出能和OpenAI模型掰手腕的深度推理模型是比較困難的，這個(gè)過(guò)程中有沒(méi)有遇到什么困難和問(wèn)題?

想哥：星火大模型一開(kāi)始就堅(jiān)定地走全國(guó)產(chǎn)化路線(xiàn)，在這之前已經(jīng)完成了很多模型適配，但是X1訓(xùn)練又是一條新的技術(shù)路線(xiàn)，這里面訓(xùn)練和推理有非常強(qiáng)的交互，需要跨任務(wù)傳輸數(shù)據(jù)及模型權(quán)重，任務(wù)優(yōu)化總體目標(biāo)也由追求在線(xiàn)實(shí)時(shí)響應(yīng)變?yōu)殡x線(xiàn)高吞吐，這就要克服國(guó)產(chǎn)卡間互聯(lián)帶寬的短板。在這種復(fù)雜訓(xùn)練模式下，效率的影響因素也很多，后訓(xùn)練算力也直接飆升了一個(gè)數(shù)量級(jí)，所以我們馬不停蹄和華為啟動(dòng)了合作攻關(guān)，成效很明顯。說(shuō)是攻關(guān)，其實(shí)這個(gè)過(guò)程更像闖關(guān)，我們沒(méi)有成功案例可以借鑒，只能一點(diǎn)點(diǎn)啃骨頭。

權(quán)哥: 最終我們的算法不僅在國(guó)產(chǎn)算力上成功適配了，而且端到端訓(xùn)練效率相比A卡，從剛開(kāi)始的55%提升到了85%以上。因?yàn)橛?xùn)練框架基礎(chǔ)夯實(shí)之后，我們才能做出更好的深度推理模型。

萬(wàn)里：有請(qǐng)華為昇騰計(jì)算業(yè)務(wù)研發(fā)總裁周斌和我們分享。

萬(wàn)里：訊飛星火迄今仍然是我國(guó)全民開(kāi)放可下載大模型中的唯一一個(gè)用國(guó)產(chǎn)算力訓(xùn)練出來(lái)的大模型，又是唯一一個(gè)在全國(guó)產(chǎn)算力上訓(xùn)練的深度推理模型，在國(guó)產(chǎn)算力上總要有人勇闖無(wú)人區(qū)，還是為我們的團(tuán)隊(duì)自豪的。

星火大模型布局就是“1+N”，1是底座大模型、N是賦能行業(yè)應(yīng)用，這次星火X1也會(huì)率先應(yīng)用落地到實(shí)際場(chǎng)景里。

在教育上，去年1024，依托星火大模型的最新進(jìn)展，聯(lián)合中國(guó)教育科學(xué)研究院發(fā)布了基于“問(wèn)題鏈”的高中數(shù)學(xué)智能教師助手，面向全國(guó)百個(gè)試點(diǎn)區(qū)域、聯(lián)合千名優(yōu)秀教研員和老師打造上萬(wàn)個(gè)優(yōu)秀案例?，F(xiàn)在星火X1已經(jīng)部署在上述試點(diǎn)區(qū)域，來(lái)自北京、上海、合肥等地的教研員和老師均有體驗(yàn)，大家的評(píng)價(jià)都很不錯(cuò)。

老師們都說(shuō)在解答一些高中數(shù)學(xué)的創(chuàng)新題目上，X1能一題多解，在教學(xué)知識(shí)關(guān)聯(lián)、拓展學(xué)生高階思維這些方面表現(xiàn)也很棒。前幾天，在北京試點(diǎn)區(qū)域?qū)ｎ}研討的時(shí)候，北京八中有27年教齡的李雙平老師說(shuō)，X1推理過(guò)程和思路更清晰，如果遇到新題目或者考試題，X1經(jīng)常會(huì)帶來(lái)很大幫助。

X1除了能幫助老師教學(xué)，對(duì)于學(xué)生的學(xué)習(xí)也很有用?？拼笥嶏wAI學(xué)習(xí)機(jī)依托人工智能國(guó)家隊(duì)，首創(chuàng)了AI 1對(duì)1個(gè)性化精準(zhǔn)學(xué)，幫助孩子減負(fù)增效，受到了很多家長(zhǎng)和孩子的喜愛(ài)，用戶(hù)凈推薦值持續(xù)保持行業(yè)第一，著名演員孫儷老師也成為了我們的產(chǎn)品代言人。

這次推出的深度推理模型X1，可以使得訊飛AI學(xué)習(xí)機(jī)對(duì)孩子學(xué)習(xí)的診斷和推薦指導(dǎo)更加精準(zhǔn)，更好地對(duì)孩子進(jìn)行因材施教，后續(xù)我們將會(huì)持續(xù)升級(jí)。

權(quán)哥: 目前我們X1模型策略在醫(yī)療領(lǐng)域已取得初步驗(yàn)證成效，而且醫(yī)療也確實(shí)是一個(gè)非常適合深度推理模型的應(yīng)用場(chǎng)景。我們基于知識(shí)反思和思維鏈技術(shù)，結(jié)合醫(yī)療循證推理技術(shù)，構(gòu)建了醫(yī)療輔助推理能力的X1模型，專(zhuān)科輔助診斷和復(fù)雜病歷內(nèi)涵質(zhì)控的效果都達(dá)到了90%。

同時(shí)，我們已經(jīng)聯(lián)合華西發(fā)布了醫(yī)學(xué)大模型“華西黌醫(yī)”，顯著提升了復(fù)雜病歷內(nèi)涵質(zhì)控效果;聯(lián)合北京安貞醫(yī)院發(fā)布了心臟診斷大模型，為心血管疾病的輔診推理帶來(lái)了技術(shù)突破。我們計(jì)劃在今年上半年正式發(fā)布基于X1的醫(yī)療大模型升級(jí)版，在更大范圍為醫(yī)生提供更專(zhuān)業(yè)更高水平的輔助。

萬(wàn)里：X1已經(jīng)在這些應(yīng)用領(lǐng)域上產(chǎn)生真實(shí)的價(jià)值了。大家在訊飛星火網(wǎng)頁(yè)端和APP端，搜索“深度推理模型X1”智能體，就能直接體驗(yàn)效果了。未來(lái)我們對(duì)X1還有什么計(jì)劃和期待呢?

權(quán)哥: 首先，我們目前訓(xùn)練時(shí)間還不長(zhǎng)，訓(xùn)練數(shù)據(jù)還不充分，隨著飛星二號(hào)的算力持續(xù)到位，以及行業(yè)落地帶來(lái)的飛輪效應(yīng)，會(huì)加快X1模型的優(yōu)化迭代;其次，我們?cè)谀Ｐ徒Y(jié)構(gòu)、強(qiáng)化學(xué)習(xí)算法上已經(jīng)有了不錯(cuò)的思路和方案，因此我們對(duì)X1的效果進(jìn)一步得到更大提升還是非常有信心的。另外，X1技術(shù)對(duì)星火底座模型也有很強(qiáng)的反哺作用，所以星火4.0 Turbo效果也提升了很多。

想哥：現(xiàn)在我們基礎(chǔ)已經(jīng)打牢了，國(guó)產(chǎn)算力水平也在不斷提升，會(huì)全力保障星火大模型持續(xù)進(jìn)步。

萬(wàn)里：相信我們的技術(shù)會(huì)應(yīng)用到更多場(chǎng)景里面去!

訊飛星火4.0Turbo全新升級(jí)

林鴻(產(chǎn)品經(jīng)理)：看到X1對(duì)星火底座的助力和提升，相信大家也很關(guān)注底座最新的進(jìn)展。

钖哥(星火軍團(tuán)CTO)：最近朋友圈很多人刷屏，訊飛得到了大模型中標(biāo)數(shù)量和中標(biāo)金額雙第一的成績(jī)，尤其是在能源、金融、汽車(chē)、運(yùn)營(yíng)商等領(lǐng)域，跟客戶(hù)構(gòu)建了很多的行業(yè)大模型，在剛需場(chǎng)景上共同打磨了近百個(gè)智能體應(yīng)用。這次星火4.0 Turbo的升級(jí)依然是緊貼用戶(hù)的剛需，圍繞著不同行業(yè)龍頭企業(yè)的落地訴求、C端用戶(hù)的真實(shí)反饋。大家關(guān)心的問(wèn)題還是挺相似的，比如說(shuō)“讓大模型支持更長(zhǎng)的文本、理解更復(fù)雜的圖文、減少幻覺(jué)”、“能不能讓大模型對(duì)行業(yè)的理解能力上有更大的提升”等，這都是我們本次星火4.0 Turbo底座升級(jí)的重點(diǎn)方向。

泰哥(研究員)：在去年10月24日，我們基于全國(guó)產(chǎn)算力訓(xùn)練的星火4.0 Turbo就已經(jīng)在各種真實(shí)任務(wù)的背靠背測(cè)試中超過(guò)了OpenAI的GPT4-Turbo。三個(gè)月之后，本次我們?cè)俅紊?jí)星火4.0 Turbo。可以看到，相比去年10月24日的版本，新版本在知識(shí)問(wèn)答、語(yǔ)言理解等能力上都得到了持續(xù)提升，我們的星火底座已全面對(duì)標(biāo)OpenAI 最新版的GPT-4o。特別要說(shuō)明的是，在數(shù)學(xué)能力上，通過(guò)X1大規(guī)模數(shù)據(jù)合成以及基于長(zhǎng)思維鏈的蒸餾技術(shù)，使得數(shù)學(xué)能力絕對(duì)提升了10.5%，這將助力數(shù)學(xué)教學(xué)、金融分析和科研等工作再上一個(gè)新的臺(tái)階。

林鴻：在底座能力上，長(zhǎng)文本也是用戶(hù)非常關(guān)注的一個(gè)能力，尤其是在一些嚴(yán)謹(jǐn)?shù)膱?chǎng)景下，比如企業(yè)知識(shí)問(wèn)答，用戶(hù)對(duì)幻覺(jué)的容忍度幾乎為0，所以我們這次也升級(jí)了底座的長(zhǎng)文本能力，行業(yè)首發(fā)句子級(jí)溯源。

泰哥：我們研發(fā)了基于智能體的全新長(zhǎng)文本框架，除了進(jìn)行超長(zhǎng)注意力機(jī)制的優(yōu)化外，還利用大規(guī)模書(shū)籍?dāng)?shù)據(jù)、網(wǎng)頁(yè)數(shù)據(jù)等進(jìn)行知識(shí)關(guān)聯(lián)式的數(shù)據(jù)合成，對(duì)模型進(jìn)行增強(qiáng)式的訓(xùn)練，使得新版本長(zhǎng)文本的知識(shí)回復(fù)錯(cuò)誤率相對(duì)下降了40%，句子級(jí)溯源的整體效果也已經(jīng)超過(guò)GPT-4o。

钖哥：這兩年得益于與很多龍頭企業(yè)合作的機(jī)會(huì)，我們收集、整理了多個(gè)行業(yè)的海量高價(jià)值文本訓(xùn)練數(shù)據(jù)，并針對(duì)行業(yè)應(yīng)用落地打磨了數(shù)十萬(wàn)的高質(zhì)量行業(yè)場(chǎng)景SFT數(shù)據(jù)以及不少行業(yè)模型。這次星火4.0 Turbo在行業(yè)能力上也有明顯的提升，例如，金融領(lǐng)域知識(shí)問(wèn)答絕對(duì)提升14%，油氣領(lǐng)域絕對(duì)提升了16%。

林鴻：除了對(duì)行業(yè)能力的需求之外，用戶(hù)對(duì)圖文識(shí)別的需求是非常迫切的，比如科研工作者需要閱讀的學(xué)術(shù)論文、老師們需要批閱的手寫(xiě)作業(yè)、企業(yè)需要審核的蓋章合同等，都需要圖文能力，目前在業(yè)界也是巨大的挑戰(zhàn)。

泰哥：這次星火4.0 Turbo特別強(qiáng)化了復(fù)雜場(chǎng)景的圖文識(shí)別能力，從對(duì)比結(jié)果中能看出來(lái)，星火的圖文識(shí)別能力在眾多場(chǎng)景上超過(guò)了國(guó)內(nèi)外友商，有些場(chǎng)景顯著超越，我們的圖文識(shí)別能力已經(jīng)達(dá)到了國(guó)際領(lǐng)先水平。

钖哥：給大家看幾個(gè)例子，第一個(gè)是一個(gè)拍照的表格，這個(gè)表格上都沒(méi)有線(xiàn)，信息是很難理解的，且拍的有點(diǎn)傾斜，這是一個(gè)之前都解決不好的很難的場(chǎng)景。可以看到我們最新的圖文識(shí)別大模型已經(jīng)處理得很好，而友商處理的版面分析就直接錯(cuò)了。

钖哥：第二個(gè)例子是一個(gè)手寫(xiě)文字+公式的圖片，是一個(gè)試卷的手寫(xiě)答案。手寫(xiě)文字密密麻麻的，也沒(méi)有固定的版式。我們新的圖文識(shí)別大模型不僅理解了版式，而且把這么復(fù)雜的手寫(xiě)數(shù)字、符號(hào)和公式都識(shí)別對(duì)了，也是顯著優(yōu)于競(jìng)品。

钖哥：類(lèi)似的難題還有很多，比如醫(yī)療的體檢報(bào)告經(jīng)常有復(fù)雜的長(zhǎng)表格、法院的文書(shū)或?qū)W術(shù)論文里有很雜亂的版式和公式、企業(yè)合同里也會(huì)遇到印章手寫(xiě)合同傾斜少線(xiàn)等等情況，圖文識(shí)別大模型在這類(lèi)疑難雜癥問(wèn)題提升了很多，效果更好了。

泰哥：很多用戶(hù)已經(jīng)很滿(mǎn)意我們的圖文識(shí)別效果，但也有用戶(hù)對(duì)效率提出更大的期許。為了響應(yīng)期待，我們還發(fā)布掃描文檔解析的極速版本，對(duì)文檔的理解速度提升了10倍，大大縮短了處理大量行業(yè)文檔、構(gòu)建私域知識(shí)庫(kù)的時(shí)間。

钖哥：在與各行業(yè)用戶(hù)探索大模型落地的場(chǎng)景過(guò)程中發(fā)現(xiàn)，大家無(wú)論是做戰(zhàn)略規(guī)劃、行業(yè)調(diào)研，還是制定市場(chǎng)策略，花費(fèi)了大量時(shí)間在查找資訊和整理材料上。得益于圖文、行業(yè)、長(zhǎng)文本等能力的提升，我們首發(fā)混域搜索技術(shù)，無(wú)論個(gè)人知識(shí)、企業(yè)知識(shí)、行業(yè)報(bào)告、還是互聯(lián)網(wǎng)信息，提問(wèn)一次可以拿到綜合搜索后的結(jié)果，這樣信息搜索和整理的效率會(huì)大大提升，結(jié)合長(zhǎng)文本首發(fā)的句子級(jí)別的溯源，可以讓大家對(duì)問(wèn)答的結(jié)果更放心。給大家看個(gè)演示。

林鴻：這些能力可以在訊飛星火網(wǎng)頁(yè)端和APP端體驗(yàn)，希望能給大家?guī)?lái)更多的幫助和啟發(fā)，在工作中找到更多場(chǎng)景盡情釋放星火大模型的多維智慧。

此外，深受用戶(hù)喜歡幫助大家做PPT制作的訊飛智文、助力新媒體工作者效率提升的訊飛繪文也同步上新，歡迎大家多多使用，多多反饋。

首發(fā)星火語(yǔ)音同傳大模型

晨璇(產(chǎn)品經(jīng)理)：和大家分享科大訊飛在機(jī)器翻譯方面的最新進(jìn)展。本次發(fā)布的星火語(yǔ)音同傳大模型，是國(guó)內(nèi)首個(gè)具有端到端語(yǔ)音同傳能力的模型?？拼笥嶏w在跨語(yǔ)言溝通上，一直期望為用戶(hù)提供最先進(jìn)的技術(shù)支持和產(chǎn)品體驗(yàn)。

亞楠(研究員)：訊飛是率先通過(guò)全國(guó)翻譯專(zhuān)業(yè)資格考試的機(jī)器翻譯系統(tǒng)，在最近的連續(xù)3屆國(guó)際口語(yǔ)機(jī)器翻譯比賽中獲得了冠軍。本次發(fā)布的端到端語(yǔ)音同傳大模型不僅能夠滿(mǎn)足日常對(duì)話(huà)場(chǎng)景的需求，也在商務(wù)交流和行業(yè)翻譯上取得了明顯的進(jìn)步。

晨璇：這次發(fā)布的關(guān)鍵詞是“端到端的語(yǔ)音同傳”，同聲傳譯在翻譯界也是困難的工作模式。業(yè)界覺(jué)得怎么樣才算得上高質(zhì)量同傳呢?我們邀請(qǐng)上海外國(guó)語(yǔ)大學(xué)高翻學(xué)院張愛(ài)玲院長(zhǎng)，來(lái)跟我們分享一下她的看法。

晨璇：張?jiān)洪L(zhǎng)分享了同傳工作中的幾個(gè)關(guān)鍵維度，“內(nèi)容完整性”“信息準(zhǔn)確性”“語(yǔ)言質(zhì)量”和“溝通效果”。在機(jī)器同傳的場(chǎng)景下，同傳時(shí)延也是影響溝通效果的一個(gè)重要指標(biāo)。講到這里，一起來(lái)試試訊飛星火語(yǔ)音同傳大模型。

境廷(產(chǎn)品經(jīng)理)：我手上這臺(tái)訊飛翻譯機(jī)集成了最新的同傳技術(shù)，一月特別適合去新西蘭，晨璇來(lái)扮演一下當(dāng)?shù)氐膶?dǎo)游，介紹一下眼前的風(fēng)景吧。

境廷：有了星火同傳翻譯，在國(guó)外旅游時(shí)，就可以一邊看風(fēng)景，一邊聽(tīng)當(dāng)?shù)貙?dǎo)游的中文介紹。

晨璇：但這種旅游場(chǎng)景還是挺簡(jiǎn)單的。這次重磅升級(jí)的星火語(yǔ)音同傳大模型，可以再試試更難的內(nèi)容。

境廷：我們有一位用戶(hù)是做建材出口的，他經(jīng)常在展會(huì)這種比較嘈雜的環(huán)境上介紹產(chǎn)品，我現(xiàn)在把翻譯機(jī)連上藍(lán)牙音箱，來(lái)扮演一下這位用戶(hù)，你們作為海外客戶(hù)，感受一下。

晨璇：這種專(zhuān)業(yè)場(chǎng)景下，機(jī)器同傳很快，而且準(zhǔn)確率也很高，再連接音箱的話(huà)，也完全能支持一個(gè)小型會(huì)議的同傳了。

境廷：而且翻譯機(jī)本身還有記錄功能，用戶(hù)可以事后隨時(shí)回溯對(duì)話(huà)內(nèi)容，整個(gè)商談過(guò)程的關(guān)鍵信息都不會(huì)有任何遺漏。除了音箱，我們的翻譯機(jī)還可以搭配很多其他的配件，比如連上藍(lán)牙耳機(jī)，在工廠參觀或者在項(xiàng)目現(xiàn)場(chǎng)考察，有同傳加持，我們就可以邊走邊聊了。

晨璇：同傳譯員在練習(xí)同傳時(shí)，在雙語(yǔ)能力基礎(chǔ)上，要訓(xùn)練聽(tīng)力、記憶力、心理素質(zhì)，還需要了解各行各業(yè)的知識(shí)，有句話(huà)叫“You should know something about everything”。那訊飛星火同傳大模型是怎么做到的語(yǔ)音同傳的呢?

亞楠：十年前訊飛就想做語(yǔ)音同傳，但發(fā)現(xiàn)技術(shù)太難了。現(xiàn)在大模型能力的發(fā)展，結(jié)合訊飛在智能語(yǔ)音技術(shù)上的獨(dú)特算法積累，我們終于可以做端到端的語(yǔ)音同傳。本次發(fā)布的星火語(yǔ)音同傳大模型，是一個(gè)模仿人類(lèi)同傳譯員的思維鏈路來(lái)訓(xùn)練的模型，在聽(tīng)到聲音后進(jìn)行實(shí)時(shí)意群理解和切分，結(jié)合上下文語(yǔ)境精準(zhǔn)選詞，并進(jìn)行碎片化信息的重組。

晨璇：這類(lèi)似同傳工作中所謂的“順句驅(qū)動(dòng)”原則，比如有句話(huà) “I went to iFLYTEK for a seminar at 10 o'clock yesterday”，你們?cè)趺捶g?

亞楠：按照全句翻譯是“昨天十點(diǎn)，我去訊飛參加了一場(chǎng)研討會(huì)”，如果機(jī)器按意群直譯，就是“我去訊飛，為了一場(chǎng)研討會(huì)，在10點(diǎn)，昨天”。用大模型的生成能力做信息重組，就變成“我去了訊飛，去參加一場(chǎng)研討會(huì)，時(shí)間是昨天上午十點(diǎn)”。既滿(mǎn)足同傳延遲，又保證句意準(zhǔn)確傳達(dá)。

亞楠：我們的流式合成技術(shù)會(huì)進(jìn)行意群韻律銜接，并根據(jù)源語(yǔ)速自適應(yīng)的調(diào)節(jié)合成語(yǔ)速。另外還會(huì)根據(jù)源語(yǔ)種和翻譯語(yǔ)種的時(shí)長(zhǎng)差距，向大模型反饋信息，實(shí)時(shí)調(diào)整譯文的精煉度。這樣一來(lái)整個(gè)翻譯系統(tǒng)就可以流暢地運(yùn)行起來(lái)。

晨璇：那目前整體的效果怎么樣?

亞楠：國(guó)外幾個(gè)主流的大模型以交傳為主，這里展示的是我們的同傳系統(tǒng)和國(guó)外交傳系統(tǒng)的對(duì)比。在內(nèi)容完整度、信息準(zhǔn)確度以及語(yǔ)言質(zhì)量等幾個(gè)維度，效果都超過(guò)了國(guó)外的幾個(gè)主流大模型。而且我們的同傳系統(tǒng)還支持不同的時(shí)延模式，最快可以做到5s以?xún)?nèi)。

亞楠：聽(tīng)演講，聽(tīng)報(bào)告，大型會(huì)議的時(shí)候，語(yǔ)音到文字的同傳也是非常實(shí)用的，隨著這次同傳大模型的技術(shù)升級(jí)，也帶來(lái)了各場(chǎng)景的技術(shù)進(jìn)步，我們?nèi)诞a(chǎn)品的翻譯能力都有提升。

境廷：在翻譯機(jī)的應(yīng)用上，我們整體翻譯能力的升級(jí)也一定能讓春節(jié)期間全家出游或者跨國(guó)探親的朋友們有更好的體驗(yàn)!當(dāng)然，針對(duì)語(yǔ)音到語(yǔ)音的同傳場(chǎng)景，我們的翻譯機(jī)將會(huì)配置耳機(jī)、音箱、麥克風(fēng)，在今年推出商務(wù)套裝，滿(mǎn)足不同商務(wù)洽談場(chǎng)景使用。對(duì)于需要同傳的專(zhuān)業(yè)合作伙伴，訊飛同傳也限量開(kāi)放了星火語(yǔ)音同傳大模型的功能入口，您也可以?huà)呙瓒S碼申請(qǐng)?jiān)囉?

以上就是本次訊飛星火大模型升級(jí)發(fā)布的全部?jī)?nèi)容。