91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

開源項目:根據(jù)語音自動生成動畫人物口型

如意 ? 來源:量子位 ? 作者:量子位 ? 2020-12-23 15:26 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

只需要輸入一段語音,代碼會自動生成與之相對的動畫唇形。

還是毫無違和感的那種。

這是一個在GitHub上擁有501星的開源項目,叫做Rhubarb Lip Sync。

它既可以是Windows和OS X命令行工具,也可以作為軟件的插件使用,能夠根據(jù)語音記錄自動創(chuàng)建2D嘴型動畫。

它可以用于計算機游戲、動畫卡通中的角色,或者用于其他需要基于現(xiàn)有錄音、對嘴部進行動畫處理的的影視項目。

那么,它是怎么實現(xiàn)如此效果的呢?

運作原理

首先,了解一下動畫人物說話的六種嘴型。

上述六種嘴型是由漢娜·巴貝拉(Hanna-Barbera)發(fā)明,已經(jīng)成為2D動畫嘴型的制作標(biāo)準(zhǔn),被迪士尼和華納兄弟等影視公司在多部影視作品采用。

大多數(shù)的發(fā)音,都可以用這六種嘴型表示出來。

因此,Rhubarb Lip Sync工作的步驟如下:

輸入一段語音

Lip Sync識別這段語音

使用六個基本嘴形和最多三個擴展嘴形與語音匹配

輸出一個固定格式的文件

假如我說個奇怪的方言,它也能輸出相應(yīng)的嘴型動畫嗎?

當(dāng)然不是。

目前,Rhubarb Lip Sync只提供了兩個語音識別系統(tǒng):

PocketSphinx:只能識別英語,準(zhǔn)確率更高。

Phonetic :能識別所有語言,因為它是依據(jù)個人的聲音和音節(jié)判別的,但準(zhǔn)確率不如前者。

那么,這個小工具可以跟哪些視頻軟件融合使用呢?

可適用于多款軟件

Adobe After Effects

可以在下載Rhubarb Lip Sync,并且安裝到AE上,可以直接在AE上運行這個軟件。

Moho and OpenToonz

Rhubarb Lip Sync能夠生成.dat文件,這種文件可以被Moho and OpenToonz識別,并導(dǎo)入使用。

Spine by Esoteric Software

Rhubarb Lip Syn for Spine是一個圖形工具,可讓導(dǎo)入Spine項目,執(zhí)行自動唇形同步,然后將結(jié)果重新導(dǎo)入Spine。

Vegas Pro by Magix

Rhubarb Lip Syn 還附帶了兩個用于Vegas Pro(以前稱為Sony Vegas)的插件腳本,可直接在Vegas中使用。

趕快把這個小工具推薦給你喜歡做視頻的朋友吧~

源代碼地址:

https://github.com/DanielSWolf/rhubarb-lip-sync

最新版本的下載地址:

https://github.com/DanielSWolf/rhubarb-lip-sync/releases

https://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/AdobeAfterEffects/README.adoc

https://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/EsotericSoftwareSpine/README.adoc
責(zé)編AJX

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 語音識別
    +關(guān)注

    關(guān)注

    39

    文章

    1812

    瀏覽量

    116064
  • 開源
    +關(guān)注

    關(guān)注

    3

    文章

    4209

    瀏覽量

    46164
  • 源代碼
    +關(guān)注

    關(guān)注

    96

    文章

    2953

    瀏覽量

    70340
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    開源鴻蒙項目順利孵化畢業(yè)

    2025年11月21日,2025開放原子開發(fā)者大會在北京隆重啟幕。作為本次大會的重磅環(huán)節(jié)和核心焦點之一,在大會開幕式上,開放原子開源基金會(以下簡稱“基金會”)宣布開源鴻蒙項目達成開源
    的頭像 發(fā)表于 11-27 14:36 ?565次閱讀

    開源歐拉項目達成開源孵化目標(biāo)順利畢業(yè)

    11月21日,2025開放原子開發(fā)者大會在北京隆重啟幕。作為本次大會的重磅環(huán)節(jié)和核心焦點之一,在大會開幕式上,開源歐拉項目達成開源孵化目標(biāo)、順利畢業(yè)。
    的頭像 發(fā)表于 11-25 17:40 ?1127次閱讀

    開源鴻蒙項目達成開源孵化目標(biāo)順利畢業(yè)

    11月21日,2025開放原子開發(fā)者大會在北京隆重啟幕。作為本次大會的重磅環(huán)節(jié)和核心焦點之一,在大會開幕式上,開源鴻蒙項目達成開源孵化目標(biāo)、順利畢業(yè),這是項目
    的頭像 發(fā)表于 11-25 17:36 ?1162次閱讀

    開源鴻蒙和開源歐拉成為開放原子開源基金會首批畢業(yè)項目

    11月21日,在2025開放原子開發(fā)者大會開幕式上,開放原子開源基金會宣布旗下開源鴻蒙(OpenHarmony)與開源歐拉(openEuler)成為首批畢業(yè)項目。
    的頭像 發(fā)表于 11-25 17:22 ?844次閱讀

    openDACS 2025 開源EDA與芯片賽項 賽題七:基于大模型的生成式原理圖設(shè)計

    ,形成了一批具有應(yīng)用價值的技術(shù)成果。本屆大賽預(yù)計發(fā)布50個賽項,持續(xù)規(guī)劃1500萬元總獎金。 openDACS2025開源EDA與芯片賽項,聚焦集成電路產(chǎn)業(yè)的數(shù)字設(shè)計、處理器設(shè)計自動化、生成式芯片設(shè)計等
    發(fā)表于 11-13 11:49

    deepin IDE入選Gitee最有價值開源項目

    近日,deepin IDE 成功入選 Gitee 最有價值開源項目(GVP)!
    的頭像 發(fā)表于 10-14 18:10 ?1291次閱讀

    商湯如影圖片數(shù)字人技術(shù)閃耀央視舞臺

    依托商湯日日新大模型的多模態(tài)能力,只需上傳一張人物照片,輸入文字腳本或音頻文件,AI 就能自動生成人物動態(tài)視頻,并支持多種語言,實現(xiàn)了與真人幾乎無差別的口型匹配、動作呼應(yīng)和情緒表達。
    的頭像 發(fā)表于 09-22 16:18 ?964次閱讀

    基于開源鴻蒙的語音識別及語音合成應(yīng)用開發(fā)樣例

    本期內(nèi)容由AI Model SIG提供,介紹了在開源鴻蒙中,利用sherpa_onnx開源三方庫進行ASR語音識別與TTS語音合成應(yīng)用開發(fā)的流程。
    的頭像 發(fā)表于 08-25 14:26 ?4129次閱讀
    基于<b class='flag-5'>開源</b>鴻蒙的<b class='flag-5'>語音</b>識別及<b class='flag-5'>語音</b>合成應(yīng)用開發(fā)樣例

    【Sipeed MaixCAM Pro開發(fā)板試用體驗】基于MaixCAM-Pro的AI生成圖像鑒別系統(tǒng)

    1. 項目概述 本項目旨在開發(fā)并部署一個高精度的深度學(xué)習(xí)模型,用于自動鑒別一張圖片是由AI生成(如Stable Diffusion, DALL-E, Midjourney等工具
    發(fā)表于 08-21 13:59

    開放原子開源基金會與新一批開源項目完成捐贈簽約

    近日,在2025開放原子開源生態(tài)大會開幕式上,開放原子開源基金會與新一批開源項目完成捐贈簽約,涵蓋人工智能、具身智能、基礎(chǔ)軟件、區(qū)塊鏈等多個技術(shù)領(lǐng)域,為基金會拓展在關(guān)鍵技術(shù)領(lǐng)域上的布局
    的頭像 發(fā)表于 07-28 17:04 ?1012次閱讀

    普華基礎(chǔ)軟件榮膺優(yōu)秀開源項目

    近日,2025上海開源創(chuàng)新菁英獎評選結(jié)果正式揭曉。普華基礎(chǔ)軟件開源安全車控操作系統(tǒng)小滿EasyXMen憑借在開源技術(shù)創(chuàng)新與產(chǎn)業(yè)應(yīng)用實踐方面的突出表現(xiàn),榮獲“優(yōu)秀開源
    的頭像 發(fā)表于 07-28 16:48 ?936次閱讀

    RT-Thread榮獲2025優(yōu)秀開源項目 | 新聞速遞

    6月底,RT-Thread睿賽德受邀參與由上海開源信息技術(shù)協(xié)會主辦的2025上海開源創(chuàng)新精英薈。上海市商委副主任張杰出席會議并致辭。RT-Thread嵌入式操作系統(tǒng)項目憑借其卓越的技術(shù)創(chuàng)新與
    的頭像 發(fā)表于 07-04 09:04 ?2657次閱讀
    RT-Thread榮獲2025優(yōu)秀<b class='flag-5'>開源</b><b class='flag-5'>項目</b> | 新聞速遞

    零知開源——ESP32語音交互系統(tǒng)(AI小智)開發(fā)教程

    一、功能介紹小智AI聊天機器人是一個基于嵌入式硬件與人工智能技術(shù)深度融合的智能交互系統(tǒng)。該項目以ESP32開發(fā)板為核心,結(jié)合語音喚醒、自然語言處理、音頻解碼播放及圖形化交互界面四大核心模塊,實現(xiàn)
    發(fā)表于 03-29 16:30

    Open Echo:一個開源的聲納項目

    “ ?這是一個還在迭代中的項目。開源的回聲測深儀/水深測量儀/聲吶系統(tǒng),適用于水文測繪及科研用途?;贏rduino平臺開發(fā)并具備良好兼容性? ” ? Open Echo 概覽 作為持續(xù)迭代
    的頭像 發(fā)表于 03-20 11:14 ?2647次閱讀
    Open Echo:一個<b class='flag-5'>開源</b>的聲納<b class='flag-5'>項目</b>

    ?Diffusion生成式動作引擎技術(shù)解析

    Diffusion生成式動作引擎 Diffusion生成式動作引擎是一種基于擴散模型(Diffusion Models)的生成式人工智能技術(shù),專注于生成連續(xù)、逼真的人類動作或
    的頭像 發(fā)表于 03-17 15:14 ?3069次閱讀