91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

Neurotech重建聽到的聲音 并探究人們是如何感知音樂的

IEEE電氣電子工程師 ? 來源:IEEE電氣電子工程師 ? 2023-08-25 16:39 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

你腦子里有沒有一首歌?加州大學伯克利分校神經(jīng)科學家團隊的一項新研究在了解音樂感知和認知的神經(jīng)基礎方面取得了重大進展,真正推動了與音樂相關的神經(jīng)科學的發(fā)展。

最近發(fā)表在PLOS Biology雜志上的這項研究結果(journals.plos.org/plosbiology/article?id=10.1371/journal.pbio.3002176)顯示了人類大腦對音樂表演的反應。當我們的耳朵聽到一段歌曲片段后,它會被我們的耳蝸(內(nèi)耳的螺旋腔)轉(zhuǎn)化為神經(jīng)元活動。Ludovic Bellier是加州大學伯克利分校Helen Wills神經(jīng)科學研究所的博士后,他研究大腦中的神經(jīng)網(wǎng)絡最終是如何“聽到”這些聲音的。

在他的團隊的實驗中,Bellier和同事分析了聽迷幻搖滾樂隊Pink Floyd歌曲的人的大腦活動。29名參與者是紐約州奧爾巴尼市奧爾巴尼醫(yī)療中心的癲癇患者。作為治療的一部分,這些患者的大腦表面植入了電子傳感器,他們被要求專心聽Pink Floyd的歌曲“Another Brick in the Wall”。研究人員記錄了每個腦電極的振蕩電位,這些測量被稱為皮層電圖記錄(ECoG),是反映每個電極周圍大腦小區(qū)域神經(jīng)活動的寬帶信號

研究人員假設,每位患者記錄的ECoG信號反映了他們的大腦是如何感知為他們播放的音樂的。為了驗證他們的假設,并了解患者大腦中哪些區(qū)域最參與音樂感知,該團隊擬合模型,以重建歌曲的音頻頻譜圖,當以ECoG特征作為輸入時,音頻頻譜圖顯示了聲能在頻率上隨時間的分布。如果模型能夠在正則化訓練后準確地重建聲譜圖,那么ECoG特征必須反映關于向患者播放的音樂的一些信息。

根據(jù)Bellier的說法,研究小組能夠驗證他們的假設。通過使用多種類型的模型來重建聽覺信號,科學家們可以解碼出歌曲輸出音頻的至少部分可聽見的相似性。研究人員表示,據(jù)他們所知,他們的研究結果是第一份從ECoG數(shù)據(jù)中回歸的音樂音頻出版物。盡管原始音頻和重建音頻之間的相關性仍遠未達到1比1——統(tǒng)計r平方值為0.325——但當將一些模型的輸出轉(zhuǎn)換回音頻波形時,如果距離較遠,則可以將其識別為經(jīng)典歌曲。一種更復雜、更非線性的重建算法——所謂的多層感知器,或簡單的雙層人工神經(jīng)網(wǎng)絡——會產(chǎn)生0.429的更高r平方擬合值和更清晰的音頻重建。

為了測試大腦中哪些區(qū)域最參與音樂處理,研究人員在去除電極輸入的同時,對模型進行了相同的音頻重建任務訓練??傊瑏碜运谢颊叩腅CoG數(shù)據(jù)覆蓋了大腦的大部分總表面積,因此科學家們能夠?qū)⒋竽X的許多潛在區(qū)域視為產(chǎn)生聽音樂體驗的關鍵參與者。

通過比較涉及所有大腦區(qū)域的模型和沒有涉及的模型之間的性能變化——有時稱為消融研究——研究人員能夠說出每個大腦區(qū)域提供了多少信息。換言之,如果當特定區(qū)域的電極被移除時,重建精度沒有大的變化,那么該區(qū)域就不會像音樂感知那樣參與其中。

從這個過程中,研究人員發(fā)現(xiàn),去除從大腦左右兩側一個稱為顳上回(STG)的區(qū)域收集的腦電波數(shù)據(jù)會導致重建精度的最大下降。這個區(qū)域恰好位于耳朵附近,也被認為在語音處理中發(fā)揮著重要作用,因此它實際上可能在大腦處理復雜結構化聲音的能力中發(fā)揮更大的作用。

該團隊還發(fā)現(xiàn),從左右STG中單獨去除數(shù)據(jù)特征對重建精度的影響顯著不同。這表明,參與者大腦右側STG的活動比左側STG有更多關于歌曲的信息。奇怪的是,該領域先前的研究表明,語音處理的情況似乎恰恰相反,左側STG通常比右側STG做更多的工作。Bellier說:“在95%的右撇子中,言語主要位于左半球。我們在論文中表明,音樂(在左右STG之間)分布更廣,但具有右側優(yōu)勢”——這意味著右側STG處理的音樂信息比左側多?!?/p>

“我們可以做一個非常簡單的后續(xù)跟進,”Bellier說。也就是說,本研究只考慮了70到150赫茲的高頻腦電波信息。然而,Bellier表示,根據(jù)ECoG信號的較低頻率范圍計算的音頻特征也可以對重要信息進行編碼。這就是為什么他說,該團隊計劃在當前論文中對不同頻率范圍的神經(jīng)活動重復相同的分析。正如論文所總結的那樣,該小組目前和未來的工作將增加“我們對人腦音樂處理理解的又一塊磚”。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴

原文標題:Neurotech重建聽到的聲音 并探究人們是如何感知音樂的

文章出處:【微信號:IEEE_China,微信公眾號:IEEE電氣電子工程師】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    如何查看小智是否成功進入聲音設置?

    你可以通過后臺頁面狀態(tài)、設備反饋、語音測試三種方式,快速確認小智是否成功進入聲音設置生效。 一、后臺頁面直接查看(最準) 登錄小智AI后臺:https://xiaozhi.me/console
    發(fā)表于 02-16 06:39

    云知聲發(fā)布“山?!?b class='flag-5'>知音”大模型2.0,醫(yī)療AI加速落地驅(qū)動業(yè)績高增長

    今年1月,云知聲正式發(fā)布其自研大模型“山?!?b class='flag-5'>知音”2.0版本,并同步披露2025年度業(yè)績預告——全年營收預計同比增長超60%,凈利潤實現(xiàn)扭虧為盈。這一系列動作不僅彰顯了云知聲在大模型技術迭代上的領先
    發(fā)表于 02-06 10:28 ?1033次閱讀
    云知聲發(fā)布“山海·<b class='flag-5'>知音</b>”大模型2.0,醫(yī)療AI加速落地驅(qū)動業(yè)績高增長

    當足球遇見人機交互傳感技術:唯創(chuàng)知音如何用微波雷達“喚醒”音樂紀念品

    。本期揭秘智能人機交互傳感模組在音樂紀念品上的應用這家企業(yè)深耕音響產(chǎn)品領域多年,這一次,他們瞄準了德國這片足球氛圍濃厚的市場攜手唯創(chuàng)知音共創(chuàng)了這款紀念品。德國擁
    的頭像 發(fā)表于 12-19 12:03 ?275次閱讀
    當足球遇見人機交互傳感技術:唯創(chuàng)<b class='flag-5'>知音</b>如何用微波雷達“喚醒”<b class='flag-5'>音樂</b>紀念品

    賦能 BEV 感知課題!高??蒲卸鄠鞲衅鲿r間同步方案

    在高校自動駕駛實驗室里,團隊可能常以BEV(Bird’s-EyeView)感知架構為研究主線。旨在通過相機陣列和激光雷達的數(shù)據(jù),在空間上重建統(tǒng)一的車周環(huán)境,為下游檢測、分割提供高精度“語義地圖”。然而,一旦相機間的時間同步存在幾十毫秒及以上的
    的頭像 發(fā)表于 11-14 17:32 ?2983次閱讀
    賦能 BEV <b class='flag-5'>感知</b>課題!高校科研多傳感器時間同步方案

    僅使用智能手機在NVIDIA Isaac Sim中重建場景

    使用 iPhone 拍攝照片,到利用 3DGUT 進行 3D 場景重建,再到將重建的場景導入 NVIDIA Isaac Sim 添加機器人。若要跳過重建步驟(步驟 1–3),直接在
    的頭像 發(fā)表于 11-10 14:03 ?986次閱讀

    解鎖聲音定位新維度,AR-1105 雙數(shù)字麥克風陣列板引領音頻感知革命

    廣泛應用于智能家居、工業(yè)監(jiān)測、智能交互等領域,為設備提供精準的聲音定位與高保真音頻采集能力,是聲學智能應用的核心組件,助力產(chǎn)品在聲音感知與處理方面實現(xiàn)突破性升級
    的頭像 發(fā)表于 11-07 09:14 ?901次閱讀
    解鎖<b class='flag-5'>聲音</b>定位新維度,AR-1105 雙數(shù)字麥克風陣列板引領音頻<b class='flag-5'>感知</b>革命

    如何進行聲音定位?

    文章主要介紹了如何利用一種簡單的TDOA算法進行聲音點位,使用數(shù)據(jù)采集卡進行聲音定位的實驗。
    的頭像 發(fā)表于 09-23 15:47 ?1953次閱讀
    如何進行<b class='flag-5'>聲音</b>定位?

    多路混音聲音播放芯片型號推薦

    以下是唯創(chuàng)知音旗下主流的多路聲音播放芯片深度解析,結合精準參數(shù)、豐富場景及技術特性,滿足智能設備多樣化音頻需求: 一、WTV380/890 系列:高集成多模態(tài)交互芯片 核心參數(shù) 通道能力:支持8 路
    的頭像 發(fā)表于 08-15 16:51 ?927次閱讀

    華系首款家用純電SUV全新嵐圖知音下線

    華系首款家用純電SUV——全新嵐圖知音今天正式下線,將于8月13日正式開啟預售,預計8月底上市。
    的頭像 發(fā)表于 08-11 11:39 ?1160次閱讀

    聲源定位模塊-AR1105# 聲源定位# 聲音定位

    聲音降噪
    深圳市聲訊電子有限公司
    發(fā)布于 :2025年08月01日 16:01:09

    【新品發(fā)布】新一代艾為燈語,具備情緒感知的多維炫彩燈效

    音樂律動算法及對應的SoC產(chǎn)品,可實現(xiàn)聲音同步“音隨我動”、“彗星擺尾”、“流光溢彩”、具備情緒感知的多維炫彩燈效,已在多款車型量產(chǎn)。"艾為燈語"系列目前累計產(chǎn)品
    的頭像 發(fā)表于 06-27 19:09 ?1136次閱讀
    【新品發(fā)布】新一代艾為燈語,具備情緒<b class='flag-5'>感知</b>的多維炫彩燈效

    無刷直流電機電流測量的探究

    電流進行采樣,利用二階巴特沃思低通濾波器進行濾波,得到較為平滑的電流,到達有效控制電機的目的。 純分享帖,點擊下方附件免費獲取完整資料~~~ *附件:無刷直流電機電流測量的探究.pdf 【免責聲明】本文系網(wǎng)絡轉(zhuǎn)載,版權歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權
    發(fā)表于 06-26 13:45

    紫光展銳T8300 5G SoC為用戶開創(chuàng)主流音頻新體驗

    數(shù)字化時代,從語音通話到智能交互,從聆聽音樂到創(chuàng)作Vlog,聲音已成為隱形的基礎措施。日益發(fā)展的音頻技術正在重構用戶感知世界的方式,重塑用戶的聽覺體驗。
    的頭像 發(fā)表于 06-13 10:07 ?980次閱讀

    音樂盒芯片方案——N9305音樂芯片

    音樂盒芯片方案開發(fā)音樂盒,作為一種融合藝術與機械智慧的精巧物件,散發(fā)著獨特魅力。它以靈動的音符為載體,承載著人們的情感、回憶與祝福。從孩童手中開啟夢幻世界的木質(zhì)八音盒,到戀人間傳遞愛意的精致
    的頭像 發(fā)表于 06-05 15:29 ?929次閱讀
    <b class='flag-5'>音樂</b>盒芯片方案——N9305<b class='flag-5'>音樂</b>芯片

    從安防到元宇宙:RK3588如何重塑視覺感知邊界?

    定義圖像處理的精度與效率。 應用場景深度解析: 智能安防:在智慧園區(qū)部署中,單板可同時接入32路1080P攝像頭,通過AI算法實現(xiàn)人臉識別、異常行為檢測,實時壓縮傳輸至云端,帶寬占用降低40%。 AR
    發(fā)表于 04-07 16:11