傑愛得資訊 jumpAD
0800-000-964

微軟宣布AI模型VALL-E可模擬任何人聲 只需要3秒鐘錄音

取自:心動傳媒
您好,我們是傑愛得資訊,歡迎來到我們的媒體聯播網
微軟研究人宣佈下一文字合成(text-to-speech, TTS) AI模型VALL-E,只要給它3秒鐘的聲音樣本即可模擬出逼真人聲。而在學習某一聲音到一定程度後,VALL-E就能模倣原聲音主人說任何話,並且保留說話者的音質及音色。

微軟團隊認為VALL-E可以用於高品質的語音合成應用、語音編輯(編輯某人錄音說話文本以讓他講未曾說過的話),以及結合其他生成AI模型如GPT-3製作聲音內容。

微軟將VALL-E稱為「神經編碼器語言模型 (neural codec language model)」,並為此開發了EnCodec。一般TTS技術以操作波形來合成聲音的方法不同,VALL-E則是從文字及聲學提示來生成個別語音編碼器程式。它基本上是以EnCodec分析人聲結構,將之切成個別元素(名為token),再使用訓練資料比對這人講其他詞語的聲音。

微軟是利用Meta建立的聲音資料庫LibriLight訓練VALL-E的語音合成能力。它包含7,000個人共6萬則英文聲音樣本,後者主要來自公共電子書LibriVox。

在以VALL-E產生聲音時,研究人員只餵VALL-E 3秒鐘的「說話者提示」樣本及文字串(他們希望說出的詞語文本)。在VALL-E網站上,微軟提供了數十則AI模型產生的聲音樣本,包括對照組(Ground Truth)樣本及VALL-E生成的聲音樣本。有些對樣本真的很相似。有的聲音成果聽來就是電腦生成,但有些幾乎和人聲無法分辨,也達到模型的目標。

除了保存說話者的音色和聲音表情,VALL-E也會模仿聲音樣本的「聲學環境」,例如如果樣本是來自電話,則它就會模仿講電話的聲音感覺。
下方繼續閱讀
曝光6,789/日 成本100/月
下文請點廣告解鎖
下文請點廣告解鎖
投放Google多媒體聯播網廣告(點此)arrow_downward,包含轉換代碼安裝

※ 如果看到投資類型廣告,請再三評估風險!

繼續閱讀keyboard_double_arrow_down

或許因為VALL-E可以用作惡作劇及詐騙,微軟並未提供VALL-E程式碼供開發人員測試。研究人員也了解這AI科技可能的危害,表示VALL-E可以合成保留說話者身份的語音,在被誤用時也可能造成風險,像是冒用身份或模仿聲音。為降低風險,也可以建立一個AI模型來辨別某個聲音是否為VALL-E所合成。研究人員未來開發模型時也會將微軟AI原則納入實踐。

來源:Ars Technica
點此投放Google多媒體聯播網廣告
※ 如果看到投資類型廣告,請再三評估風險!
post_add 資料來源:心動傳媒
本文相關:
智能管家
智能喇叭
智能音箱
Assistant
Google語音助理
Google助理
Google 助理
智慧家庭
AI語音助理
語音助理
AI服飾助理
LaMDA
Bard
Open AI
ChatGPT
機器學習
Gemini
AI
AI
Vertex
LLM
Transformer
LaMDA
人工智
語言模型
ML
深度學習
gpt
GPT
Google Assistant
智能
智慧
谷歌音箱
谷歌助理
LM

傑愛得資訊領先業界

國際認證獎項報導
我們是業界少數同時具備數位行銷、系統開發、雲端服務的數位整合專業團隊
─ 2021.05

【2024年亞太區年度AI人工智慧廣告科技公司】封面人物
榮獲 MarTech Outlook 美國期刊評選

【2023年亞太區20大傑出AI人工智慧解決方案服務商】
榮獲 APAC CIO Outlook 美國矽谷期刊評選

【2024年值得關注的30大領先企業】
榮獲 CIO Bulletin 美國期刊評選

取得AI廣告追蹤技術國家發明專利

ISO/IEC 27001:2022 Lead Auditor 資安管理系統主導稽核員

bookmark_star 查看資歷
傑愛得資訊 顧問諮詢報價
公司/姓名
頭銜/稱謂
e-mail
LINE id
公司資本額
大約預算
聯繫語言
網路行銷
Google Ads
最高成效廣告
智慧廣告
探索廣告
APP 宣傳廣告
交給顧問評估規畫
Yahoo Ads
交給顧問評估規畫
Microsoft Ads
關鍵字廣告(原Yahoo 關鍵字)
網路系統
雲服務專案
諮詢/備註
※本公司與全城通律法律顧問合作,以上服務皆遵守法律規範。
jumpAD 吉傳媒 PFP Next Erene Design 懿坊飾品 三分糖手作中品牌故事
🤫 悄悄說: