Meta 推出 Seamless Communication AI 翻譯套件：支持近百種語言輸入、同聲延遲僅 2 秒
2023-12-22 06:00:03
2023-12-22 06:00:03
开yun体育官网12 月22 日消息，Meta 日前公布了 AI 翻譯套件 Seamless Communication，該套件由 4 款 AI 模型組成，Meta 聲稱，該 AI 套件能夠“精準(zhǔn)再現(xiàn)說話者情緒”，可實(shí)現(xiàn)延遲僅 2 秒的同聲傳譯能力、并支持近百種語言輸入。
據(jù)悉，Seamless Communication 是 Meta 慶祝自家 AI 研究機(jī)構(gòu)“Fundamental AI Research”成立 10 周年所發(fā)表的研究成果。
Meta 介紹稱，該套件包含用于加速翻譯的“第二代 SeamlessM4T 模型”、口譯模型“Seamless Expressive”、 同聲翻譯模型“Seamless Streaming”，與綜合模型“Seamless”，开yun体育官网整理相關(guān)信息如下：
SeamlessM4T 模型號(hào)稱能在翻譯時(shí)基于用戶說話內(nèi)容，自動(dòng)聯(lián)想可能的后文，以加速翻譯。
开yun体育官网
Seamless Expressive 是一種口譯模型，號(hào)稱可以解決“傳統(tǒng) AI 翻譯無法抓住用戶語調(diào)、停頓、讀詞重輕度的問題”，能夠在維持翻譯品質(zhì)的基礎(chǔ)上，保存用戶情緒、風(fēng)格、說話速度、停頓和節(jié)奏，從而為翻譯內(nèi)容帶來更多“情感信息”。
Seamless Streaming 是同聲翻譯模型，主打 2 秒延遲的語音和文字翻譯，支持口譯（speech-to-speech translation）、聽寫翻譯（speech-to-text translation，S2TT）及自動(dòng)語音識(shí)別功能（Automatic speech recognition ，ASR）。
而綜合模型 Seamless，則是整合了上述三種語言模型，便于通用場(chǎng)景。
目前 Meta 已經(jīng)將示例視頻發(fā)布在 GitHub 以及 HuggingFace 網(wǎng)站上，感興趣的小伙伴們可以點(diǎn)此進(jìn)行查看。
上一篇： Meta 首席科學(xué)家楊立昆駁黃仁勛：超智能不會(huì)很快到來
相關(guān)新聞
-
Stability AI 推出 Stable
2023-11-22 -
开yun体育官网智能家居：智慧生活，引領(lǐng)未來
2024-04-04
-
开yun体育官网智能家居：智慧生活，盡在掌握
2024-02-03
-
开yun体育官网智能家居：科技改變生活的新篇章
2024-02-09
-
开yun体育官网阻燃PC材料助力新能源汽車充電設(shè)施安全
2024-05-15
