你是否曾经遇到过这样的困境：想要和外国朋友聊天，却发现自己的英语水平不够？

想要阅读一篇精彩的外文文章，却被生僻的单词和复杂的语法难住？想要听一首动听的外语歌曲，却不知道歌词的意思？

如果你有这样的需求，那么你一定会对Meta公司最近发布的最新AI翻译模型SeamlessM4T感兴趣。

这个模型可以实现近101种语言之间的文本、音频、视频等多种形式的翻译，而且只需要一个模型就可以完成所有任务。

这是怎么做到的呢？让我们一起来看看吧。

项目地址见文末。

SeamlessM4T是什么？

SeamlessM4T是Meta公司在2023年8月22日公开发布的一个多模态AI翻译模型。它是基于Meta公司之前开发的两个模型：M2M-100和Universal Speech Translator。

，时长02:29

M2M-100是一个文本到文本的机器翻译模型，可以支持100种语言之间的双向翻译。

Universal Speech Translator是一个直接从音频到音频的语音翻译系统，可以支持36种语言之间的双向翻译。

SeamlessM4T将这两个模型结合起来，并且增加了音频到文本、文本到音频、视频到文本、视频到音频等多种翻译任务。它可以自动识别输入和输出的语言类型，无需额外的语言标识模型。它还可以根据输入和输出的媒体形式，自动调整翻译质量和速度。

，时长00:56

SeamlessM4T有以下几个优势：

多功能：SeamlessM4T可以实现多种形式和多种语言之间的翻译，无需切换不同的模型或工具。无论你想要阅读、听取、观看或者说出任何语言的内容，SeamlessM4T都可以帮你实现。

高效：SeamlessM4T只需要一个模型就可以完成所有任务，这样可以减少错误和延迟，提高翻译过程的效率和质量。而且，SeamlessM4T使用了最先进的AI技术，可以在几秒钟内完成翻译。

开源：Meta公司将SeamlessM4T以及它所使用的训练数据集SeamlessAlign都开源了。这意味着任何人都可以免费使用、修改或者改进这个模型。这也有利于促进AI领域的创新和发展。

SeamlessM4T如何使用？

SeamlessM4T目前已经集成在Meta公司旗下的一些产品和服务中，例如Facebook、Instagram、WhatsApp、Messenger等。你只需要在设置中选择你想要使用的语言，就可以享受SeamlessM4T带来的便利。

如果你想要更多地了解和使用SeamlessM4T，你也可以访问Meta公司的官方网站，或者下载Meta公司的AI研究应用Meta AI Research。在这里，你可以找到SeamlessM4T的详细介绍、使用说明、示例、评估报告等信息。你也可以自己尝试输入不同的语言和媒体形式，看看SeamlessM4T的翻译效果如何。

展示下官方demo试玩

首先是开始录音

选择三种要翻译的语言，点击翻译

这时候会有三个结果，可以点击你想要的播放

是不是很神奇，快去体验吧

官方demo试玩：

https://seamless.metademolab.com/demo

代码地址：

https://github.com/facebookresearch/seamless_communication

论文地址：

https://ai.meta.com/research/publications/seamless-m4t/

结语

SeamlessM4T是Meta公司的最新AI翻译神器，它可以实现近100种语言之间的多种形式的翻译，而且只需要一个模型就可以完成所有任务。它有多功能、高效、开源等优势，已经集成在Meta公司旗下的一些产品和服务中。它对于促进全球人们的沟通和联系，以及推动AI领域的创新和发展，都有着重要的意义。

如果你对SeamlessM4T感兴趣，不妨自己去试试看吧。也许你会发现一个全新的世界，也许你会遇到一个意想不到的朋友。无论如何，SeamlessM4T都会为你带来惊喜和乐趣。

出自：https://mp.weixin.qq.com/s/Y87wMiI8iAzUxTZXftqg3w