【人工智能AI】Meta开源AI语言模型NLLB-200

已于 2023-03-25 02:11:22 修改
阅读量2.4w 收藏 2
点赞数 1
分类专栏： 大数据AI人工智能 文章标签： 人工智能 语言模型
于 2023-03-25 02:02:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/universsky2015/article/details/129761520
版权
Meta发布NLLB-200，一个能翻译超过200种语言的AI模型，大幅提升了低资源语言的翻译质量。该项目旨在消除语言障碍，通过开源促进更多包容性技术的发展。
摘要由CSDN通过智能技术生成

Stories Told Through Translation 通过翻译讲述的故事

We’ve created a demo that uses the latest AI advancements from the No Language Left Behind project to translate books from their languages of origin such as Indonesian, Somali, and Burmese into more languages for readers – with hundreds available in the coming months. With this AI tool, families can now read stories together from around the world in a language that works for them.
我们创建了一个演示，使用“不让任何语言掉队”项目的最新 AI 进步，将书籍从其原始语言（例如印度尼西亚语、索马里语和缅甸语）翻译成更多语言供读者使用——未来几个月将提供数百种语言。有了这个 AI 工具，家人现在可以用适合他们的语言一起阅读来自世界各地的故事。

 

 

目录

Stories Told Through Translation 通过翻译讲述的故事

NLLB：No Language Left Behind

NLLB-200 技术演示地址：No Language Left Behind | Meta AI项目地址

No Language Left Behind

Open Sourced Models and Community Integrations

Multilingual Translation Models

LID Model

LASER3 Encoder Models

HuggingFace Integrations

Installation

Datasets

Primary Bitext

Mined Bitext

Backtranslated Bitext

Preparing Datasets for Training

Training NLLB Models

Evaluation and Generation

了解本专栏 订阅专栏 解锁全文 超级会员免费看
AI天才研究院
关注
专栏目录
订阅专栏
Meta AI发布具有200种语言的高品质机器翻译人工智能模型
人工智能研究所的博客
08-17 1162
Meta AI所打造的NLLB-200是第一个能对200种不同语言提供先进质量翻译的单一人工智能（AI）模型。 Meta AI也建立了全新的评价数据集FLORES-200，并衡量NLLB-200在每种语言中运作的成效，以确认能够提供高品质的翻译内容。相较于以前的先进技术水准，NLLB-200的平均质量高出44%。...
AI趋势系列之AI 2.0：将网络效应引入AI时代 人工智能应用需要过渡到人工智能 2.0 时代，以释放网络效应并打造可防御的产品
iCloudEnd的博客
06-20 33
科技界现在已经进入了人工智能时代。过去几年，我们在基础模型层看到了大量的创新——除了 OpenAI，我们还看到了 Mistral、Anthropic、Meta’s Llama、Google Gemini 等的出现。今年，焦点似乎已经从基础模型转移到应用层。a16z 现在定期发布50-100个GenAI 应用程序列表，每天都有新的人工智能应用程序融资 公告。我们是否看到了新一波消费者赢家，还是仅仅是为未来更多成功公司铺平道路的早期实验？
MetaAI科学家解读最新模型：200+语言互译，千倍翻译数据，全球元宇宙用户自由交流...
BAAIBeijing的博客
08-04 1550
导读：近日，MetaAI发布了NLLB-200模型，宣布在200多种语言（其中有70%是低资源语言）上实现了任意互译。其中的亮点在于：研究者让大多数低资源语言训练数据量提升了多个数量级，相当于规模提升百倍甚至千倍；实现了200+语言翻译的平均新SOTA。图注：NLLB团队统计的公开翻译数据（蓝色柱）和经过一系列方法后获得的训练数据（绿色柱）进行的对比。目前，Meta已在其...
nllb-200-distilled-600M语言缩写对照表
红色与青色
06-13 2224
这个模型就是机翻，好处就是不花钱，不用联网，支持语言多，坏处就是翻译质量差，中文资料少，我找了半天才在GitHub上找到对照表凑合着用。
HuggingFace NLLB模型使用
weixin_44283446的博客
02-23 6365
Hugging Face NLLB模型使用
nllb-200 本地部署
m0_57057282的博客
06-19 782
使用facebook的开源翻译模型。
200+语言任意互译，新开源的大模型让粤语靓仔直接喜大普奔
量子位
07-08 418
Alex 发自 凹非寺量子位 | 公众号 QbitAI这个翻译模型，不仅支持200+语言之间任意两两互译，还是开源的。Meta AI在发布开源大型预训练模型OPT之后，再次发布最新成果NLLB。NLLB的全称为No Language Left Behind，如果套用某著名电影，可以翻译成“一个语言都不能少”。这其中，中文分为简体繁体和粤语三种，而除了中英法日语等常用语种外...
大型语言模型用例和应用 Large Language Models Use Cases and Applications
热门推荐
AI天才研究院
06-09 1万+
在这一点上，许多人都听说过一些最值得注意的 LLM 和 LLM 支持的应用程序，例如 ChatGPT 和 DALL-E（它通过“带有聊天对话框的计算机油画”生成了这篇文章的标题图像屏幕提示）。其中一些是开源的，而另一些是闭源的，一些是您必须下载并捆绑到您的应用程序中的软件工件，而另一些则是通过 API 使用的服务。我们将看到熟悉的炒作周期的一个版本，例如这份关于 AI 的 2022 年报告，随着 LLM 领域的发展而上演。这些较低的成本将有助于加快 LLM 生态系统的发展，最重要的是将降低最终用户的成本。
Meta NMT / Speech - 小记
AI + 工程
06-14 532
UST SpeechMatrix 语音到语音翻译语料库 FLORES 数据集 M2M-100 模型 LASER 数据挖掘 VoxPopuli CCMatrix CCAligned XLS-R Wav2vec 2.0 NLLB-200
如何微调 NLLB-200 模型以翻译新语言(教程含源码)
iCloudEnd的博客
10-18 1563
NLLB”（代表“不留下任何语言”）是Meta AI 于 2022 年发布的机器翻译模型家族。这些模型可以在202 种语言中的任何一种之间翻译句子，这是一个巨大的研究突破。但世界上大约有7000种语言，因此大多数至今仍被遗忘。我们如何才能教这个模型多一种语言？在本教程中，我将展示它。作为演示，我们将教模型在俄语和资源匮乏的Tyvan 语言之间进行翻译，这对于该模型来说是新的。俄语属于斯拉夫语系，而泰文语属于突厥语系，受蒙古语影响很大。因此，虽然它们是用类似的西里尔字母书写的，但它们之间的翻译并非易事。
LibreTranslate：免费和开源机器翻译API。 100％自托管，没有限制，与专有服务没有关系。 建立在Argos Translate之上
02-05
自由翻译 | 免费和开源机器翻译API，完全自行托管。 与其他API不同，它不依赖Google或Azure之类的专有提供商来执行翻译。 | API范例 请求： const res = await fetch ( "https://libretranslate.com/translate" , { method : "POST" , body : JSON . stringify ( { q : "Hello!" , source : "en" , target : "es" } ) , headers : { "Content-Type" : "applicati
SeamlessM4T 本地部署 + 语音翻译APP 【干货】
Samle的博客
11-27 7767
本地部署SeamlessM4T语音翻译模型，开源一个翻译机APP
Helsinki-NLP/opus-mt-en-zh和facebook/nllb-200-distilled-600M区别
lishijie258的博客
04-03 3332
简单的说，Helsinki-NLP/opus-mt-en-zh是一个机器翻译模型，可以进行英语和中文之间的翻译，而Facebook/nllb-200-distilled-600M是一个自然语言处理模型，适用于多种NLP任务，如分类、命名实体识别和情感分析等。Helsinki-NLP/opus-mt-en-zh和Facebook/nllb-200-distilled-600M是两种截然不同的模型，它们的结构也完全不同。这种情况，所以建议还是使用Helsinki-NLP/opus-mt-zh。
开源翻译大模型
make_progress的博客
03-31 2824
在开发过程中，会遇到定制化翻译工具的需要，开源的翻译模型可以解决相应的问题。
安装nllb-serve和nllb-api的一些笔记
luyegang1的专栏
02-28 726
debian安装nllb-serve和nllb-api
huggingface NLP工具包教程3：微调预训练模型
weixin_44966641的博客
11-02 1374
huggingface NLP工具包教程3：微调预训练模型
DINO&DINO v2：颠覆自监督视觉特征表示学习
家鸽的代码屋
10-15 1022
DINO系列学习总结
新质技术之生成式AI、大模型、多模态技术开发与应用研修班
Lynn121的博客
10-17 455
在当前的科技飞速发展的时代，生成式人工智能、大模型、多模态技术的出现正为企业的数字化转型带来革命性变革。该研修班特别设计了为期四天的课程，从生成式AI的核心概念入手，逐步深入探讨大模型的应用开发以及多模态技术的集成运用。通过此次研修班，学员不仅能获得最新的AI技术知识，还能获得行业权威机构的职业技能认证，这将极大提升其在未来职场中的竞争力。本次研修班采取理论与实战相结合的培训模式，旨在让学员不仅能够全面掌握生成式AI、大模型和多模态技术的最新理论，还能通过实战练习，掌握将这些技术应用于实际业务。
计算机毕业设计Python深度学习房价预测 房源可视化 房源爬虫 二手房可视化 二手房爬虫 递归决策树模型 机器学习 深度学习 大数据毕业设计
最新发布
全网粉丝100W+、全栈领域优质创作者、B站、github、CSDN等社区技术专家、专注于高端精品毕业项目源码实战
10-18 445
计算机毕业设计Python深度学习房价预测 房源可视化 房源爬虫 二手房可视化 二手房爬虫 递归决策树模型 机器学习 深度学习 大数据毕业设计
nllb翻译模型 使用
01-13
nllb翻译模型是一种基于神经网络的机器翻译模型，它使用了一种称为无监督对齐的训练方法来学习不同语言之间的关联。该模型可以将输入的一种语言文本快速而准确地翻译成另一种语言的文本。 nllb翻译模型的使用非常...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI天才研究院

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值