利用开源工具搭一套汉英翻译系统（三）：语言模型工具SRILM

最新推荐文章于 2023-11-17 23:40:49 发布
最新推荐文章于 2023-11-17 23:40:49 发布
阅读量1.1k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhangjcsd/article/details/49074689
版权

语言模型工具选择使用SRILM。存在其他选择KenLM, IRSTLM。

下载地址：http://www.speech.sri.com/projects/srilm/download.html ，需要提供一点个人信息才允许下载。我们得到的版本是1.7.1

下载完后，解压。

vi Makefile

改SRILM = $文件夹路径

MACHINE_TYPE := i686-m64

记得去掉#，保存退出。

make编译

编译中可能遇到的问题，见FAQ：http://www.speech.sri.com/projects/srilm/manpages/srilm-faq.7.html


zhangjcsd
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
人工智能大模型之开源大语言模型汇总（国内外开源项目模型汇总）
丨汀、的博客
06-19 2758
人工智能大模型之开源大语言模型汇总（国内外开源项目模型汇总）
2024 年 8 个顶级开源 LLM（大语言模型）
最新发布
一览无遗
12-19 2万+
选择开源 LLM 的公司将可以访问 LLM 的工作原理，包括它们的源代码、架构、训练数据以及训练和推理机制。这种透明度是审查的第一步，也是定制的第一步。由于每个人都可以访问开源 LLM，包括它们的源代码，因此使用它们的公司可以针对其特定用例对其进行自定义。
开源大语言模型完整列表
stone1290的专栏
06-23 8160
Large Language Model (LLM) 即大规模语言模型，是一种基于深度学习的自然语言处理模型，它能够学习到自然语言的语法和语义，从而可以生成人类可读的文本。所谓"语言模型"，就是只用来处理语言文字（或者符号体系）的 AI 模型，发现其中的规律，可以根据提示 (prompt)，自动生成符合这些规律的内容。LLM 通常基于神经网络模型，使用大规模的语料库进行训练，比如使用互联网上的海量文本数据。
开源免费多语言翻译模型
weixin_42608414的博客
07-06 4616
​今天给大家介绍赫尔辛基大学开源免费的多语言翻译模型，赫尔辛基大学开发了1400多个多语种翻译模型，我们可以在Hugging Face网站上免费下载免费使用这些模型,今天我来介绍其中的中译英和英译中两个模型。
开源大语言模型LLMs汇总
datayx的文章
07-20 1119
向AI转型的程序员都关注了这个号????????????大语言模型大语言模型（LLM）是指使用大量文本数据训练的深度学习模型，可以生成自然语言文本或理解语言文本的含义。大语言模型可以处理多种自然语言任务，如文本分类、问答、对话等，是通向人工智能的一条重要途径。发展历史2020年9月，OpenAI授权微软使用GPT-3模型，微软成为全球首个享用GPT-3能力的公司。2022年，Open AI发布ChatGPT模型用于...
一文看全开源大语言模型汇总
中生代技术
05-08 4641
转自分布式实验室01Alpaca/LLaMA（Meta/Stanford）斯坦福 Alpaca：一个遵循指令的 LLaMA 模型。LLaMA 网站：https://ai.facebook.com/blog/large-language-model-llama-meta-ai/Alpaca 网站：https://crfm.stanford.edu/2023/03/13/alpaca.htmlAlpa...
srilm 语言模型训练工具
11-07
语言模型训练工具 做语音识别 自然语言处理 都需要的工具 官网地址 http://www.speech.sri.com/projects/srilm/download.html 一般打不开 我就上传到这里 供朋友们下载
swig-srilm：SRILM工具包的SWIG包装器
02-05
SWIG-SRILM：SRILM语言模型的基于SWIG的包装器==========描述该软件包包含用于为语言模型生成Perl和Python包装器的文件。要求GNU make 简化的包装和接口生成器（ ） 本地Python和/或Perl安装SRILM工具箱（v1.7.1）。...
IRST LM Toolkit:语言建模工具包。-开源
06-06
SourceForge 不再支持 IRSTLM。 请访问新的 IRSTLM 官网：... 我们的软件已集成到名为 Moses 的流行开源统计机器翻译解码器中，并且与使用其他工具（例如 SRILM Toolkit）创建的语言模型兼容。
srilm-1.4.6
12-07
SRILM is a toolkit for building and applying statistical language models (LMs), primarily for use in speech recognition, statistical tagging and segmentation, and machine translation. ，所以传一份上来...
srilm 和 tcl8.6.12.zip
12-07
`srilm`是一个开源软件包，提供了训练和评估各种n-gram语言模型的能力。n-gram模型是一种基于概率的统计方法，它假设当前词出现的概率可以由其前面连续的n-1个词来预测。`srilm`支持从一元到高阶n-gram模型的训练，...
搭建属于自己的翻译系统
ShenweiFFF的博客
12-27 900
你有没有用过翻译系统？你有没有想过搭建一套属于自己的翻译系统？
轻松玩转开源大语言模型bloom（一）
轻舟已过万重山的博客
03-07 9943
文字生成？知识问答？手把手带你体验人人都能玩的开源大语言模型。
开源中文大语言模型集合【2023-06-19】
u013250861的博客
06-20 1223
整理开源的中文大语言模型，以规模较小、可私有化部署、训练成本较低的模型为主，包括底座模型，垂直领域微调及应用，数据集与教程等。自ChatGPT为代表的大语言模型（Large Language Model, LLM）出现以后，由于其惊人的类通用人工智能（AGI）的能力，掀起了新一轮自然语言处理领域的研究和应用的浪潮。尤其是以ChatGLM、LLaMA等平民玩家都能跑起来的较小规模的LLM开源之后，业界涌现了非常多基于LLM的二次微调或应用的案例。
Go实践，搭建命令行并行翻译系统
weixin_54741091的博客
02-13 137
在掌握GoLang最基本的语法之后，让我们着手完成一个练手项目来进行实战，熟悉go的实际使用并练习基础语法。
大模型之二十-中英双语开源大语言模型选型
shichaog的专栏
11-17 1454
从ChatGPT火爆出圈到现在纷纷开源的大语言模型，众多出入门的学习者以及跃跃欲试的公司不得不面临的是开源大语言模型的选型问题。基于开源商业许可的开源大语言模型可以极大的节省成本和加速业务迭代。还有很多其他的开源中英大语言模型，但基本都有Llama的影子，有些是直接扩充Lllama的词汇再用新的数据集重新训练，这些大语言模型包括等，这里就不一一列出了。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值