【AI人工智能】LLM 开源中文大语言模型集合

最新推荐文章于 2024-08-27 07:04:16 发布
最新推荐文章于 2024-08-27 07:04:16 发布
阅读量9.1k 收藏 2
点赞数 2
分类专栏： ChatGPT 大数据AI人工智能 LLM大模型落地实战指南 文章标签： 人工智能 语言模型 自然语言处理
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/universsky2015/article/details/131290537
版权
本文整理了多个开源的中文大语言模型，包括底座模型、垂直领域微调应用、数据集、教程及相关资源，如ChatGLM、LLaMA、OpenChineseLLaMA等，涉及医疗、法律、金融、教育、文化等多个领域，并提供了相应的模型微调数据集和应用实例。
摘要由CSDN通过智能技术生成

整理开源的中文大语言模型，以规模较小、可私有化部署、训练成本较低的模型为主，包括底座模型，垂直领域微调及应用，数据集与教程等。

目录

1. Model

2. Application

3. Dataset

4. Evaluation

5. Tutorial

6. Related Repository

自ChatGPT为代表的大语言模型（Large Language Model, LLM）出现以后，由于其惊人的类通用人工智能（AGI）的能力，掀起了新一轮自然语言处理领域的研究和应用的浪潮。尤其是以ChatGLM、LLaMA等平民玩家都能跑起来的较小规模的LLM开源之后，业界涌现了非常多基于LLM的二次微调或应用的案例。本项目旨在收集和梳理中文LLM相关的开源模型、应用、数据集及教程等资料。

GitHub: GitHub - HqWu-HITCS/Awesome-Chinese-LLM: 整理开源的中文大语言模型

了解本专栏 订阅专栏 解锁全文 超级会员免费看
AI天才研究院
关注
专栏目录
订阅专栏
【人工智能时代】- 大型语言模型（LLM）理论简介
xiaoli8748的专栏
08-19 1509
1.1 大型语言模型（LLM）的概念​大语言模型（LLM，Large Language Model），也称大型语言模型，是一种旨在理解和生成人类语言的人工智能模型。LLM 通常指包含数百亿（或更多）参数的语言模型，它们在海量的文本数据上进行训练，从而获得对语言深层次的理解。目前，国外的知名 LLM 有 GPT-3.5、GPT-4、PaLM、Claude 和 LLaMA 等，国内的有文心一言、讯飞星火、通义千问、ChatGLM、百川等。
【人工智能LLM】开源 LLM 大模型汇总以及微调策略
AI天才研究院
06-12 1万+
自从ChatGPT出世以来，各个大厂/研究院都纷纷推出自己的大模型，大模型领域发展一日千里。随着“百模大战”热度的降低，有必要梳理一下目前主流的大模型以及其变种模型，为大家梳理一下当前开源模型的工作。
人工智能的新篇章：深入了解大型语言模型(LLM)的应用与前景
丨汀、的博客
12-04 3610
人工智能的新篇章：深入了解大型语言模型(LLM)的应用与前景
可能是最全的开源 LLM （大语言模型）整理
2301_82275412的博客
05-09 6694
Large Language Model (LLM) 即大规模语言模型，是一种基于深度学习的自然语言处理模型，它能够学习到自然语言的语法和语义，从而可以生成人类可读的文本。所谓 “语言模型”，就是只用来处理语言文字（或者符号体系）的 AI 模型，发现其中的规律，可以根据提示 (prompt)，自动生成符合这些规律的内容。LLM 通常基于神经网络模型，使用大规模的语料库进行训练，比如使用互联网上的海量文本数据。
跟着DW学习大语言模型-了解一些历史渊源
白水空空
06-18 1373
开发大模型相关应用，其技术核心点虽然在大语言模型上，但一般通过调用 API 或开源模型来实现核心的理解与生成，通过 Prompt Enginnering 来实现大语言模型的控制，因此，虽然大模型是深度学习领域的集大成之作，大模型开发却更多是一个。作为重要的研究方向之一，语言模型得到了学术界的广泛研究，从早期的统计语言模型和神经语言模型开始，发展到基于Transformer的预训练语言模型。ChatGPT 从本质上来说是一个 LLM 应用，是基于基座模型开发出来的，与基座模型有本质的区别。
开源中文大语言模型汇总
一位安分的码农的博客
04-02 1632
Mistral是超越llama的最强开源模型，由于发布时间晚于llama，因此其中文版本较少。llama作为开源社区的宠儿，有许多基于它的中文模型，下面列举比较流行的一些模型。
Awesome-Chinese-LLM：开源中文大语言模型整理
AAI666666的博客
08-05 1154
Awesome-Chinese-LLM 是整理开源的中文大语言模型，主要包括规模较小、可私有化部署、训练成本较低的模型，涵盖底座模型、垂直领域微调及应用、数据集与教程等。
整理开源的中文大语言模型，以规模较小、可私有化部署、训练成本较低的模型为主...
datayx的文章
05-14 1011
向AI转型的程序员都关注了这个号????????????自ChatGPT为代表的大语言模型（Large Language Model, LLM）出现以后，由于其惊人的类通用人工智能（AGI）的能力，掀起了新一轮自然语言处理领域的研究和应用的浪潮。尤其是以ChatGLM、LLaMA等平民玩家都能跑起来的较小规模的LLM开源之后，业界涌现了非常多基于LLM的二次微调或应用的案例。本项目旨在收集和梳理中文LLM相关的开源...
中文对话式大语言模型Firefly-2b6开源，使用210万训练数据
zenRRan的博客
04-13 845
来自：YeungNLP在文章Firefly(流萤): 中文对话式大语言模型中，我们介绍了关于Firefly(流萤)项目的工作，并且分享了我们训练的firefly-1b4模型。这是Firefly项目开源的第一个模型，虽然取得了还不错的效果，但无论是训练数据还是模型参数量，都还有很大的优化空间。所以，在firefly-1b4实验的基础上，我们对训练数据进行清洗，并且增加了数据量，得到210万数据，并用...
最全的开源 LLM （大语言模型）整理.zip
09-04
本资源包“最全的开源 LLM （大语言模型）整理.zip”是关于开源大语言模型的一个综合集合，涵盖了多个知名的项目，帮助开发者和研究人员更好地了解和利用这些先进的技术。 【描述】: 这个压缩包包含了一个名为...
【人工智能时代】- LLM大语言模型
最新发布
xiaoli8748的专栏
08-27 1096
2022年末，聊天程序ChatGPT的上线，在短短5天被注册用户就破百万。ChatGPT的爆火，在一夜之间，带领人类穿越到了真正的人工智能时代。本文会从ChatGPT作为切入点，在介绍其底层的GPT模型诞生史后，再深入浅出地讲解大语言模型（LLM）及工作原理。在整篇文章中，从点到面到又介绍了自然语言处理（NLP）、深度学习、Transformer模型等，让你对LLM和AI领域有更加清晰透彻的理解。
人工智能大模型之开源大语言模型汇总（国内外开源项目模型汇总）
丨汀、的博客
06-19 3497
人工智能大模型之开源大语言模型汇总（国内外开源项目模型汇总）
【大语言模型LLM】- AI工具收录集合，一篇就够了！
我的数据分析师之路
04-22 2079
大语言模型乐园，国内外大模型集合，持续更新...
开源中文大语言模型集合【2023-06-19】
u013250861的博客
06-20 1315
整理开源的中文大语言模型，以规模较小、可私有化部署、训练成本较低的模型为主，包括底座模型，垂直领域微调及应用，数据集与教程等。自ChatGPT为代表的大语言模型（Large Language Model, LLM）出现以后，由于其惊人的类通用人工智能（AGI）的能力，掀起了新一轮自然语言处理领域的研究和应用的浪潮。尤其是以ChatGLM、LLaMA等平民玩家都能跑起来的较小规模的LLM开源之后，业界涌现了非常多基于LLM的二次微调或应用的案例。
使用ollama搭建自己的本地中文大语言模型
aolan123的博客
07-16 2582
说到ai,大家应该不陌生了，它应该是目前最火的研究方向之一了，下面是目前比较流行的一些ai(人工智能大模型):openai的chatgptgoogle的GemmaAnthropic的Claude月之暗面的kimi阿里的通义千问百度的文心一言字节跳动的豆包但今天聊的是ollama这个开源框架加上开源模型来实现自己本地的ai。
【人工智能】LLM 大型语言模型和 Transformer 架构简介
热门推荐
AI天才研究院
05-24 2万+
然而，传统的机器学习模型，例如神经网络，并不能天生理解输入的顺序。通过将位置编码纳入 Transformer 架构，GPT 可以更有效地理解句子中单词的顺序，并生成语法正确且语义有意义的输出。但是，模型只能理解数字，不能理解文本，因此需要将这些输入转换为称为“输入嵌入”的数字格式。作为初创公司的首席技术官，我每天都在讨论这项革命性的技术，因为围绕它的持续不断的嗡嗡声和炒作。这篇博文将探讨 LLM（大型语言模型）和转换器架构的基本概念，转换器架构是所有带有转换器的语言模型的构建块，包括 GPT。
人工智能LLM大模型：让编程语言更加支持自然语言处理
AI天才研究院
07-03 4206
作者：禅与计算机程序设计艺术 人工智能LLM大模型：让编程语言更加支持自然语言处理 作为人工智能的核心技术之一，自然语言处理 (Natural Language Processing, NLP) 已经在各个领域得到了广泛应用，如智能客服、智能翻译、文本分类等
LLM-LLaMA中文衍生模型：Chinese-LLaMA-Alpaca【扩充词表、Lora部分参数预训练、微调】
u013250861的博客
06-25 1064
前面提到LoRA模型无法单独使用，必须与原版LLaMA进行合并才能转为完整模型，以便进行模型推理、量化或者进一步训练。有些地方称为30B，实际上是Facebook在发布模型时写错了，论文里仍然写的是33B。中文LLaMA模型在原版的基础上扩充了中文词表，使用了中文通用纯文本数据进行二次预训练。经过重构后的模型大小比同等量级的原版LLaMA大一些（主要因为扩充了词表）。下载后务必检查压缩包中模型文件的SHA256是否一致，请查看。具体内容请参考本项目 >>>具体内容请参考本项目 >>>
【人工智能】大模型（LLM）与人类大脑的结构及运行机制的关系
AI天才研究院
05-23 2万+
近年来，人工智能领域取得了长足的进步，尤其是大型语言模型（Large Language Models，简称LLM）的出现，让AI在自然语言处理、知识表示、推理决策等方面的能力大幅提升，引发了学术界和业界的广泛关注。LLM作为当前AI领域最前沿、最具颠覆性的技术之一，其结构设计与运行机制深受人类大脑的启发。探究LLM与人脑之间的关系，对于深入理解人工智能的内在机理、指导未来AI系统的设计都具有重要意义。
AI：大语言模型LLM
Java_1710的博客
12-05 1399
然而，由于RLHF方法的一些局限性，制定一套人工标准准则来确保其安全、可靠和有效地应用变得至关重要。这些准则可以帮助研究人员和开发者更好地理解、改进和应用RLHF方法，以降低潜在的风险和负面影响。总之，大语言模型的评价涉及多个方面，需要综合考虑其在语言理解、生成、逻辑推理、常识应用、语言风格、情感表达、跨语言和跨领域等方面的表现，以及模型的大小、计算效率和伦理道德方面的问题。遵循这些人工标准准则，研究人员和开发者可以更安全、可靠地应用RLHF方法，以促进人工智能技术的发展和普及。
评论 33
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AI天才研究院

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值