汇总！ChatGPT、RLHF相关最新知识点

已于 2023-06-09 16:25:47 修改
阅读量167 收藏 1
点赞数
分类专栏： AI 文章标签： chatgpt 人工智能 深度学习
于 2023-06-06 10:42:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Drogal_dracarys/article/details/131062653
版权
资源名称内容简介链接标签说明
Awesome RLHF (RL with Human Feedback)人类反馈强化学习（RLHF）前沿研究论文集仓库，包含最新Papers、Codebases、Blogshttps://github.com/opendilab/awesome-RLHFRLHF资源质量较高，包含最近RLHF论文、相关项目和博客
Transformer Reinforcement Learning XtrlX 是一个分布式训练框架，从头开始设计，专注于使用提供的奖励函数或奖励标记数据集通过强化学习微调大型语言模型。https://github.com/CarperAI/trlxRLHF开源训练框架
哈工大 ChatGPT 调研报告ChatGPT 调研报告https://aimg8.dlssyht.cn/u/551001/ueditor/file/276/551001/1678415058523571.pdfChatGPT资料汇总
Awesome-ChatGPTChatGPT资料汇总学习，Star 3K，包含文心一言内容介绍https://github.com/dalinvip/Awesome-ChatGPTChatGPT资料汇总
awesome-chatgptEverything about ChatGPThttps://github.com/OpenMindClub/awesome-chatgptChatGPT资料汇总
awesome-open-gpt/gpt相关开源项目合集Collection of Open Source Projects Related to GPT，GPT相关开源项目合集、精选https://github.com/EwingYangs/awesome-open-gptChatGPT资料汇总
Awesome Totally Open ChatgptA list of totally open alternatives to ChatGPThttps://github.com/nichtdax/awesome-totally-open-chatgptChatGPT可代替的开源项目质量较高，包含大量与Chatgpt类似的模型开源项目
Awesome Prompt EngineeringPrompt Engineering focus on Generative Pre-trained Transformer (GPT), ChatGPT, PaLM etchttps://github.com/promptslab/Awesome-Prompt-EngineeringPrompt Engineering质量较高，包含大量prompt技术论文
ChatGPT技术路线分析ChatGPT、GPT4技术介绍，可代替chatgpt的十几个开源平台介绍https://zhuanlan.zhihu.com/p/615331483ChatGPT、GPT4
ChatGLM-RLHF对ChatGLM直接使用RLHF提升或降低目标输出概率Modify ChatGLM output with only RLHFhttps://github.com/Miraclemarvel55/ChatGLM-RLHFChatGLM-RLHF
Drogal_dracarys
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ChatGPT调研
dra_p0p3n's blogs
03-09 2万+
ChatGPT简介和调研
最全ChatGPT技术汇总
热门推荐
zenRRan的博客
03-21 1万+
作者：邱震宇（华泰证券股份有限公司 算法工程师）来自：AINLP链接：https://zhuanlan.zhihu.com/p/613698929最近ChatGPT可以说是火遍了全世界，作为由知名人工智能研究机构OpenAI于2022年11月30日发布的一个大型语言预训练模型，他的核心在于能够理解人类的自然语言，并使用贴近人类语言风格的方式来进行回复。模型开放使用以来，在人工智能领域引起了巨大的轰...
什么是 ChatGPT？深度解析 ChatGPT的基本原理
CDB3399的博客
05-29 5917
ChatGPT 是由 OpenAI 开发的一种基于语言模型的人工智能程序，它可以与人类进行自然语言交互。基于 GPT（Generative Pre-trained Transformer）技术构建。GPT 代表“生成式预训练”，它是一种基于深度学习的自然语言处 理技术，利用海量的语言数据进行预训练，从而能够在多个自然 语言任务上表现出色。
AGI 远不止 ChatGPT！一文入门 AGI 通识及应用开发
2401_85390073的博客
06-13 965
在 AI 应用中，它也有相应的记忆体，即向量。模型层的代理层其实就是一个脚手架，通过代理机制利用大模型理解用户的需求，并将其切分为多个小任务，然后调用各种已知的工具来完成任务，当然这些工具需要事先告知给代理层。这是整个过程的最后一步，引入专家或其他人在不同时间点问同样的问题，观察回答的差异，尽管可能有些微差别，但意思可能是一样的。可能大家都想学习AI大模型技术，也想通过这项技能真正达到升职加薪，就业或是副业的目的，但是不知道该如何开始学习，因为网上的资料太多太杂乱了，如果不能系统的学习就相当于是白学。
Wombat：93%ChatGPT性能！无需RLHF就能对齐人类的语言模型.pdf
08-13
Wombat：93%ChatGPT性能！无需RLHF就能对齐人类的语言模型.pdf
ChatGPT 背后的RLHF 技术详解
05-01
本文将深入探讨RLHF技术在ChatGPT中的应用及其工作原理。 首先，我们来理解一下强化学习的基本概念。强化学习是一种机器学习方法，通过让智能体与环境进行交互，通过不断尝试和学习，使智能体能够优化其行为策略，...
ChatGPT 背后的“功臣”——RLHF 技术详解.pdf
05-18
ChatGPT 背后的“功臣”——RLHF 技术详解 ChatGPT 的成功离不开 RLHF（Reinforcement Learning from Human Feedback）技术的支持。RLHF 是一种新的训练范式，通过强化学习方式依据人类反馈优化语言模型。这种技术...
人手一个ChatGPT！微软DeepSpeed Chat震撼发布，一键RLHF训练千亿级大模型
04-13
人手一个ChatGPT的梦想，就要实现了？刚刚，微软开源了一个可以在模型训练中加入完整RLHF流程的系统框架——DeepSpeed Chat。也就是说，各种规模的高质量类ChatGPT模型，现在都唾手可得了！
解读 ChatGPT 背后的技术重点：RLHF、IFT、CoT、红蓝对抗 - 知乎.pdf
05-18
解读 ChatGPT 背后的技术重点：RLHF、IFT、CoT、红蓝对抗 - 知乎.pdf
简单走近ChatGPT
张彦峰的博客
07-22 1万+
主要涵盖了ChatGPT的背景、NLP学习范式的演进、预训练方法的详细介绍以及OpenAI的GPT系列模型的概述。旨在提供一个全面的认知和理解，以帮助读者更好地了解ChatGPT以及与之相关的NLP领域的发展。
ChatGPT：OpenAI SDK 是什么？
XRT_knives的博客
07-23 293
ChatGPT：OpenAI SDK 是什么？
ChatGPT：ChatOpenAI 是什么？
XRT_knives的博客
07-23 268
ChatGPT：ChatOpenAI 是什么？
ChatGPT实战100例 - (20) 如何玩转影刀RPA
AIGC搞起
07-20 1393
根据以上内容，总结下AIGC在影刀RPA中的使用，并对其他RPA步骤中可能用到AIGC的地方做个展望AIGC（人工智能生成内容）在影刀RPA中的使用主要体现在以下几个方面：智能内容抓取与分析关键词识别：利用NLP技术识别并理解用户输入的关键词或文章链接。内容抓取：通过RPA自动化流程抓取网页内容，包括标题、作者、发布时间、正文等信息。语义分析：使用AIGC技术对抓取的内容进行语义分析，对比关键词、文章结构、字数等，生成对标分析报告。报告生成与输出内容总结与生成。
AI学习记录 -使用react开发一个网页，对接chatgpt接口，附带一些英语的学习prompt
weixin_43954090的博客
07-23 227
实现功能：1、对接gpt35模型问答，并实现了流式传输（在java端）2、在实际使用中，我们的问答历史会经常分享给他人，所以下图的 copy all 按钮，可以copy成一个json然后通过社交软件发送给别人，别人就可以轻松应用你的问答历史。3、选择文件，在我们预想当中，我们可能会经常遇到向文档提问（当时还不知道embedding的知识哈哈哈），通过拆分文档，一段段跟gpt提问，当前段落是否和用户内容相关，相关就回答段落问题（段落拆分通过java实现）
搭建基于 ChatGPT 的问答系统第一章-综述
weixin_42553583的博客
07-23 459
强大的指令理解能力、自然语言生成能力是 LLM 的核心，支持了 LLM 以类人的方式去思考、执行并完成用户任务。通过代码实践，实现了基于 ChatGPT 开发问答系统的全流程，介绍了基于大模型开发的新范式，值得每一个有志于使用大模型开发应用程序的开发者学习。学习这一部分，应当充分演练所提供的代码，做到自我复现并能够结合个人兴趣、特长对所提供的代码进行增添、更改，实现一个更个性化、定制化的问答系统。》的基础上，指导开发者如何基于 ChatGPT 提供的 API 开发一个完整的、全面的智能问答系统。
【最新发布】生成式人工智能全球研究报告
YeJuliaLi的博客
07-18 1021
7月10日，美国著名的大数据分析平台和全球最大的数据分析公司之一SAS在其官网发布了一份关于生成式人工智能（AIGC）深度应用的调查报告。本次的报告主要对以美国、中国、英国、法国、巴西、日本等为主的北美、拉美、欧洲、亚太地区主要国家的1600名企业决策者 进行调查，查看这些企业对生成式AI类产品的应用情况。*生成式AI类产品包含但不仅限于ChatGPT、Midjourney、Copilot、DA...
ChatGPT之9.11和9.9 哪个大？ 翻车？？？
Japhet_jiu的博客
07-18 1856
其实并不是，只是你提问方式不对
EXO-chatgpt_api 解释
最新发布
ZJQ的博客
07-23 75
展示了如何在一个项目中组织和导入各种库、模块和类，以及如何进行一些基本的Web服务设置和配置。aiohttpwebaiohttpLiteralUnionDictexoDEBUGVERSIONShardNode整体来看，这段代码是一个结合了异步编程、Web服务、JSON处理、类型注解以及自定义逻辑的大型项目的一部分。它可能是一个基于库的NLP服务，使用了aiohttp构建Web接口，并通过CORS扩展来处理跨域请求。同时，它还利用了自定义的模块和类来处理特定的业务逻辑，如推理任务的分片和节点管理。DEBUG。
清华 大学glm chatgpt rlhf 人类偏好对齐的数据样本范例例子
11-18
清华大学为了研究人类偏好对齐的数据样本，使用了GLM（Generalized Linear Model）、CHATGPT（Conversational Model）和RLHF（Reinforcement Learning for Human Feedback）等技术来进行实验和分析。其中，他们采用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值