Text-to-SQL
文章平均质量分 92
Text-to-SQL入门学习记录、分享和思考。
junewgl
星光不问赶路人,时光不负有心人。
展开
-
Text-to-SQL小白入门(12)Awesome-Text2SQL开源项目star破1000
Awesome-text2sql项目是DB-GPT开源社区的子项目,支持中英文两种语言,主要收集了针对大型语言模型和Text2SQL等的精选教程和资源,希望能够共同学习、共同推动Text2SQL领域进步!原创 2024-05-01 19:13:34 · 1973 阅读 · 1 评论 -
Text-to-SQL小白入门(十一)DAIL-SQL教你刷Spider榜单第一
Text-to-SQL Empowered by Large Language Models: A Benchmark Evaluation原创 2024-01-04 21:19:33 · 2011 阅读 · 1 评论 -
Text-to-SQL小白入门(十)RLHF在Text2SQL领域的探索实践
本文主要介绍了Text2SQL的基本概念,以及RLHF的概念和框架,最后结合DB-GPT-Hub项目,将RLHF方法应用于Text2SQL任务进行实践探索。原创 2023-12-26 20:13:24 · 3289 阅读 · 0 评论 -
Text-to-SQL小白入门(九)InstructGPT论文:教你如何训练ChatGPT
InstructGPT和ChatGPT 的训练流程基本一致 ,ChatGPT是改进后的InstructGPT,比如InstructGPT是基于GPT-3训练,而ChatGPT是基于GPT-3.5训练。原创 2023-11-28 20:26:52 · 1166 阅读 · 0 评论 -
Text-to-SQL小白入门(八)RLAIF论文:AI代替人类反馈的强化学习
基于人类反馈的强化学习(RLHF)在将大型语言模型(llm)与人类偏好对齐方面是有效的,但收集高质量的人类偏好标签是一个关键瓶颈。作者提出了RLAIF(利用AI反馈代替人类反馈),并且和RLHF进行对比,结果如下:在摘要生成任务(summarization task)中,在约70%的情况下,人类评估者更喜欢来自RLAIF和RLHF的结果,而不是SFT模型。此外,当被要求对RLAIF和RLHF摘要进行评分时,人类对两者的偏好率相同。这些结果表明,RLAIF可以产生人类水平的性能原创 2023-10-12 21:00:08 · 800 阅读 · 0 评论 -
Text-to-SQL小白入门(七)PanGu-Coder2论文——RRTF
代码大模型Code LLM正在蓬勃发展, 之前已经有各种方法提高代码生成的性能监督学习SFT(supervised fine-tuning)指令微调(instruction tuning)强化学习(reinforcement learning)本文提出了新的框架基于这个框架,提出了盘古代码大模型RRTF。原创 2023-09-26 17:38:14 · 886 阅读 · 0 评论 -
Text-to-SQL小白入门(六)Awesome-Text2SQL项目介绍
https://github.com/eosphoros-ai/Awesome-Text2SQL这个项目主要收集了针对大型语言模型和Text2SQL等的精选教程和资源,希望能够共同学习、共同推动Text2SQL领域进步!原创 2023-09-18 14:22:26 · 1897 阅读 · 0 评论 -
Text-to-SQL小白入门(五)开源最强代码大模型Code Llama
本文介绍了Code Llama大模型的基本概括,包含了论文的摘要、结果、结论以及核心方法,对于了解和实践Code Llama有一定帮助。原创 2023-09-15 16:41:00 · 2767 阅读 · 0 评论 -
Text-to-SQL小白入门(四)指令进化大模型WizardLM
本文主要对大模型WizardLM的基本信息进行了简单介绍,展示了WizardLM取得的优秀性能,分析了论文的核心——指令进化方法。原创 2023-09-04 11:42:51 · 1444 阅读 · 0 评论 -
Text-to-SQL小白入门(三)IRNet:引入中间表示SemQL
本文主要介绍了IRNet论文的基本信息,比如标题、摘要、数据集、结果&结论,以及论文中提出的不匹配问题和词汇问题以及对应的解决方案,重点学习了中间表示SemQL。原创 2023-08-25 14:18:25 · 1016 阅读 · 0 评论 -
Text-to-SQL小白入门(二)——Transformer学习
本文主要针对NLP任务中经典的Transformer模型的来源、用途、网络结构进行了详细描述,对后续NLP研究、注意力机制理解、大模型研究有一定帮助。原创 2023-08-16 17:13:44 · 1458 阅读 · 0 评论 -
Text-to-SQL小白入门(一)综述学习
本文主要介绍了Text-to-SQL研究的定义、意义、研究方法以及未来展望,主要是对Text-to-SQL领域进行一个初步的认识和了解,适合初学者入门了解。原创 2023-08-01 20:24:45 · 2676 阅读 · 0 评论