利用LLMs实现Text-to-SQL

最新推荐文章于 2024-08-18 11:43:53 发布
最新推荐文章于 2024-08-18 11:43:53 发布
阅读量406 收藏 6
点赞数 8
文章标签： sql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/muhongyutian/article/details/136429915
版权

利用LLMs实现Text-to-SQL解析，主要包含数据集收集、数据预处理、模型选择与构建和微调权重等步骤，通过这一系列的处理可以在提高Text-to-SQL能力的同时降低模型训练成本，让更多的开发者参与到Text-to-SQL的准确度提升工作当中，最终实现基于数据库的自动问答能力，让用户可以通过自然语言描述完成复杂数据库的查询操作等工作。

详见:

链接: https://pan.baidu.com/s/1tI1scHRgiR30ovG3HZGBqg?pwd=kyer 提取码: kyer 

muhongyutian
关注
Text-to-SQL技术升级 - 阿里云OpenSearch-SQL在BIRD榜单夺冠方法
丨汀、的博客
09-17 760
Text-to-SQL技术升级 - 阿里云OpenSearch-SQL在BIRD榜单夺冠方法
NL2SQL进阶系列(4)：ConvAI、DIN-SQL、C3-浙大、DAIL-SQL-阿里等16个业界开源应用实践详解[Text2SQL]
丨汀、的博客
04-13 2247
NL2SQL进阶系列(4)：ConvAI、DIN-SQL等16个业界开源应用实践详解[Text2SQL]
text-to-sql:text生成sql语句
03-29
文字转SQL 介绍 刚开始，由我自己整理权限脚本... 只有很少数据的时候，还能接受手动复制粘贴... 在之后的功能开发中，发现需要整理的权限脚本越来越多... 可能需要花费半小时或一个小时的时间去整理脚本，还生怕会出错... 于是，就有了这个小工具... 现在，就可以正大光明的偷懒啦〜 使用 整理成如src下permission.txt的形式，试试吧... 菜单等级=等级（1 2 3），父菜单码 菜单代码菜单名称 源 level = 1 menu_activity_home 活动管理 /activity level = 2 , menu_activity_home menu_activity_lottery_list 抽奖活动管理 /activity/lotteryList menu_activity_groupon_list 团购活动管理 /activity/grouponList m
NLP-语义分析（Semantic Parsing）：Text2SQL【“打破人与结构化数据之间的壁垒”，即普通用户可以通过自然语言描述完成复杂数据库的查询工作】
u013250861的博客
04-07 2664
Text to SQL( 以下简称Text2SQL)，是将自然语言文本（Text）转换成结构化查询语言SQL的过程，属于自然语言处理-语义分析（Semantic Parsing）领域中的子任务。，即普通用户可以通过完成复杂数据库的查询工作，得到想要的结果。
LangChain 实战案例：老喻干货店的 TextToSql 应用解析
最新发布
2401_85343303的博客
08-18 620
当我们在做项目开发时，数据库设计是项目早期的核心工作之一。我们要考虑业务需要用到的表、关联、索引，并预想出未来核心需求或易产生瓶颈的SQL。当这些事情做完，就可以喝杯咖啡，到前台摸鱼会儿了…如果你是刚入门数据库学习，也许掌握并熟练使用结构化查询语言SQL有些难度。然而在AIGC时代，我们拥有了一个全新的编程范式, NLP和大模型作为编程助理，让我们可以快介入复杂数据库业务。我们只需要设计好相应的PromptLLM就能理解，并给出SQL，让我们去执行。
Text-to-SQL
qq_42341984的博客
04-18 483
Text-to-SQL 1 Single table（WikiSQL） 1.1 Encode 1.1.1 NL和DB的交互（对齐） 预训练的方法 STRUG：https://blog.csdn.net/qq_42341984/article/details/115615653 TaBert：学习自然语言描述和数据库的（半）结构化信息的联合表示 https://www.sohu.com/a/413894298_657157 GRAPPA：ICLR 2021 在文本数据和表数据的联合表示中学
Text-to-SQL---RAT-SQL模型
weixin_42223207的博客
02-19 2790
RAT-SQL RAT-SQL是微软在2020 ACL发表的论文RAT-SQL: Relation-Aware Schema Encoding and Linking for Text-to-SQL Parsers 提出来的，这个模型在Spider数据集上的结果为65.6%。RAT-SQL代码的地址为https://github.com/Microsoft/rat-sql，笔者尝试了paddle 版本的RAT-SQL代码https://github.com/PaddlePaddle/Research/tre
语义解析 (Text-to-SQL) 技术研究及应用 上篇
qq_40247584的博客
05-06 7332
语义解析（Semantic Parsing）是自然语言处理技术的核心任务之一，涉及语言学、计算语言学、机器学习以及认知语言等多个学科，在近几年中获得了广泛关注，语义解析任务有助于促进机器语言理解的快速发展。 本文重点介绍语义解析技术中的Text-to-SQL任务，让机器自动将用户输入的自然语言问题转成数据库可操作的SQL查询语句，实现基于数据库的自动问答能力。 任务介绍及研究动机 ...
【学习笔记4】论文MAC-SQL: A Multi-Agent Collaborative Framework for Text-to-SQL
qq_51700285的博客
08-09 983
给定一个数据库模式T ={T,C}，选择器agent的目的是找的最小模式S'={T',C'},其中,并结合外部知识K，来回答问题Q。选择器可以描述为：其中，表示提示LLM的选择器的函数。
NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL、SQL-PaLM）、新一代数据集BIRD-SQL解读
丨汀、的博客
04-15 1377
NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL）、新一代数据集BIRD-SQL解读
LLMs之Text2Sql：大语言模型场景实战案例应用—让查询和问答应用更智能(利用LLMs与数据库交互)—Text2Sql任务的简介、多种技术方案(LLM/RAG/ETA等)、排行榜平台(如Spid
近期请国内外头部出版社可尽快私信博主！——心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，谦虚，自律，反思，成长，还算是比较正能量的博主，公益免费传播……内心特别想在AI界做出一些可以推进历史进程影响力的东西(兴趣使然，有点小情怀，也有点使命感呀)…
11-26 658
​ LLMs之SQL：大语言模型场景实战案例应用—让查询和问答应用更智能(利用LLMs与数据库交互，比如法律合同/简历/财务数据/客户支持)、多种技术方案(LLM/RAG等) 目录 相关文章 Spider数据集的简介 LLMs场景实战案例：查询(定位到准确目标)、搜索(查找到一个范围) 现有案例实战应用 相关文章 LLMs：《Building LLM applications for production构建用于生产的LLM应用程序》翻译与解读 LLMs：《Building LL
text_to_sql_search.cr：将文本搜索转换为SQL WHERE子句
02-04
text_to_sql_search.cr：将文本搜索转换为SQL WHERE子句
一文了解 Text-to-SQL
Datawhale
01-18 4568
作者：哈工大SCIR 窦隆绪，潘名扬，乔振浩简介Text-to-SQL系统能够将自然语言描述转化成对应的SQL查询语句，这项技术能够有效地辅助人们对海量的数据库进行查询。因此，该项研究引...
DB-GPT：蚂蚁开源的Text-to-SQL利器！！
musicml的博客
06-06 1591
▼最近直播超级多，预约保你有收获—1—AI 原生数据应用时代进入数据3.0时代，大模型和数据库已经成为构建应用程序的关键基石。企业和开发者都希望能够使用更简洁的代码和更智能的方式来释放数据的价值。在过去，我们需要编写大量代码才能完成数据分析任务，但现在我们可以借助 AI 大模型的力量，通过自然语言交互轻松获取数据洞察。DB-GPT 正是为了实现这一目标而诞生的，它是蚂蚁开源的 AI 原生数据应用开...
Text-to-SQL：一种增量预训练方法 1
Learning
04-08 453
一种增量预训练方法，利用与文本到 SQL 任务相关的大量精选数据集。
【论文阅读】让数据库听懂人话（Text-to-SQL）
热门推荐
一只热爱奔跑的程序猿
12-30 1万+
论文标题: 在跨领域数据库中引入中间表示来实现复杂Text2SQL 英文标题: Towards Complex Text-to-SQL in Cross-Domain Database with Intermediate Representation 论文下载链接: https://arxiv.org/abs/1905.08205 论文项目代码: GitHub@IRNet 摘要 本文提出一种名为IRNet的神经方法解决复杂的, 跨领域的(cross-domain) Text-to-SQL任务; IR
Text-to-SQL提示工程【Prompt Engineering】
新缸中之脑
05-18 2188
我们刚刚启动了一个开源项目pg-text-query，目标是为文本到 SQL 制作生产就绪的大型语言模型 (LLM) 提示。我们的目标是 利用 LLM、我们自己对 PostgreSQL 数据库的深入了解以及严格的测试来开发一流的文本到 SQL 的翻译。推荐：用快速搭建可编程3D场景。
Text-to-SQL小白入门（四）指令进化大模型WizardLM
junewgl
09-04 1445
本文主要对大模型WizardLM的基本信息进行了简单介绍，展示了WizardLM取得的优秀性能，分析了论文的核心——指令进化方法。
大模型与数据分析：探索Text-to-SQL
淘系技术
03-29 3809
当今大模型如此火热，作为一名数据同学，持续在关注LLM是如何应用在数据分析中的，也关注到很多公司推出了AI数智助手的产品，比如火山引擎数智平台VeDI—AI助手、 Kyligence Copilot AI数智助理、ThoughtSpot等，通过接入人工智能大模型，提升数据处理和查询分析的效率。智能数据分析助手，采用对话式分析技术，每个普通人都可以与数据进行随时随地的实时交互，根据用户的使用反馈，不...
微软GPT-4大模型指令微调提升零样本性能
指令微调的实现方式通常有两类：一种是利用人类标注的提示（prompt）和反馈，在广泛的任务上对模型进行微调；另一种是通过手动或自动生成的指令，增强公共基准和数据集来监督微调。在这两种方法中，Self-Instruct ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值