NLP | 自动问答练习（DEEPQA调参）

最新推荐文章于 2024-04-20 09:47:10 发布
最新推荐文章于 2024-04-20 09:47:10 发布
阅读量270 收藏
点赞数
分类专栏： NLP与知识图谱
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cat_xing/article/details/90246004
版权

最好结果

在这里插入图片描述

所做工作

主要对chatbot.py的network options和training options部分的参数进行了修改。

在这里插入图片描述

  • 每个参数都调过，最后numLayers从2调为10，learningRate为0.0001，其他的都还是原来的值。

  • 感觉对结果影响较大的是learningRate和dropout，随着loss越来越小，learningRate也要跟着减小，dropout原来是0.9，改小的话loss会变大，所以没怎么改它。

  • 不过最有效的还是多跑几个小时，我一共跑了4万多个step，大概花了一整天的时间，Loss从5点几降到0点几。

  • 据说把embedding_rnn_seq2seq改为 embedding_attention_seq2seq会很有效，但是我一改就会OOM，暂时没找到解决办法。。。

卫龙女孩
关注
专栏目录
Python-使用NLP自动生成问题
08-10
该程序将文本文件作为输入，并通过分析每个句子来生成问题
问答系统训练语料
06-04
保险领域的问答系统训练语料，可以用来训练chatbot，希望有帮助
李宏毅nlp学习笔记10：QA(Question answering）
weixin_42721412的博客
11-11 2940
1.QA的基本流程： 问题的答案可能是明确的，也可能是有变化的。 答案给出的方式，可能是一个词，或者是一个单个的句子， 获取知识的来源，可以使文本，声音，搜索，视频。 答案形式部分： 2.输出的答案就是一个单词： 15年的一个数据集：BABI 做法： 3.选择题： 4.要给出的答案就在给出的文本中： SQUAD：是针对英文的。 DRCD：是针对中文的。 找哪个token当做答案开头的概率最大，哪个token当做答案结尾的概率最大。 5.Free Answer Generation： 答案不在文章
最新最全nlp中文问答语料对
07-22
2018最新最全nlp中文问答语料对，包括常规问答，笑话等
Deep QA
fkyyly的专栏
10-09 715
http://www.cnblogs.com/v-July-v/archive/2012/02/13/2413058.html
人工智能治理技术篇之自然语言处理（NLP）｜（二）技术应用场景.pdf
11-15
自然语言处理（NLP）是人工智能领域的重要组成部分，它涉及理解和生成人类语言，以及在此基础上进行的各种任务。近年来，随着深度学习技术的发展，NLP取得了显著的进步，其应用范围日益扩大，涵盖了机器翻译、信息...
人工智能治理技术篇之自然语言处理（NLP）｜（一）基本介绍.pdf
11-11
自然语言处理（NLP）是人工智能（AI）领域的一个关键组成部分，它专注于研究如何让计算机理解和生成人类自然语言，以实现更加顺畅的人机交互。NLP的起源可以追溯到对机器翻译的研究，它综合了语言学、计算机科学和...
自然语言处理（NLP）介绍、心得、项目经验和相关练习.docx
03-04
### 自然语言处理（NLP）相关知识点 #### 一、自然语言处理（NLP）简介 自然语言处理（Natural Language Processing, NLP）作为人工智能领域的重要分支之一，其核心目标在于让计算机能够理解、解释、生成并有效地...
自然语言处理NaturalLanguageProcessing(NLP).ppt
11-12
自然语言处理的基本任务包括分词、词性标注、句法分析、语义分析、机器翻译、自动摘要、文本分类、信息检索、自动问答、信息抽取和情感分析等。这些任务涵盖了语言理解的多个层次，从词汇层面到句子结构，再到篇章的...
自然语言处理数据集-15万条电信问答数据
04-23
自然语言处理（NLP）是计算机科学领域的一个关键分支，它专注于使计算机能够理解、解释、生成和处理人类自然语言。在这个数据集中，我们聚焦于一个特定的应用场景：电信行业的FAQ问答系统。这个系统旨在自动解答用户...
Deep QA（IBM Watson）
07-21
IBM Watson的技术实现详解 IBM Watson是认知计算系统的杰出代表，也是一个技术平台。认知计算代表一种全新的计算模式，它包含信息分析，自然语言处理和机器学习领域的大量技术创新，能够助力决策者从大量非结构化数据中揭示非凡的洞察。Watson 在美国最受欢迎的智力问答电视节目《危险边缘》(Jeopardy)中亮相，一举打败了人类智力竞赛冠军。如今，Watson 已经发展为一个商业化、基于云的认知系统，应用到各行各业中。 This is Watson IBM Research took on the grand challenge of building a computer system that could compete with champions at the game of Jeopardy!. The open-domain question-answering system dubbed Watson beat the two highest ranked players in a nationally televised two-game Jeopardy! match. This special issue provides a deep technical overview of the ideas and accomplishments that positioned our team to take on the Jeopardy! challenge, build Watson, and ultimately triumph. It describes the nature of the question-answering challenge represented by Jeopardy! and details our technical approach.
deep_qa：基于Keras tf的深层NLP库，专注于问题解答（但对其他NLP也很有用）
02-03
已淘汰 DeepQA构建在Keras之上。 我们认为是NLP研究的更好平台。 我们将DeepQA重新编写到一个名为的pytorch库中。 DeepQA将不再开发。 但是，我们对AllenNLP感到非常兴奋-如果您正在进行自然语言处理的深度学习，则应该！ 深度质量检查 DeepQA是一个用于通过深度学习执行高级NLP任务的库，尤其侧重于各种问题解答。 DeepQA构建在和之上，并且可以被认为是这些系统的接口，使NLP更容易。 特别是，与普通Keras / TensorFlow相比，该库具有以下优点： 在DeepQA中很容易获得NLP。 在Keras中，围绕填充序列和遮罩存在很多问题，这些问
读书会·北京第1期之DeepQA框架&Siri;架构PPT
02-13
1、原来的微盘链接失效，现在统一上传于csdn 下载频道。 2、DeepQA是张栋先生的讲座PPT，Siri是张俊林先生的讲座PPT。 3、附带的两个链接是有关读书会的说明。 有任何问题，皆可新浪微博上联系读书会发起人，即本人@周磊July，或@张栋_机器学习，@张俊林say。 或参见本人blog：http://blog.csdn.net/v_JULY_v。 感谢各位，敬请享用。
Watson之心：DeepQA
zzou清月灵兮的博客
08-12 2702
Watson在 智力问答游戏“Jeopardy！”中让人类最聪明的个体尝到了失败的滋味：曾经在这个节目中创下74连胜的Ken Jennings甚至在回答终极 Jeopardy！ 问题时，在题板上写下“I FOR ONE WELCOME OUR NEW COMPUTER OVERLORDS (我个人欢迎我们的新电脑霸主)”并认输。作为在Watson体内运转的软件，DeepQA问答系统是Watso
深度问答系统：Deep QA —— 探索AI智能的新边界
最新发布
gitblog_00031的博客
04-20 335
深度问答系统：Deep QA —— 探索AI智能的新边界 deep_qaA deep NLP library, based on Keras / tf, focused on question answering (but useful for other NLP too)项目地址:https://gitcode.com/gh_mirrors/de/deep_qa 项目简介 Deep QA 是由...
5步做一个 TensorFlow 聊天机器人：DeepQA
TensorFlowNews
09-05 3212
项目截图：实测截图：一步一步教程：1.下载这个项目： https://github.com/Conchylicultor/DeepQA2.下载训练好的模型：https://drive.google.com/file/d/0Bw-phsNSkq23OXRFTkNqN0JGUU0/view（如果网址不能打开的话，今晚我会上传到百度网盘，分享到：http://www.tensorflownews.com
python 自然语言处理 (六) 采用deepQA搭建自动聊天机器人
luoganttcc的博客
04-13 3479
deepQA是基于tensorflow 实现的开源项目,采用神经网络实现的自动化聊天机器人,在目前,网上的公开中文语料库比较少,采用训练的语料一般都是英文的 第一步:      到github上下载项目 deepQA下载 第二步:      进入目录下运行 python main.py GPU下训练一...
问答系统技术--DeepQA
zzfive的博客
07-28 2940
问答技术--DeepQA
NLP_deepQA初探
m0_38034312的博客
07-23 1087
【1】deepQA实质是基于知识库的问答系统 【2】会从问题中提取需要特殊处理的字符，比如：一词多义、句法、语义等 【3】会对问题进行分类等 【4】资料：https://www.guokr.com/article/17295/...
探索NLP核心技术：语义分析、信息检索与自动问答
自然语言处理（NLP）是一门研究人类与计算机之间利用自然语言进行有效沟通的理论和方法的学科。它在信息技术领域扮演着关键角色，旨在使计算机理解和生成人类语言，从而实现各种自然语言相关的任务。以下是NLP中涉及...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值