![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
NLP
东都大白兔
草原上最美的花
展开
-
soft / hard attention 机制 理解——机器学习中的soft 和 hard
Soft attention是一种全局的attention,其中权重被softly地放在源图像所有区域Hard attention一次关注图像的一个区域,采用0-1编码,时间花费较少,但是不可微分,所以需要更复杂的技术来进行训练下图是从果壳网(quora)摘取的一篇回答即在机器学习中soft 常常表示可微分,比如sigmoid和softmax机制而hard常常表示不可微分soft hard attention机制是在图像生成标题任务中被提出的,其原始任务如下:上面是s..原创 2020-05-18 20:20:58 · 2702 阅读 · 0 评论 -
聊天机器人chatbot搭建及思考(TensorFlow)(附代码)
端到端的对话系统环境Python 3.7TensorFlow 1.14模型结构使用seq2seq + attention 模型NLP应用词向量层单词->实数向量降低输入维度(one-hot输入维度与词汇表大小同)增加语义信息(稠密向量),在自然语言学习的词向量会将含义相似的词赋予值相近的词向量值 # 为源语言和目标语言分别定义词向量。 self...原创 2020-01-14 02:41:04 · 4800 阅读 · 6 评论 -
Python检测重复字——部分中华字经重复字检测
要点:中文去标点符号,中文繁体字转化简体字,列表检测并输出重复项,list当多个相同值时索引安装包:关于去标点,使用包 zhon,直接pip即可安装及使用:https://blog.csdn.net/spring_willow/article/details/80211243#%E4%BA%8C%E4%B8%AD%E6%96%87%E6%96%87%E6%9C%AC%E5%8E%B...原创 2019-10-25 22:09:22 · 2650 阅读 · 0 评论 -
利用科大讯飞开放平台 进行自然语言处理(NLP)Python
最近在做聊天机器人的人工智能实践,需要用到依存句法分析和语义依存分析,所以利用强大的中文语言技术平台注册及快速入门网址 https://www.xfyun.cn/快速入门文档 https://www.xfyun.cn/doc/platform/quickguide.htmlIP白名单设置运行demo时,会出现类似{"code":"10105","data":{},"desc":"ill...原创 2019-10-17 23:44:06 · 4277 阅读 · 0 评论