阿里小蜜技术整理

概述 阿里小蜜是电子商务领域的智能私人助理,基于阿里海量消费和商家数据,结合线上、线下的生活场景需求,以智能+人工的模式提供智能导购、服务、助理的拟人交互业务体验。 在跨终端、多场景领域支持多轮交互、多模交互(文本、语音和图像)和问题推荐预测; 支持多模型(文本模型、客户模型、语音识别和图像...

2018-08-07 10:00:50

阅读数 2687

评论数 1

对话系统评价指标

概述 对话系统的指标分为两大类:客观评价指标和主观评价指标 其中客观评价指标分为词重叠评价指标和词向量评价指标。 【词重叠评价指标】 根据生成语句与参考答案语句之间的词重叠率来进行评价 【词向量评价指标】 通过了解每一个词的意思来判断回复的相关性,词向量是实现这种评价方法的基础。 ...

2018-08-08 23:30:35

阅读数 1457

评论数 0

Seq2Seq模型讲解

概述 Seq2Seq是一个Encoder-Deocder结构的模型,输入是一个序列,输出也是一个序列。 Encoder将一个可变长度的输入序列变为固定长度的向量,Decoder将这个固定长度的向量解码成可变长度的输出序列。 使用x={x1,x2,...,xn}x={x1,x2,...,xn}...

2018-08-08 17:36:08

阅读数 2953

评论数 1

序列标注:BiLSTM-CRF模型

概述 对于序列标注问题,目前BiLSTM-CRF模型是目前使用比较流行的方法。本文以Neural Architectures for Named Entity Recognition为例,讲解BiLSTM-CRF模型在命名实体识别任务上的应用,着重于CRF层的分析。 数据描述 假设数...

2018-08-06 01:39:58

阅读数 6424

评论数 0

任务型多轮对话系统概述

主要模块 任务型机器人核心模块主要包括三个模块: 自然语言理解模块(NLU) 对话管理模块 自然语言生成模块(NLG) 自然语言理解模块 该模块一般包含以下三个模块: 领域识别:即识别该语句是不是属于这个任务场景,一般有多个机器人集成时,如闲聊机器人,问答机器人等,领域...

2018-08-06 01:25:15

阅读数 4039

评论数 0

概率图模型:HMM和CRF

概述 结构化学习(Structured Learning) 概率图模型属于结构化学习的一种,把F(x,y)F(x,y)F(x,y)换成了概率。 结构化学习中有三个问题: 概率图模型(Graphical Model) 隐马尔科夫模型(Hidden Markov ...

2018-08-06 01:21:40

阅读数 748

评论数 0

Match-LSTM和Pointer Net

Match-LSTM 简介 Match-LSTM是由(Wang & Jiang,2016)发表在NAACL的论文提出,用于解决NLI(Natural Language Inference,文本蕴含)问题。 premise:前提,代表上下文 hypothe...

2018-08-06 01:13:01

阅读数 789

评论数 2

【分布式编程】四——Pycharm运行Python版Spark程序

前言 此前搭建成功分布式Spark环境,此文介绍使用Pycharm运行Python语言的Spark程序。 操作步骤 安装Pycharm 点击下载。 过程与安装Intellij IDEA类似,在此不在赘述。 进入到安装目录下执行 ./bin pycharm-sh 配置...

2018-02-07 11:13:48

阅读数 730

评论数 0

【分布式编程】三——基于VirtualBox的Spark完全分布式环境

前言 Spark的搭建依赖于Hadoop,因此本文基于之前分布式Hadoop环境,JDK、Hadoop等已安装好, 系统环境 虚拟机:VirtualBox Linux:Ubuntu 16.04 LTS HAdoop 2.7.5 IDE:Intellij IDEA JDK 1.8.0_1...

2018-02-07 11:13:26

阅读数 259

评论数 0

【分布式编程】二——基于Hadoop的MapReduce程序

此前配置好分布式Hadoop环境,此篇主要讲解通过Intellij IDEA编写分布式MapReduce程序以及利用Hadoop实现词频统计 系统环境 虚拟机:VirtualBox Linux:Ubuntu 16.04 LTS Hadoop 2.7.5 IDE:Intellij IDEA...

2018-02-07 11:12:40

阅读数 681

评论数 0

【分布式编程】一——基于VirtualBox的Hadoop完全分布式环境搭建

系统架构 虚拟机环境:VirtualBox Linux系统:Ubuntu 16.04 LTS 工具包 JDK1.8 Hadoop 2.7.5 拓扑结构:如下 操作步骤 【注】本步骤以Master为例,其他虚拟机可以使用克隆功能复制,然后更改 安装常用软件 安装v...

2018-02-07 11:12:02

阅读数 607

评论数 0

【汽车口碑分析】3.爬取汽车评论数据

环境配置 Ubuntu 16.04 Python 3.5 技术框架 Scrapy 需求目标 本项目为汽车口碑分析,第一步需要爬取对于不同车型的评论数据。 选择58车的车型分类爬取评论数据。 爬取流程 先获取每个车型的链接,以下图中红框内的车型为例 打开...

2018-02-07 11:11:09

阅读数 648

评论数 0

【Python Trick】Python的switch-case实现

前言 在Python中,并没有实现switch-case语句,通过if-elif实现会显得麻烦,因此通过以下方式实现该语句功能。 实现方式 通过字典实现 以如下情景为例,将百分制分数转换为五分制分数。如100%转换为5,80%转换为4等。 def foo(score):...

2018-02-07 11:10:19

阅读数 100

评论数 0

Hexo主题之NextD

简介 本次更改的主题为NextD,一款基于NexT而修改的主题。 集成Gitment评论系统 点击https://github.com/settings/applications/new注册 填写内容 Application name 随便填写 Homepage URL 填...

2018-02-07 11:05:56

阅读数 177

评论数 0

Windows中CMD命令之Tree生成目录

作用 以图形显示驱动器或路径的文件夹结构 格式 tree [path] [/f] [/a] #/f 显示每个文件中文件的名称 #/a 使用ASCII字符,而不使用扩展字符 样例 tree C:\Users\Administrator\.android /f >F:\...

2018-02-07 11:04:18

阅读数 2758

评论数 0

【评论文本分类】1.爬取评论数据

环境配置 Ubuntu 16.04 Python 3.5 技术框架 Scrapy Selenium PhantomJS 需求目标对网址http://liuyan.cjn.cn/index.html进行数据爬取本文爬虫有三层爬取,爬取结构层次如图所示, 主页面列表页面,需要利用selenium+ph...

2017-12-27 16:22:34

阅读数 502

评论数 0

Notepad++编译、运行C

安装MinGW编译器若安装过CodeBlocks,只需要将绝对路径MinGW/bin添加到环境变量path中。若未安装任何编译器,先安装编译器,并将bin文件夹的绝对路径添加到环境变量path中。安装NppExec插件之前文章Notepad++编译运行Java中有安装过程,在此不再重复配置C/C+...

2017-12-25 17:27:06

阅读数 903

评论数 0

利用Github Pages+Hexo搭建个人博客

技术简介 Github Pages GitHub Pages 本来用于介绍托管在Github上的项目,由于它的空间免费稳定,因此适合用来搭建博客。 每个帐号只能有一个仓库来存放个人主页,且仓库的名字必须是username/username.github.io。你可以通过http://us...

2017-12-24 00:29:19

阅读数 524

评论数 0

Virtualbox 下LVS-NAT模式集群部署

LVS作业报告LVS作业报告 系统架构 客户机配置桥接IP设置 虚拟机环境配置网卡模式设置 sudo命令配置 Director配置安装ipvsadm 建立一个虚拟IP地址进行广播 将该虚拟机地址添加到路由表 使用ipvsadm安装LVS服务 增加真实服务器 设置DirectorIP 查看ifcon...

2017-12-01 17:55:59

阅读数 184

评论数 0

CentOS 7 yum安装nginx-1.12.0

CentOS 7 中的 yum 没法直接使用 yum install nginx 这个指令去安装nginx,因为nginx这个服务不是yum库中自带的。图1是官方提供的大致安装步骤,图2是官网提供的多个版本的nginx安装包,下面是我给合自己的系统环境总结的安装方法,供大家参考: 图1 ...

2017-11-29 01:03:20

阅读数 266

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭