- 博客(11)
- 收藏
- 关注
RSS订阅原创 基于卷积神经网络的查询意图检测【论文笔记】
原文：Query Intent Detection using Convolutional Neural Networks主要贡献：使用卷积神经网路来提取查询向量表示作为查询分类的特征使用该特征来对查询意图分类能有效地检测出查询意图，具有较高的查准率和查全率导言现代搜索引擎为了满足用户的搜索需求，需深入了解用户的查询,识别查询背后的意图。例如，查询“美国总统”将返回巴拉克奥巴马作...
2020-01-13 19:47:00
463
原创 利用点击数据学习Web搜索的深层语义(深度学习)模型【论文笔记】
原文：Learning deep structured semantic models for web search using clickthrough data主要贡献：提出了基于深度学习结构的潜在语义模型，能够将给定查询和文档投影到一个公共的低维空间中，在该空间中两者的相关性很容易计算为空间中的距离；提出了一种单词散列（word hashing）的技术适应大规模Web搜索应用。在真...
2020-01-08 00:08:15
343
原创 Spark的Structured Streaming代码实例（Scala版）
基于scala的StructuredStream开发示例如下：import org.apache.spark.sql.functions._import org.apache.spark.sql.SparkSessionimport org.apache.spark.sql.types._import org.apache.spark.sql.expressions.MutableAggr...
2020-01-05 23:04:23
261
原创 python访问InfluxDB方法及代码封装
封装了python方位InfluxDB的类，代码如下：# coding=utf-8import timeimport datetimefrom influxdb import InfluxDBClientclass InfluxDBVisitor(): def __init__(self): self.host = "XXX.XXX.XXX.XXX" ...
2020-01-05 22:49:40
526
原创 python访问TimeScaleDB方法及代码封装
封装了一个通过python访问TimeScaleDB的类，代码如下：# 导入依赖包# !/usr/bin/python3import timeimport datetimeimport psycopg2class TimeScaleDBVisiter(): def __init__(self): self.beginTime = datetime.datet...
2020-01-05 22:38:53
1205
原创 Spark的Structured Streaming代码实例（python版）
基于python的StructuredStream开发示例如下：from pyspark.sql import Row, SparkSessionfrom pyspark.sql.functions import explodefrom pyspark.sql.functions import splitfrom pyspark.sql.types import *from pyspar...
2020-01-05 18:09:30
486
原创 Spark的Spark Streaming代码实例（python版）
以下为基于python开发的SparkStreaming示例：from pyspark import SparkContextfrom pyspark.streaming import StreamingContextsc = SparkContext("local[2]", "TestStraming")ssc = StreamingContext(sc, 5)#作为TCP客户端...
2020-01-05 17:52:19
692
原创 通过IntelliJ IDEA编写及编译spark（scala）程序
通过IntelliJ IDEA编写及编译spark（scala）程序的步骤如下：创建工程选择File->New->Project，弹出如下界面选择Scala下的SBT，点击Next，进入新工程设置界面设置工程名称，可选择scala版本，点击Finish完成新工程创建如下添加程序文件右键左侧导航栏目录结构src->main->scala，弹出菜单如下...
2020-01-05 16:46:51
1382
原创 python创建TCP服务器
python创建TCPSever，python2和python3基本相同，除了以下区别：python2引用SocketServer库，python3引用socketserver库发送字符串，python2可直接调用self.wfile.write(content)，python3需调用self.wfile.write(content.encode())，否则会出现需要传入参数错误：“Type...
2020-01-05 16:21:40
498
原创 windows下spark环境搭建
在windows下spark的环境搭建步骤如下：下载 jdk-8u131-windows-x64.exe。若安装路径为E:\Java\，则增加如下的环境变量：JAVA_HOME=E:\Java\jdk1.8.0_131CLASSPATH=.;%JAVA_HOME%\lib\tools.jar;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\bin;PATH中增加%J...
2020-01-05 15:51:12
272
原创 基于卷积神经网络的Web搜索语义表示学习【论文笔记】
基于卷积神经网络的Web搜索语义表示学习原文: Learning Semantic Representations Using Convolutional Neural Networks for Web Search该文章提出了基于CNN的潜在语义模型，通过搜索查询和网页文档学习低维语义向量。首先通过卷积最大池化操作对词n-gram级的局部上下文进行建模，然后词序列的显著局部特征，组合成全局特...
2020-01-04 22:32:09
461
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人