Eadon999

对数据分析、数据挖掘和机器学习的探索

facebook更新FastText工程--新增模型压缩论文的实现模型大小缩减80%--文本分类词向量fasttext

Facebook 于北京时间2019年6月25日更新FastText代码,增加了FastText.ZIP:Compressing Text Classification Models论文的模型压缩实现,论文地址https://arxiv.org/abs/1612.03651 压缩后的模型能减小到...

2019-06-26 15:47:03

阅读数 54

评论数 0

输出tf.SparseTensorValue值-----使用稀疏的离散特征提高内存利用率

在做推荐算法,采用FM模型时采用tf.sparse_placeholder函数,会比较省内存 一、tf.sparse_placeholder与tf.SparseTensorValue 1.tf.sparse_placeholder支持mutil one 2.tf.tf.SparseTenso...

2019-03-06 23:06:01

阅读数 377

评论数 0

Word2vec的相关论文和博客收集

一、Word2Vec 作者Tomas Mikolov 的三篇代表作 Word2Vec从提出至今,已经成为了深度学习在自然语言处理中的基础部件,大大小小、形形色色的DL模型在表示词、短语、句子、段落等文本要素时都需要用word2vec来做word-level的embedding。Word2Vec的...

2019-01-19 13:35:15

阅读数 66

评论数 0

python中gevent monkey_patch 出现Monkey-patching may lead to errors解决

       在使用多进程加协程时,patch_all()后出现警告信息:MonkeyPatchWarning: Monkey-patching ssl after ssl has already been imported may lead to errors, including Recurs...

2018-06-16 14:47:11

阅读数 4054

评论数 1

sklearn 生成中文词向量与tfidf

一、英文的词向量生成想必大家都已经能从官网学到,利用sklean的CoutVectorizer模块即可简单生成,借用官网例子:from sklearn.feature_extraction.text import CountVectorizer,TfidfTransformervecizer = ...

2018-06-12 21:24:54

阅读数 2264

评论数 0

Git从master拉开发分支|合并分支|删除远端分支命令 一文打尽

# GitCommandLearning learning the command of Git ##创建分支并切换的原理 之前提到的 HEAD 严格来说不是指向提交,而是指向master,master才是指向提交的,所以,HEAD指向的就是当前分支。 一开始的时候,master分支是一条线,G...

2019-08-13 20:00:24

阅读数 2

评论数 0

Python字典排序

def reverse_rank(id, score): values = list() for i, v in zip(id, score): values.append((i, (np.argmax(v), v[1]))) values = sorted...

2019-05-15 09:15:17

阅读数 13

评论数 0

python字典转DataFrame不等长的处理

d = {'A': [1, 2], 'C': [1, 2, 3, 4]} data = pd.DataFrame(d) print(data) 由于列表不等长会报错: ValueError: arrays must all be same length 改为: c = pd.DataFra...

2019-03-28 11:22:22

阅读数 315

评论数 1

linux crontab定时任务的使用 避免踩坑

一、crontab中调用shell脚本1.确保yourscriptsname.sh的权限是755。   如果不确定,可以在sh脚本所在文件夹下用ll命令查看,若显示如下图-rw-r--r--表示没有执行权限,用sudo chmod 755     yourscriptsname.sh(自己的.sh...

2018-06-11 23:49:11

阅读数 410

评论数 0

windows下python结合spark +java+ pyspark安装配置

默认你已经安装好了python一、  Java配置首先去官网http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html下载Java SE Development Kit 8u172,安装之后...

2018-04-19 22:57:14

阅读数 581

评论数 4

提示
确定要删除当前文章?
取消 删除