2017年09月_sparkexpert

原创 Xception场景分类模型的实践

刚好最近在找场景分类精度更高的模型，因此将会对近年来精度更高的模型(tensorflow slim中集成的模型除外)进行逐一测试。Xception: Deep Learning with Depthwise Separable Convolutions ，谷歌去年推出的一篇论文。看了下这篇论文，它是在inceptionVX的基础上演变过来的。上面右侧四个图刚

2017-09-27 10:49:32 3487 1

原创 pytorch实践中module 'torch' has no attribute 'form_numpy'问题的解决

最近开始仔细玩了一下pytorch，发现里面有个BUG之前都没有发现。在测试torch最基本的示例的情况下，居然碰到了个pytorch无法转化numpy为Tensor的问题，呈现的问题如下：ndscbigdata@ndscbigdata:~/work/change/AI$ pythonPython 3.6.1 (default, Jul 14 2017, 17:08:44) [GCC

2017-09-25 10:57:35 33521 9

原创 Tensorflow protobuf版本报错问题解决(AttributeError: 'module' object has no attribute 'Default')

无意中发现TF跑不了，报的错误是：AttributeError: 'module' object has no attribute 'Default'如下：>>> import tensorflow as tfTraceback (most recent call last): File "", line 1, in File "/home/schidester/usr/t

2017-09-24 21:03:32 19564 9

原创《Attributed Social Network Embedding》论文学习笔记

一、研究背景本文提出了一种网络表示学习算法：将结构信息和属性信息同时输入深度神经网络，实现非线性特征抽象，相对传统的浅层神经网络语言模型，有较大性能提升。同时作者提出了离散属性信息的处理方式，是本文的贡献之一。多源信息融合的表示方法主要有以下几种：一、分别建立表示模型，简单拼接作为最终表示向量；二是训练过程中建立联合优化目标函数，实现线性融合；第三种就是作者

2017-09-22 19:40:15 6850 4

原创 EAST 自然场景文本检测实践(EAST: An Efficient and Accurate Scene Text Detector)

自然场景文字是图像高层语义的一种重要载体，近些年自然场景图像中的文本检测与识别技术越来越引起人们的重视。特别是近年来ICDAR的历界比赛，更是逐渐将这一领域的score不断提升。如http://rrc.cvc.uab.es/?ch=4&com=evaluation&task=1&gtv=1这个主页上看到列出的result结果，都有达到90%多的。此外，一些大公司的AI都提供了这样的接口，如百度AI

2017-09-15 10:37:46 27198 11

原创健康问答语料的爬虫(C#)

为了实现健康问答系统的构建，需要找一些语料，发现好大夫在线的数据挺好的，于是花了一个小时时间，写了个爬虫，能够爬取其页面上显示的40个疾病左右的问答语料。采用C#来编写，主要效率高一些。开辟了20个线程进行下载，约下载了30多万的问答语料。爬取下来的结果如下所示：可以看到当中存在着几轮对话，当然也有一些噪声，如尽快填表等。######鼻炎

2017-09-12 16:53:59 2007 4

原创 DrQA实践

2017年七月份Facebook开源了其开放域问答系统DrQA的代码。关于DrQA，还有一篇2017年发表在ACL上的论文《Reading Wikipedia to Answer Open-Domain Questions》，在此首先介绍一下论文的原理。 DrQA模型主要分为两部分，第一部分Retriever和第二部分Reader，Retriever根据问题检索出维基百科语料库中最相关的

2017-09-10 23:20:13 4861 11

原创机器视觉的情感判断实践（From Pixels to Sentiment: Fine-tuning CNNs for Visual Sentiment Prediction）

看到了2017年的一篇文章From Pixels to Sentiment: Fine-tuning CNNs for Visual Sentiment Prediction，对于其里面的视觉中的情感判断，感觉非常有价值，于是就直接利用其提供好的模型进行了测试，感觉效果还是不错。与传统的文本情感判断一样，机器情感的判断基础框架也是一样，对一张图像给个0,1这样的值，然后进行训练。

2017-09-01 11:33:50 1344 2

大数据挖掘SparkExpert的博客