u011274209的专栏

ClickHouse的bitmap是数据人员的一大利器，可以用于快速做人群分析。但是常见的bitmap使用方法加大ClickHouse集群计算和存储负载。本文结合PySpark，通过预计算ClickHouse bitmap二进制序列的方式，分摊ClickHouse的压力。

1、ERROR spark.SparkContext: Error initializing SparkContext org.apache.spark.SparkException: Yarn application has already ended! It might have been killed or unable to launch application master....

起因：众所周知，tensorflow有个慢的原因就是：Feed_dict does a single-threaded memcpy of contents from Python runtime into TensorFlow runtime. If data is needed on GPU, then you'll have an additional CPU->GPU transfe...

当lookup_table的索引超过了矩阵的长度，cpu版会报一下错误：InvalidArgumentError: indices[n,m] = x is not in [0, y)其中x比y大。在gpu版中，会自动帮你跳过这个数，自动补全为0；cpu版不会，会报这个上面错误。原因：gather_functor_gpu.cu.h具体见下面的讨论：the embedding_lookup() ret...

傻乎乎写了各种print，挂到服务器上，用screen切窗口，一下子就给刷没了，所以想着重定向到文件里。遇到几个“坑”，这里当做给自己记录：1、我想要既能重定向到文件里，又能输出到屏幕上。使用了tee工具，但是没法反应。原因是：Python 中如何一个 print 语句同时输出到屏幕且记录到文件里python xxx.py有缓冲，要满 4k 才写入文件，加上python -u xx

原理：文章来源：Memory Networks 、 Answering Reading Comprehension Using Memory Networks  对于很多神经网络模型，缺乏了一个长时记忆的组件方便读取和写入。作为RNN，lstm和其变种gru使用了一定的记忆机制。在Memory Networks的作者看来，这些记忆都太小了，因为把状态（state，也就是cell的输出）及其权重全部都

代码来源：LSTM Networks for Sentiment Analysis ps：markdown真难用啊

原理见：理解 LSTM 网络推导见：LSTM的公式推导详解（万分感谢这篇文章。这里基本抄自这篇博文。）

使用theano时，“Runtime Error: Failed to import pydot”错误

解决办法如下

详细介绍Weka和Mulan

几个关于jsp的问题

arff文件可以用于Weka和Mulan。原网站：http://weka.wikispaces.com/Creating+an+ARFF+file代码：/* * This program is free software; you can redistribute it and/or modify * it under the terms of the GNU

一、获取文本。二、对文本进行预处理。三、文本流的语言学处理。四、文本流的数学处理。五、特征提取和特征选择。六、利用算法进行挖掘

虽然之前一直用这个最基本的模型，但今天发现自己对这个模型确实不够熟悉，因此，对此参考了不少文献，以问答的形式进行了整理。