yanhe156的博客

之前上学时，小组作业买了个ps3相机，最近翻出来想在PC上用一下。但是发现浏览器和其他应用都用不了，只有安装驱动后自带的CL-Eye Test这个程序能使用相机。查了下原因似乎是win10对硬件程序视频编解码的限制。后面发现安装manyCam后可以直接解决这个问题，只不过manyCam免费版有个水印。https://manycam.com/download/参考：https://answers.microsoft.com/en-us/windows/forum/all/ps3-eye-window

LightGBM 的参数 class_weight = balanced 时， 样本权重是这样计算的 n_samples / (n_classes * np.bincount(y)) 。np.bincount() 就是统计每一种取值的数量。对某个类别的样本，权重是 n_sample / (n_classes* 该类别样本总数)。如果每个类别的数量相同，都是 n_samples / n_class...

不说NAS，一个AutoML系统真的很难真正Auto，我自己感觉有下面几点的问题。看了一些比赛的数据集，发现很多真实的业务是非常复杂的，建模方式没有那么直接，比如19年魔镜杯，预测用户每个月的还款日期和金额，需要思考一下怎么建模，好像一般是做成当成多分类来做。不能单纯的分成回归和分类问题。比如在预测性维护中，可能是对一个时间序列做分类。时间序列和非时间序列处理起来是差很多的，需要分成两...

这篇文章提到，深度学习在推荐系统里一般是用来抽取特征的，在协同过滤的关键环节—— user和item特征的交互上，还是要用矩阵分解，然后再对分解后得到的user和item的表征做内积。这篇文章想用一个神经网络替换掉内积。矩阵分解是常用的方法，具体是把user和item映射到同一个向量空间，用向量来表示user和item。然后向量做点积，结果越大的表示越可能发生交互（点击）。但是有时除了做内积，...

训练时显示的loss和acc，是已经运行过的batch的平均loss。https://github.com/keras-team/keras/issues/10426

论文: Inductive Representation Learning on Large GraphsMotivation大多数graph embedding框架是transductive(直推式的), 只能对一个固定的图生成embedding。这种transductive的方法不能对图中没有的新节点生成embedding。相对的，GraphSAGE是一个inductive（归纳式）框架，...

参考 https://datascience.stackexchange.com/questions/13490/how-to-set-class-weights-for-imbalanced-classes-in-keras注意class_weight 一定是一个字典， 不然虽然不会报错，但是是没有效果的，loss完全不会变。sklearn 直接提供了一个函数来计算类别权重:# 计算类别权...

第一次看到这种用法，感觉很新奇。func = lambda: x**2funcfunc()报错:func = lambda: x**2x = 4print(func())x = 6print(func())lambda: x... 表示的就是一个没有参数的函数，但是有返回值的函数。...

我一直有一个疑问，这个shuffle参数到底做了什么，会不会打乱样本的顺序，导致我想生成训练集的预测结果后，再拼接到ID上时顺序就对应不上了。shuffle = Falseimport numpy as npfrom sklearn.model_selection import KFolda = np.arange(10)kfold = KFold(n_splits=3, shuffle...

原版word2vec 提供了一个compute-accuracy的程序，用来计算准确率。 计算时用到了questions-words.txt 这个文件，这个文件内容如下所以，word2vec 计算准确率（包括gensim也是），其实是测试 一个简单的词汇类比任务的准确率。如果用其他语言的预料，或者是在推荐系统中使用word2vec，这个compute-accuracy就不适用了。当然，也可...

很久没碰开发板了，发现一个库文件缺少的终极解决方法。参考：https://blog.csdn.net/liangtianmeng/article/details/85910585编译android7.0出现问题：error while loading shared libraries: libz.so.1: cannot open shared object file: No such fi...

论文: Adaptive Implicit Friends Identification over Heterogeneous Network for Social Recommendation下载链接: https://dl.acm.org/citation.cfm?id=3271725CIKM 2018

论文 EigenRank: A Ranking-Oriented Approach to Collaborative Filtering (SIGIR 2008)Abstract传统协同过滤算法预测潜在的点击率(rating)。这篇文章提出了一种协同过滤方法结局用户偏好引发的物品排序问题：1） 通过用户间的物品排序(item ranking)来衡量相似性，而不是用rating value;...

用了keras发现终端中显示的不是进度条，而是一直换行打印，用了很久之后终于发现原因了…是因为ubuntu默认的终端窗口太窄了，具体原因应该是跟IO缓冲有关。解决方法是把终端窗口拉宽一点就可以了…...

XML是eXtensible Markup Language（可扩展标记语言）的缩写。XML的作用就是便于数据的传递，比如面向对象编程时有多个对象，每个对象有很多成员，那我们要把这些对象的信息传递给其他人应该如何做？按顺序依次写到文本文件里？这样显然不太方便阅读，而且其他人读入时也不容易区分每个对象的成员到底有哪些。XML就是提供了一种格式来更方便的传递这些信息。XML的exte...

Dropout()和SpatialDropout1D()的区别：假设input_shape为batch_size, timesteps, features, Dropout()，Dropout()是在所有数据上dropout，SpatialDropout1D()会按对features的某几个维度进行dropout，如图：左图：Dropout()， 右图：SpatialDropout1D()...

发现有些代码处理文本时直接调用keras.preprocessing.sequence.pad_sequences(maxlen)，这个函数将比这个长的序列截断，比这个短的序列补零。同时后面RNN，LSTM等模型也没做任何处理，这样显然有问题，RNN发明出来就是为了避免做padding的。...

keras没有提高attention机制的实现，这里参考kaggle上一个kernel中的attention机制的实现。

https://nlp.stanford.edu/projects/glove/