- 博客(2)
- 资源 (6)
- 问答 (2)
- 收藏
- 关注
RSS订阅原创 presto和hive将查询结果保存到本地的方法
Insert overwrite LOCAL directory 'file:///xx/xx/xxx' ROW format delimited fields terminated BY "\t"上面是hive中将查询语句的结果插入到文件夹的方法。presto的方法如下：presto --server ip:port --catalog hive --schema default...
2019-01-28 13:29:58
3701
原创 presto列转行
原数据有一列数据为[1,2] , [0,2]这样，需要统计每种类别具体的占比，所以需要行转列。由于数据在hive中，建表人员为了导数方便将字段类型设置成了string，而presto的列转行函数只能处理Array格式，尝试了一波cast as array，均以失败告终。一怒之下直接用两次repalce和一次split得到了array，后面就好办了。presto列转行示例：select...
2019-01-17 10:16:06
5992
waffles工具
Waffles 英文原意是蜂蜜甜饼，在这里却指代一个非常强大的机器学习的开源工具包。Waffles里包含的算法特别多，涉及机器学习的方方面面，推荐系统位于 其中的Waffles_recommend tool，大概只占整个Waffles的1/10的内容，其它还有分类、聚类、采样、降维、数据可视化、音频处理等许许多多工具包，估计能与之媲美的也就数Weka了。
2016-04-07
SVDFeature
最新的SVDFeature工具，里面还有我自己找的几篇manual。
一个feature-based协同过滤和排序工具，由上海交大Apex实验室开发，代码质量较高。在KDD Cup 2012中获得第一名，KDD Cup 2011中获得第三名，相关论文 发表在2012的JMLR中，这足以说明它的高大上。
SVDFeature 包含一个很灵活的Matrix Factorization推荐框架，能方便的实现SVD、SVD++等方法, 是单模型推荐算法中精度最高的一种。SVDFeature代码精炼，可以用 相对较少的内存实现较大规模的单机版矩阵分解运算。另外含有Logistic regression的model，可以很方便的用来进行ensemble。
2016-04-07
jieba分词的停用此表，为什么对英文不起作用？
2017-06-13
关于lenskit 跑的时候出了点问题
2016-01-19
TA创建的收藏夹 TA关注的收藏夹
TA关注的人