- 博客(3)
- 资源 (10)
- 收藏
- 关注
转载 Hadoop fs常用命令
1,Hadoop fs –fs [local | ]:声明hadoop使用的文件系统,如果不声明的话,使用当前配置文件配置的,按如下顺序查找:hadoop jar里的hadoop-default.xml->$HADOOP_CONF_DIR下的hadoop-default.xml->$HADOOP_CONF_DIR下的hadoop-site.xml。使用local代表将本地文件系统作为hadoop的
2017-01-20 13:37:51 1288
原创 Git中push时出现错误fatal: The remote end hung up unexpectedly
错误如下:fatal: The remote end hung up unexpectedly原因:传输文件太大解决办法:windows:在 .git/config 文件中加入[http]postBuffer = 524288000linux:git config http.postBuffer 524288000
2017-01-18 22:13:48 10608
原创 基于Spark的FPGrowth算法的运用
Spark.mllib 提供并行FP-growth算法,这个算法经常用于挖掘频度物品集。关于算法的介绍网上很多,这里不再赘述。主要搞清楚两个概念:1)支持度support(A => B) = P(AUB),表示数据集D中,事件A和事件B共同出现的概率;2)置信度confidence(A => B) = P(B|A),表示数据集D中,出现事件A的事件中出现事件B的概率;由上可以看出,支持
2017-01-17 22:26:28 8140
中国计算机学会推荐国际刊物会议列表(数据库数据挖掘与内容检索)
2016-06-20
GroupLens_MovieLens数据集
2016-01-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人