大数据
ttdata
如果半途而废,就意味着从头来过
展开
-
spark-安装
1、下载Spark 从源代码直接编译 github下载预编译版本 http://spark.apache.org/downloads.html 2、路径说明README.md包含用来入门 Spark的简单的使用说明。bin包含可以用来和 Spark进行各种方式的交互的原创 2017-07-14 14:14:47 · 172 阅读 · 0 评论 -
大数据—分类和架构简介
大数据架构和模式 大数据分类和架构简介如何将大数据分为不同的类别Divakar Mysore, Shrikant Khupat, 和 Shweta Jain2014 年 8 月 28 日发布WeiboGoogle+用电子邮件发送本页面 0系列内容:此内转载 2017-07-07 14:09:03 · 1272 阅读 · 0 评论 -
大数据下的用户画像
原创 2017-07-20 10:43:53 · 924 阅读 · 0 评论 -
hadoop 文件管理
hadoop之HDFS文件操作常有两种方式,命令行方式和JavaAPI方式一、文件基础管理1、命令行hadoop fs -cmd hadoop fs -mkdir /usr/root hadoop fs -put README.txt 使用Hadoop的命令put将本地文件README.txt送到HDFShadoop fs -lsha原创 2017-07-14 14:47:37 · 493 阅读 · 0 评论 -
spark-基础框架
spark特点1、计算引擎生态Spark Streaming1、微批量方式的计算和处理,可以用于处理实时的流数据Spark SQL1、Spark SQL可以通过JDBC API将Spark数据集暴露出去Spark MLlib可扩展的Spark机器学习库,由通用的学习算法和工具组成Spark GraphX:图计算和并行图计算的新的(alpha)Spark原创 2017-07-13 17:03:49 · 548 阅读 · 0 评论 -
spark-高手进阶
1、熟练掌握scala2、精通spark平台提供给开发者api3、深入spark内核4、掌握spark核心框架应用5、做商业级别的spark项目原创 2017-07-14 11:35:00 · 563 阅读 · 0 评论 -
如何快速全面建立自己的大数据知识体系
摘要:很多人都看过不同类型的书,也接触过很多有关大数据方面的文章,但都是很零散不成系统,对自己也没有起到多大的作用,所以作者第一时间,带大家从整体体系思路上,了解大数据产品设计架构和技术策略。作者经过研发多个大数据产品,将自己形成关于大数据知识体系的干货分享出来,希望给大家能够快速建立起大数据产品的体系思路,让大家系统性学习和了解有关大数据的设计架构。很多人都看过不同类型的转载 2017-08-08 13:38:48 · 238 阅读 · 0 评论