关于大数据的一点感想

前一段时间学习了传智播客大数据课程,觉得掌握的不太牢靠以后还要再重复的看看。我想简单的总结一下课程吧!!

首先大数据课程要有JAVAEE的基础和LINUX基本功。整个课程有以下几点:

  1. linux基础篇:包括liunx安装软件,网络设置、vim编辑器、免密登陆、shell基础。
  2. java高级基础:反射,高并发,RPC,JVM,netty
  3. zookeeper:存储和监听特性。
  4. Hadoop基础:hdfs。RPC,yarm,MR模型
  5. Hive+sqoop+flume+azkaban辅助系统
  6. Hbase:存储(觉得比hive好用一点)
  7. storm:掌握编程模型就好!!不太难(实时计算框架。不过现在被flink代替了,自己还没有跟上时代的步伐。。)
  8. storm+kafka+redis:实时计算的三驾马车
  9. scala编程基础:为spark打基础
  10. spark:rdd+stream+sql三点
  11. python:基础+一部分机器学习的算法

整合一下:只要还是在数据的清洗、存储展示上下功夫。可能是当时课程还没有完善,或者算法那一块太深奥。我总觉得高级算法还是没有做好!!当下的做的比较好的推荐算法等等没有做。以前做数学建模比赛学到的知识我还没有忘,我想整理一下关于数据挖掘的部分,再抽空补补现在比较流行的智能推荐算法。又要用回Matlab了。。。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值