大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。
想要学好大数据需掌握以下技术：
1. Java编程技术
大数据开发涵盖Java编程、Linux、Hadoop、Hive、Avro/Protobuf、ZooKeeper、HBase、Phoenix、Redis、Flume、SSM、Kafka、Scala、Spark、Azkaban和Python等多个技术领域。学习大数据，需要掌握Java作为基础，Linux操作，以及Hadoop生态中的HDFS、MapReduce、Hive、HBase等。同时，了解数据序列化系统如Avro和Protobuf，分布式协调服务ZooKeeper，NoSQL数据库HBase，SQL引擎Phoenix，缓存系统Redis，日志采集工具Flume，SSM框架，消息中间件Kafka，编程语言Scala，大数据处理引擎Spark，任务调度器Azkaban，以及Python在数据分析中的应用。
订阅专栏 解锁全文
扫一扫
784
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
