大数据技术
文章平均质量分 93
南方的南方
这个作者很懒,什么都没留下…
展开
-
kafka总结
Kafka 简介Apache Kafka起源于LinkedIn,后来于2011年成为开源Apache项目,然后于2012年成为First-class Apache项目。Kafka是用Scala和Java编写的。 Apache Kafka是基于发布订阅的容错消息系统。 它是快速,可扩展和设计分布。Kafka特点:可靠性:具有副本及容错机制。可扩展性:kafka无需停机即可扩展节点及节点上线。持久性:数据存储到磁盘上,持久性保存。性能:kafka具有高吞吐量。达到TB级的数据,也有非常稳定的性能。原创 2021-09-26 23:49:29 · 696 阅读 · 1 评论 -
hadoop总结
Hadoop 常用端口号dfs.namenode.http-address:50070dfs.datanode.http-address:50075SecondaryNameNode 辅助名称节点端口号:50090dfs.datanode.address:50010fs.defaultFS:8020 或者 9000yarn.resourcemanager.webapp.address:8088历史服务器 web 访问端口:19888Hadoop 配置文件以及简单的 Hadoop 集群搭建原创 2021-09-24 17:04:34 · 651 阅读 · 0 评论