大数据
青天大脑爷
不为失败找理由,只为成功找方法。
展开
-
到底怎么设定HDFS文件块(block)大小??
最近看到这个面试问题,CSDN搜了半天也没有确切答案,查询资料思考后总结如下:我们在HDFS中存储数据是以块(block)的形式存放在DataNode中的,块(block)的大小可以通过设置dfs.blocksize来实现;在Hadoop2.x的版本中,文件块的默认大小是128M,老版本中默认是64M;目录一、为什么HDFS中块(block)不能设置太大,也不能设置太小?二、 ...原创 2020-03-21 23:44:11 · 1155 阅读 · 0 评论 -
Windows上Kafka运行环境安装
1. 安装JDK1.1 安装文件:http://www.oracle.com/technetwork/java/javase/downloads/index.html 下载JDK1.2 安装完成后需要添加以下的环境变量(右键点击“我的电脑” -> "高级系统设置" -> "环境变量"):JAVA_HOME:C:\Program Files\Java\jdk1.8.0_17...原创 2019-11-07 14:51:58 · 105 阅读 · 0 评论