- 博客(8)
- 收藏
- 关注
RSS订阅原创 hdfs面试题(大全)
1.HDFS 文件块大小设定HDFS中的文件在物理上是分块存储（block），块的大小可以通过配置参数( dfs.blocksize)来规定，默认大小在hadoop2.x版本中是128M，老版本中是64M2.HDFS副本存放机制网络拓扑在本地网络中，两个节点被称为“彼此近邻”是什么意思？在海量数据处理中，其主要限制因素是节点之间数据的传输速率——带宽很稀缺。这里的想法是将两个节点间的带宽作为距离的衡量标准。节点距离：两个节点到达最近的共同祖先的距离总和。例如，假设有数据中心d1机架r
2020-12-08 09:44:08
455
原创 hadoop HA 集群启动发现现datanode没有启动，namenode clusterID与datanode clusterID不兼容，不匹配。
今天笔者在集群启动的时候发现datanode没有启动，立马查看了datanode日志，发现了如下问题：这个问题说的是，集群的namenode clusterID与datanode clusterID不兼容，不匹配。造成这种情况的原因是namenode格式化了多次，datanode cluesterID只有首次才会生成，namenode clusterID每格式化一次就会生成一次，所以会造成...
2018-03-15 16:43:25
2691
2
原创 CentOS网络配置
1. 登陆root用户，登陆后输入ip addr或者ifconfig 查看自己的网卡e开头的那个如下图： 2. 接下来输入命名：vi /etc/sysconfig/network-scripts/ifcfg-ens33 后面ens33看看自己的网卡是多少，上图可以看到 进入后按i 进入编辑模式把BOOTPROTO=dhcp 改为静态 staticONBOOT=NO 改为yes,最后添加上如下图所...
2018-03-12 16:42:16
190
原创 虚拟机VMware中安装CentOS7
虚拟机VMware中安装CentOS7一、环境准备 虚拟机中安装Linux系统，二、下载镜像文件 虚拟机中安装CentOS7，三、安装CentOS71.点击我的电脑下新建的虚拟机，选择编辑虚拟机设置，找到下载的镜像文件 2.开启虚拟机，使用上下箭头选择第一项，开始安装系统 等待安装 选择语言 进入安装信息摘要页面，进行相关配置 设置日期及时间 可以选择GNOME桌面，然后在右侧勾选如下几项，点击完...
2018-03-12 16:31:42
260
原创 ZooKeeper的基础原理及应用场景
一、ZooKeeper是什么？ 1. 是一个为用户的分布式应用程序提供协调的服务 是为别的分布式程序服务的 本身也是一个分布式程序(只要半数以上节点存储，就能正常提供服务) 2.目标是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的系统提供给用户二、ZooKeeper的架构是什么？
2017-08-02 13:43:53
337
原创 java及Python处理异常的方式和各自的异常种类
一、Java异常 1.处理异常的方式或者叫关键词 try catch finally throw throws(用在方法声明时可能抛出的异常) 2.异常的种类和体系结构 Throwable Error-不可恢复的异常 Exception 检查异常--所有的Exception子
2017-06-30 13:47:30
771
原创 Java及Python线程实现方式带实例
一、线程实现方式： 1.继承Thread类 2.实现Runnable接口 3.实现Callable+FutureTask接口线程操作涉及到的方法 start:线程对象的方法 sleep：普通对象的方法 join:线程对象的方法 wait:普通对象的方法 notify:普通对象的方法 no
2017-06-30 13:35:03
783
原创 Python基础语法
一、Python介绍 Python , 是一种面向对象的解释型计算机程序设计语言，具有丰富和强大的库，Python 已经成为继JAVA，C++之后的的第三大语言。 特点：简单易学、免费开源、高层语言、可移植性强、面向对象、可扩展性、可嵌入型、丰富的库、规范的代码等二、Python基础语法 1.标识符第一个字符必须是字母表中字母或下划线'_'。标识符的其他的部分有
2017-06-16 13:32:54
620
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人