- 博客(3)
- 资源 (2)
- 收藏
- 关注
原创 Hadoop机架感知配置及配置问题解决
Hadoop在搭建集群的时候,集群的网络拓扑都是默认在同一个机架下的。以/default-rack为一个机架,如下格式。Rack: /default-rack192.168.71.100:50010 (repo)192.168.71.101:50010 (node01)192.168.71.102:50010 (node02)192.168.71.103:50010 (node03)在默认机架下副本放置策略是无法实现的,所以要对集群拓扑进行配置。常用方法是机架感知。默认情况下,hadoop的机架
2020-06-17 20:12:34 845
原创 HDFS的心跳机制学习
HDFS的心跳机制学习在HDFS的主/从架构中,NameNode 是主服务器,负责管理整个集群中的DataNode,DataNode 是从服务器,负责执行任务。HDFS 中的通讯协议都是构建在 TCP/IP 协议之上,DataNode 使用 Datanode Protocol 接口与 NameNode 交互,而 Datanode Protocol 又是基于远程过程调用(RPC)之上的,这个 NameNode 与 DataNode 通信的过程就是 HDFS 的心跳机制。DataNode 通过心跳机制与 N
2020-05-24 10:27:37 866 3
原创 python实现socket分布式通信系统
python实现socket分布式通信系统服务器#!/usr/bin/python# -*- coding: UTF-8 -*-from socket import *import threadingimport timeimport pymysqlPiID = 1adjID = [2,3,4]HOST = ''PORT = 6661BUFSIZ = 1024ADDR ...
2019-12-18 22:34:50 688
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人