- 博客(16)
- 收藏
- 关注
RSS订阅转载 HDFS的java操作
搭建开发环境1、引入依赖<dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifactId> <version>2.6.1</version></de...
2018-07-30 21:36:00
437
转载 HDFS工作原理笔记
什么是HDFS，有什么特点特性它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件.其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色；特性:（1）HDFS中的文件在物理上是分块存储（block），块的大小可以通过配置参数( dfs.blocksize)来设置，默认大小在hadoop2.x版本中是128M，之前的版本中是64M...
2018-07-30 21:33:00
108
转载 win10已经编译好的hadoop2.6.5
win10已经编译好的hadoop2.6.5https://pan.baidu.com/s/1kmzzBcMsf2g4stPZ4hZL_g转载于:https://www.cnblogs.com/wuyl/p/9383942.html
2018-07-28 23:56:00
153
转载 HDFS常用命令收集，来云百度的一个txt
-help功能：输出这个命令参数手册-ls 功能：显示目录信息示例： hadoop fs -ls hdfs://hadoop-server01:9000/备注：这些参数中，所有的hdfs路径都可以简写-->hadoop fs -ls / 等同于上一条命令的效果...
2018-07-28 16:38:00
212
转载 hadoop 集群搭建 基础配置测试
1、首先准备4台能上网的机器，主机名叫shizhan01,shizhan02,shizhan03,shizhan042、修改主机名和IP的映射关系vim /etc/hosts如下：每一台机器都要配置192.168.137.200 shizhan01192.168.137.201 shizhan02192.168.137.202 shizhan03192.168.137.2...
2018-07-28 15:42:00
173
转载 java8 疯狂java讲义
https://pan.baidu.com/s/19XKQcYqgwVJCwMVFPG3_Gw转载于:https://www.cnblogs.com/wuyl/p/9352050.html
2018-07-22 23:29:00
88
转载 ZOOKEEPER基础教程
Zookeeper概念简介：Zookeeper是一个分布式协调服务；就是为用户的分布式应用程序提供协调服务1、zookeeper是为别的分布式程序服务的(比如服务管理、心跳检查、配置信息管理)2、Zookeeper本身就是一个分布式程序（只要有半数以上节点存活，zk就能正常服务）3、Zookeeper所提供的服务涵盖：主从协调、服务器节点动态上下线、统一配置管理、分...
2018-07-18 18:48:00
109
转载 本地yum仓库的安装配置通过一个Apache作为私有仓库，供局域网内使用
1、本地yum仓库的安装配置两种方式： 1、每一台机器都配一个本地文件系统上的yum仓库 file:///packege/path/2、在局域网内部配置一台节点(server-base)的本地文件系统yum仓库，然后将其发布到web服务器中，其他节点就可以通过http://server-base/pagekege/path/ 制作流程： 先挑选一台机器serverna...
2018-07-15 09:09:00
173
转载 centos6.7防火墙相关的操作
iptables简介及相关服务的命令Iptables也叫netfilter是Linux下自带的一款免费且优秀的基于包过滤的防火墙工具，它的功能十分强大，使用非常灵活，可以对流入、流出、流经服务器的数据包进行精细的控制。iptables是Linux2.4及2.6内核中集成的模块。在iptables中有四张表，分别是filter、nat、mangle和raw每一个表中都包含了各自不同的链...
2018-06-08 12:09:00
83
转载 Nginx+keepalived 学习笔记
1. Nginx相关概念1.1. 反向代理反向代理（Reverse Proxy）方式是指以代理服务器来接受internet上的连接请求，然后将请求转发给内部网络上的服务器，并将从服务器上得到的结果返回给internet上请求连接的客户端，此时代理服务器对外就表现为一个服务器。1.2. 负载均衡负载均衡，英文名称为Load Balance，是指建立在现有网络结...
2018-05-17 12:55:00
82
转载 Linux基本命令
1、查看当前所在的工作目录pwd2、查看当前系统的时间 date3、查看有谁在线（哪些人登陆到了服务器）who 查看当前在线last 查看最近的登陆历史记录4、ls / 查看根目录下的子节点（文件夹和文件）信息ls -al -a是显示隐藏文件 -l是以更详细的列表形式显示5、切换目录cd /home6、创建文件夹mkdir aaa 这是相对...
2018-05-14 21:49:00
92
转载 主机之间的免密ssh登陆
假如 A 要登陆 B在A上操作： 首先生成密钥对,如下ssh-keygen (提示时，直接回车即可) 再将A自己的公钥拷贝并追加到B的授权列表文件authorized_keys中ssh-copy-id B原理如下图： 转载于:https://www.cnblogs.com/wuyl/p/9038184.html...
2018-05-14 21:10:00
71
转载 import win32api 出现ImportError: DLL load failed 错误的解决方法
执行这条命令后问题解决：pip install pypiwin32转载于:https://www.cnblogs.com/wuyl/p/8531748.html
2018-03-09 00:59:00
1236
转载 vmware下克隆centos
步骤 ： 在vmware下右键-》管理-》克隆-》next-》当前状态克隆-》创建完整克隆-》启动克隆的虚拟机以后eth0不见了，不能上网操作。解决克隆后eth0不见的问题直接修改 /etc/sysconfig/network-script/ifcfg-eth0删掉UUID行和 HWADDR行配置静态地址然后：rm -rf /etc/udev/rules.d/70...
2017-12-14 22:27:00
75
转载 Linux基本网络配置
修改主机名：文件：vi /etc/sysconfig/networkNETWORKING=yes HOSTNAME=wuyl修改ip地址文件：vi /etc/sysconfig/network-scripts/ifcfg-eth0DEVICE=eth0TYPE=EthernetONBOOT=yes #是否开机启用BOOTPROTO=static...
2017-12-14 01:22:00
73
转载 vmware三种网络模式
VMware虚拟机三种联网方法及原理一、Brigde——桥接：默认使用VMnet01、原理：Bridge 桥"就是一个主机，这个机器拥有两块网卡，分别处于两个局域网中，同时在"桥"上，运行着程序，让局域网A中的所有数据包原封不动的流入B，反之亦然。这样，局域网A和B就无缝的在链路层连接起来了，在桥接时，VMWare网卡和物理网卡应该处于同一IP网段，当然要...
2017-12-14 01:08:00
77
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人