- 博客(13)
- 收藏
- 关注
RSS订阅
原创 hadoop学习总目录
更新中...一、linux和高并发1.1 linux下软件简单安装点此链接1.2 linux下设置帮助文件为中文点此链接1.3 linux脚本编程基础点此链接1.4 网络编程——1、协议基础点此链接1.5 网络编程——2、通信基础点此链接1.6 网络编程——3、服务器基础点此链接1.7 LVS高并发与负载均衡点此链接1.8 nginx...
2019-06-26 18:40:59
296
原创 Hadoop MapReduce wordcount 实例简单介绍
本篇介绍MapReduce wordcount简单实例，在此之前请搭建好hadoop ha高可用环境和myeclipse上hadoop api环境配置，如果没有请参考hadoop ha 高可用搭建和hadoop hdfs的api简单使用。目录一、总体架构二、配置hadoop环境三、wordcount实例编写一、总体架构总体结构如下表所示，即hadoop ha 之上添加了RS...
2019-06-27 12:31:20
403
原创 hadoop hdfs的api简单使用
本篇介绍myeclipse下测试hdfs的操作，本篇是在另一篇博文hadoop ha 高可用搭建的基础上搭建的。目录一、windows下环境配置二、location 连接测试三、hadoop hdfs api 测试一、windows下环境配置1）创建hadoop_home文件夹，在此为D:\Program Files\Hadoop；2）将hadoop-2.6.5.tar...
2019-06-26 18:36:36
1198
原创 hadoop ha 高可用搭建
该ha搭建是在hadoop全分布式基础上搭建，关于hadoop全分布式搭建可以参考另一篇hadoop3分布式环境基础搭建。目录一、高可用简介二、配置hadoop三、zookeeper安装及配置四、namenode节点信息同步五、zookeeper格式化、ha启动及测试一、高可用简介多个namenode，增加namenode增加可用性。ha角色分配如下NN...
2019-06-25 16:32:55
339
原创 hadoop3分布式环境基础搭建
本篇问hadoop3最基础搭建。目录一、hadoop简介二、hadoop3伪分布式搭建2.1 安装及配置2.2 启动2.3测试三、全分布式搭建3.1 node01安装及配置3.2 node02~node04配置3.3 启动3.3测试一、hadoop简介二、hadoop3伪分布式搭建在虚拟机上配置一台hadoop伪分布式环境（一台机器上...
2019-06-23 16:36:19
1834
原创 nginx集群与高并发
本篇介绍nginx，nginx的作用是反向代理和负载均衡。目录一、nginx简介二、nginx安装三、nginx配置3.1 在nginx上部署两个项目3.2 nginx负载均衡四、nginx负载均衡时session问题4.1 安装memcached4.2 配置监听地址4.3 tomcat服务器中添加jar包4.4 tomcat配置4.5 nginx...
2019-06-17 18:36:49
9810
原创 LVS高并发与负载均衡
本篇介绍lvs负载均衡器，并使用keepalived增强lvs的稳定性。目录一、负载均衡模型简介1.1 逻辑模型简介1.2 动态NAT模式实现1.3四层DR（直接路由）模式实现1.4 隧道（ip嵌套ip）模式实现1.5 隐藏VIP（对于后端服务器）的方法二、lvs原理三、lvs-DR模型实验3.1 实验环境介绍3.2实验步骤四、keepalive...
2019-06-16 14:35:00
654
原创 网络编程——3、服务器基础
网络编程——1、协议基础，点击此处。网络编程——2、通信基础，点击此处。网络编程——3、服务器基础，本篇。本篇包括网络编程概述、UDP简介、TFTP简介、TCP编程等，在此之后可以查看另一篇网络通信基础。。目录一、客户端实现二、单进程服务器2.1 单进程实现2.2 单进程非阻塞实现2.3 TCP服务器（select版）2.4 epoll版服务器实现三、多...
2019-06-11 17:14:25
409
原创 网络编程——2、通信基础
网络编程——1、协议基础，点击此处。网络编程——2、通信基础，本篇。网络编程——3、服务器基础，点击此处。本文为网络通信基础。目录一、交换机与集线器二、arp和icmp三、路由器简介四、ip地址与mac地址的不同五、访问网站过程、http服务器、dns服务器配置六、tcp的三次握手、四次挥手6.1 tcp的三次握手6.2 tcp的四次挥手6.3 ...
2019-06-09 17:02:04
336
原创 网络编程——1、协议基础
网络编程——1、协议基础，本篇。网络编程——2、通信基础，点击此处。网络编程——3、服务器基础，点击此处。本篇包括网络编程概述、UDP简介、TFTP简介、TCP编程等。目录一、tcp/ip协议简介二、端口三、IP地址四、MAC地址五、socket简介六、UDP网络通信过程七、模拟QQ聊天-多线程实现八、wireshark抓包工具的使用九、tft...
2019-06-06 17:02:57
477
原创 linux脚本编程基础
本篇为linux脚本编程基础。目录一、bash1.1 bash1.2 source命令和./命令二、文本流及重定向2.1文本流2.2 重定向三、shell变量四、引用五、算术表达式六、添加用户脚本（练习）七、流程控制一、bash1.1 bashbash是一个解释器，可以从1）用户交互输入2）文本文件输入中执行命令。在命令行输入bash命令...
2019-06-05 17:03:13
386
原创 linux下设置帮助文件为中文
本篇设置中文显示和设置帮助文档为中文。1.设置系统默认语言为中文（对应每个shell而言，重启后会变成英文，所以每次都需要执行）echo $LANG输出：en_US.UTF-8 （此时为英文）LANG=zh_CN.UTF-8echo $LANG输出：zh_CN.UTF-8 （此时为中文）2.安装中文支持•yum groupinstall "Chinese Suppo...
2019-06-01 17:27:02
4348
原创 linux下软件常用安装方式（Redhat系列）
本篇介绍linux下的编译安装、rpm安装、yum安装三种软件安装方式。一、编译安装•1，下载源码包•2，解压缩：tar -xzvf filename•3，cd：vi README•4，./configure [可选安装参数] （执行过程中可能出现以下错误，并解决） –检查操作系统 –检查编译环境（如果编译环境缺少gcc，用下面命令安装...
2019-06-01 16:33:13
1569
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人