- 博客(26)
- 收藏
- 关注
原创 iptables
1.iptables包括四种表filter表:包过滤nat表:网络地址转换mangle表:包重构(修改)raw表:数据跟踪处理2.链filter表:INPUT ,FORWARD ,OUTPUTnat表:PREROUTING ,OUTPUT ,POSTROUTINGmangle表:PREROUTING,INPUT,FORWARD,OUTPUT,POSTROUTING每一条链中可以有一 条或数条规则,...
2018-06-27 08:40:36
231
转载 linux基本命令——ulimit
ulimit命令用来限制系统用户对shell资源的访问[root@master ~]# ulimit -a #显示目前资源限制的设定core file size (blocks, -c) 0 #core文件的最大值为100 blocks。data seg size (kbytes, -d) unlimited #进程的数据段可以...
2018-06-26 11:38:31
405
原创 Live datanodes节点显示不全
问题描述:一共添加了6个slave,但是活跃节点只显示4个hadoop dfsadmin -report #显示节点的情况jps查看一下,发现datanode都开启了浏览器也只显示4个问题解决配置文件hdfs-site.xml中<property> <name>dfs.datanode.data.dir</name> <...
2018-06-22 15:17:40
1907
2
原创 Hadoop环境搭建实验
一、准备工作master:172.17.24.56slave1:172.17.24.183slave2:172.17.24.184slave3:172.17.24.185修改主机名时间同步修改/etc/hosts,通过主机名相互ping通ssh 无密钥登录在master上配置ansible二、环境搭建1.四台机器添加hadoop账号useradd hadoopecho "123456"|pass...
2018-06-22 11:45:36
3587
原创 Centos 7运用ntpdate同步时间
1.安装yum -y install ntpdate2.ntpdate asia.pool.ntp.org3.修改时区为上海东八区 cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
2018-06-12 20:52:26
2782
原创 Hadoop之HDFS
1.Hadoop的构成(1)分布式存储系统HDFS提供了高可靠性,高扩展性和高吞吐率的数据存储服务(2)资源管理系统YARN负责集群资源的统一管理和调度(3)分布式计算框架具有易于编程,高容错性和高扩展性等优点2.HDFS运行在硬件上的分布式文件系统包括:NameNode,DataNode,Client(1)NameNode 用于存储生成文件系统的元数据(2)DataNode用于存储实际的数据,将...
2018-06-12 20:29:22
174
原创 实现ssh无密钥登录
1. 生成密钥文件和私钥文件ssh-keygen -t rsa #使用rsa方式加密 一路回车结果如下图所示:2.将.pub文件拷贝到目标主机ssh-copy-id -i /root/.ssh/id_rsa.pub root@目标主机IP...
2018-06-12 19:57:07
1209
原创 Oracle的各种表连接
以emp,dept表为例说明SQL> select * from emp; EMPNO ENAME JOB MGR HIREDATE SAL COMM DEPTNO---------- ---------- --------- ---------- --------- ---------- ---------- -------...
2018-06-08 17:24:33
9362
原创 oracle基本语句(一)
1.linux下的Oracle(1)nolog方式登录安全性较高sqlplus /nolog(2)连接到Oracle空闲历程conn / as sysdba(3)启动/关闭数据库SQL> startup shutdown(4)Scott登录SQL> @$ORACLE_HOME/rdbms/admin/utlsampl.sqlSQL> conn scott/tige...
2018-06-08 15:27:55
207
原创 Centos7搭建http服务器
1.安装yum –y install httpd2.配置文件/etc/httpd/conf/httpd.conf监听端口默认80##Listen 12.34.56.78:80Listen 80HTML文件位置#DocumentRoot "/var/www/html"#3.查看端口占用情况firewall-cmd --query-port=80/tcpfirewall-cmd --...
2018-06-08 14:07:42
5435
1
原创 expect工具 4.3
expect是建立在tcl基础上的一个工具,它可以让一些需要交互的任务自动化完成。安装 yum –y install expect工作原理:首先用spawn开启一个会话,然后用expect-send执行交互操作spawn后面跟上一个命令操作,表示开启一个会话。expect等待输出特定的字符串,然后用send发送交互字符串。例:expect “*assword”提示为”username@host’s...
2018-04-08 23:47:15
143
原创 计算机网络基础---传输介质 4.2
传输介质(传输媒质或传输媒介)网络连接收发双方的物理通路,也是通信中实际传送信息的载体传输介质形态的不同分为:有线传输介质:双绞线,同轴电缆,光纤无线传输介质:激光,无线电,红外线,通信卫星(1)双绞线是局域网最基本的传输介质,最长为100米安装中继器最长可达500米非屏蔽双绞线:标准568B:(1)白橙(2)橙(3)白绿(4)蓝(5)白蓝(6)绿(7)白棕(8)棕标准568A:(1)白绿(2)绿...
2018-04-07 21:37:55
763
原创 计算机网络基础---网络划分 4.1
计算机网络的划分:(1)按照拓扑结构划分:<1>网络节点: 访问节点:端节点,主要起到信源和新宿的作用,如用户主机和终端 转接节点:中间节点,数据交换和转接,通讯功能,如路由器 混合节点:全能节点,如服务器<2>连接这些节点的通讯链路:两个节点之间传递信息和数据的线路,如双绞线,同轴电缆 物理链路:点到点的链路,没有任何的转接节点 逻辑链路:在...
2018-04-07 21:35:09
680
原创 考试总结 3.30
1.用什么命令显示当前目录?echo ${pwd}2.将当前目录下的myftp.tar.gz解压到/tmp下?tar xvzfmyftp.tar.gz –C /tmp关于tar每列的补充:-C 解压到指定目录-c 建立新的存档-A与已有的存档合并-d比较存档与当前文档的不同之处-r附加到存档结尾-f指定存档或设备-w每个操作都要求确认-W写入存档后进行校验3.>>>print “...
2018-04-04 14:59:31
222
原创 计算机网络—TCP协议 3.24
TCP协议TCP(Transmission Control Protocol)传输控制协议,是一种面向连接的,可靠的,全双工基于字节流的传输层通信协议。是主机对主机层的传输控制协议。1.三次握手位码即tcp标志位,有6中标示:SYN (synchronous) 建立联机ACK(acknowledgement) 确认PSH(push) 传送FIN(Finish) 结束RST(reset) 重置URG...
2018-04-03 20:52:54
232
原创 正则表达式grep,sed,awk 3.23
1.通配符 * 匹配字符0个或多个 ?匹配任意一个字符 [..] 匹配括号中出现的任意一个字符 [!..] 不匹配括号内出现的任意一个字符2.基本正则表达式元字符 (1)字符匹配 . 匹配任意单个字符 [] 匹配指定范围内任意单个字符 [^] 匹配指定范围外的任意单个字符 [[:digit:]] 数字 [[:lower:]] 小写 ...
2018-04-02 18:48:19
162
原创 Python基础——函数 3.20
1. 创建函数(1) [函数名] (参数1,参数2):程序体例:def my abs(x): If x>=0: return x else: return –x如果没有return 语句,函数执行完毕也会返回结果,结果为Nonereturn None可以简写为returnpython的函数返回多值就是返回一个tuple ...
2018-03-22 23:13:58
226
原创 Shell脚本语法3.21
1.数值运算 表达式中,数字和运算符之间要有空格,出现在语句中要加反引号 a=11 b=22(1) 加:dd=$(exper $a + $b)运算符两边必须有空格 Let c=$a+$b c=$[$a+$b] c=$(($a+$b)) c=`expr $a + $b`乘:expr 1 \* 3例:echo `expr 1 + 3`(2) 两种...
2018-03-21 21:32:12
262
原创 权限管理 3.19
1.UID与GID每一个登录者至少有两个id: 使用者id:UID 群组id:GID2.用户登录主机做的工作: (1)找/etc/passwd中是否有帐号,若有则读出UID,GID,家目录与shell配置(2)在/etc/shadow中找到对应的帐号与UID,核对口令(3)进入shell控管3.三种文件结构(1)/etc/passwd 每一行代表一个帐号帐号名称—口令[x]—UID—GID—用...
2018-03-20 23:49:58
121
原创 Shell基础及变量3.20
1.Shell在Linux系统中的位置 用户请求 Shell-->Linux内核--->硬件2.Shell命令 (1) 历史命令 history[-raw] histfiles (默认保存1000条,可以在/etc/profile中修改)n 列出最近使用的n条命令,包括history n-c 将所有的history内容全部清除-a 将目前新增的history命令j加入histf...
2018-03-20 23:49:48
126
原创 软件包管理 3.15
一、RPM软件包管理 知道问题解决方案 1.软件包分类: (1)源码包 脚本安装包 (2) 二进制包(已编译的项目,包含功能模块) 2.软件包的依赖性 (1)a.XXX.rpm-->b.xxx.rpm-->c.xxx.rpm 安装a要先安装b,安装b要先装C (2)a-->b-->c-->a 循环依赖 三个包一起装 ...
2018-03-15 19:28:03
135
原创 Python基础(一)3.14
1.pyCharm新建项目,提示没有解释器解决方法 pycharm 运行python代码的快捷键 ctrl+shift+F10 2.自动添加文件头注释 File->settings->Editor->File and Code Templates->Python Script 在Python Script中添加注释 #!/usr/bin/env python ...
2018-03-14 20:54:47
702
原创 linux基本命令(二)3.13
1.文件搜索 find [搜索范围] [搜索条件]find /etc/ -name passwd 按名字搜索-iname 忽略大小写-size 按大小 (+n 大于 -n小于 n 等于)-user 所有者查找-group 按所有组查找-amin 访问时间(分钟)-atime (天)-cnewer [file]-cmin 文件属性-mmin 文件内容find /etc -cmin -5 在/etc...
2018-03-13 20:46:49
163
原创 第一章 linux的安装及命令(一)
linux三个基本思想:1.一切都是文件对所有文件(目录,字符设备,块设备,套接字,打印机)操作,读写都可以用fopen(),fclose,fwrite,fread等函数处理。屏蔽了硬件的区别,所有设备抽象成文件,提供统一的接口给用户2.由短小精悍单一功能的程序组成3.组合小程序完成大任务。Vmplayer 挂载 linux 镜像静态库:在编译时,将源码拷贝到调用位置,用几次拷几次,代码量大(.a...
2018-03-12 20:52:34
156
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人