- 博客(12)
- 收藏
- 关注
原创 HDFS
HDFShadoop三个组件:HDFS MapReduce YarnHDFS是分布式文件系统文件切块,副本存放,元数据目录结构及文件分块位置信息(元数据)的管理由namenode节点承担namenode是HDFS集群主节点,负责维护整个hdfs文件系统的目录树,以及每一个路径(文件)所对应的block块信息(block的id,及所在的datanode服务器)文件的各个block的存...
2019-09-02 08:42:04 103
原创 shell脚本语言
crontab配置service crond start ## 启动服务service crond stop ## 关闭服务service crond restart ## 重启服务service crond reload ## 重新载入配置service crond status ## 查看crontab服务状态service crond start ##...
2019-08-29 20:03:20 102
原创 hadoop集群安装
免密ssh-keygen #获取秘钥ssh-copy-id hadoop1 hadoop2 #发送秘钥 hadoop3ssh hadoop1ssh hadoop2 #连接ssh hadoop3配置hosts文件vim /etc/hosts192.168.72.110 hadoop1192.168.72....
2019-08-28 09:52:53 91
原创 Python(多线程;正则表达式)
多线程线程调度:线程1执行一段,线程2执行一段,线程1接着执行一段,线程2接着执行一段······线程1执行结束,线程2执行结束。def go1(): with cond: #获取/等待cond for i in range(0,10,2): time.sleep(1) print(threading.current...
2019-08-23 18:00:03 228
原创 Python(线程)
线程进程相互独立,线程依赖于进程线程需要抢CPU,谁先抢到谁执行 **Python中使用线程有两种方式:函数或者用类来包装线程对象。1.函数式:调用thread模块中的start_new_thread()函数来产生新线程。 thread.start_new_thread ( function, args[, kwargs] )2.使用Threading模块创建线程,直接从...
2019-08-22 17:31:30 69
原创 Python(管道;队列;进程数据共享)
管道Pipe管道有两端,读端和写端。创建管道,然后从父进程fork出子进程,父进程和子进程拥有共同的读写文件描述符,可以实现子进程写文件,父进程读文件的操作。import multiprocessingdef A(conn): while 1: print('A',conn.recv())if __name__ == "__main__": conn...
2019-08-21 19:03:28 339
原创 Python(代码规范;装饰器;进程)
代码规范缩进四个空格,禁止空格与Tab混用不要使用from xxx import *顺序:标准库–>第三方库–>自定义库: , ;后面跟一个空格,前面无空格数学运算符,比较运算符,逻辑运算符,位运算符前后各一个空格文件结尾留一个空行忌:逐行添加注释,没有一个注释包名、模块名、函数名、方法名全部使用小写,单词间用下划线连接类名使用首字母大写全局变量使用大写自定义的...
2019-08-20 19:23:32 66
原创 Python(面向对象;类;装饰器)
面向对象把一组数据结构和处理它们的方法组成对象(object),把相同行为的对象归纳为类(class),通过类的封装(encapsulation)隐藏内部细节,通过继承(inheritance)实现类的特化(specialization)和泛化(generalization),通过多态(polymorphism)实现基于对象类型的动态分派对象是类的实例类定义类class clas...
2019-08-19 16:50:54 149
原创 Python(模块;字符串;数据结构)
模块__name__属性 - __main__是程序的入口, 当__name__ == __main__的时候, 表示自身调用函数, 不会被其他模块引入global 全局变量匿名函数 格式:lambda 参数1, 参数2: 结果表达式 list = ['zwk','hhahah','apple','internation'] print(sorted(lis...
2019-08-18 16:08:27 90
原创 Python(for循环;while循环;函数)
for循环明确的知道循环的次数或者是要对一个容器进行迭代,使用for循环for 变量 in 容器: #当变量在容器中时,执行语句 语句 循环一直执行,直到变量不在容器中for i in range(): #range可以用来产生一个不变的数值序列 是前闭后开的while循环不知道具体的循环次数的循环结构,使用while循环...
2019-08-15 17:13:40 453
原创 python基础(作业)
作业import randomemile = '[email protected]'password = '123456'for i in range(4): emile1 = input("请输入账号") password1 = input("请输入密码") if emile1 == emile and password1 == password: pri...
2019-08-15 08:28:01 301
原创 Python基础(注释;类型;变量;运算符;if语句)
Python基础注释:解释代码的作用单行注释:使用 #多行注释:使用""" “”"输出hello world print(‘hello world’)数据类型整型 浮点型 字符串型 布尔型(True False) 复数型变量:存储数据的载体&命名规则: 1.由字母、数字、下划线组成 2.不能以数字开...
2019-08-14 19:50:52 78
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人