- 博客(14)
- 收藏
- 关注
原创 Hive Day 01
Hive 安装 步骤 1.启动MySQL,并进入MySQL 2.创建hive用户 mysql>create user 'hive' identified by 'hive'; 3.进行授权 mysql>GRANT ALL PRIVILEGES ON *.* TO 'hive'@'%' IDENTIFIED BY 'hive' WITH GRANT OPTION; mysql>...
2019-09-24 20:30:47 198
原创 MySQL Day 01
MySQL单实例安装 1.创建MySQL虚拟用户:useradd -s /sbin/nologin mysql 2.创建存放软件的文件夹:mkdir /application 3.yum install -y lrzsz 将压缩包上传 rz 4.解压 压缩包到文件夹中:tar xf mysql-5.5.62-linux-glibc2.12-x86_64.tar.gz -C /applicatio...
2019-09-18 20:22:13 253
原创 MapReduce 两个例子
字母计数问题 //Map阶段将数据转化为输出数据类型 public class WordCountMap extends Mapper<LongWritable, Text,Text, IntWritable> { @Override protected void map(LongWritable key, Text value, Context context) th...
2019-09-17 20:51:47 223
原创 Hadoop Day 02
HDFS概念 1.HDFS:Hadoop分布式文件存储系统。 HDFS是一个高度容错性的系统。 2.HDFS的概念和特性 (1)文件系统:存储文件——目录树定位文件 (2)分布式:多服务器联合实现实现功能 特性 (1)分块存储:大小通过配置参数规定,默认大小是128M (2)通过路径访问文件:统一的抽象目录树 (3)目录结构及文件分块位置信息(元数据)的管理——namenode节点承担,namen...
2019-09-02 17:12:00 140
原创 Linux Command
简单命令 Linux 文件系统 命令 作用 / 整个文件的一个顶层目录 pwd 查看当前所在的工作目录的全路径 date 查看当前系统的时间 who 查看当前谁在线 last 查看最近的登陆历史记录 shutdown 关机重启(必须root用户) reboot 立刻重启 clear 清屏 echo 相当于输出,相当于java中System.out.p...
2019-08-28 17:52:39 301
原创 Python Day 07
多线程 1.函数创建多线程 例1 创建多线程,需要主线程存在 import _thread import time def go(): for i in range(5): print(i,"--------") for i in range(5):#线程执行五次 _thread.start_new_thread(go,()) for j in range(6):#主线程卡顿6秒,主线程等...
2019-08-22 20:39:38 87
原创 Python Day 06
多进程 1.导入 import multiprocessing 2.创建子进程调用函数 除了创建的子进程和子进程调用函数,其他的都是脚本主进程 # 创建子进程调用函数 函数 args返回元组形式 p = multiprocessing.Process(target=info,args=('hello',)) p.start()#启动进程 p.join()#...
2019-08-21 19:36:07 121
原创 Python Day 05
Python进阶 1.PEP8编码规范:缩进4个空格 = 1个tab 行长:80防止单行逻辑过于复杂 2.import :不要使用 (from xxx import *) 单行内不 import 多个库 顺序:标准库,第三方库,自定义库 3.空格:(:,;)后跟空格,前面无空格 名字(二元操作符前后各一个空格) 符号 数学运算符 + - * / // = & ...
2019-08-20 17:58:29 122
原创 Python Day 04
面向对象编程基础 1.类和对象 定义类: # 标识 类名 object class class_name(object):#class_name是类名 def __init__(self): self.a = 100 def A(self): print(self.a) if __name__ == "__main__": a = class_name()#相当于走初始化_...
2019-08-19 19:15:18 202 2
原创 Python Day 03
函数参数 1.不定长参数:*args,**kwargs def Cs(*args,**kwargs): print(kwargs): Cs() 2.哨兵值应用: sum_1 = 0 num_1 = 0 while num_1 != 'stop':#设置哨兵值 num_1 = input('请输入值:') if num_1 != 'stop': sum_1 += int(num_1) ...
2019-08-17 13:20:30 161
原创 Python Day 02
循环结构 1.for-in 循环:这是一个执行循环次数或是对一个容器进行迭代进行使用 #例1 for循环实现1~100求和 num = 0 for i in range(101): sum +=i print(num) 说明:range可以用来产生一个不变的数值序列,而产生的序列用在循环中 (1)range(101)可以产生一个0到100的整数序列。 (...
2019-08-15 18:02:48 142
原创 Python Day 01
Python Day 01 vscode 运行 创建文件 day01.py 在终端运行python文件 1.print(‘Hello world’) 在python中除了0和none, 其他全部代表ture python中注释使用‘# ,""" “”". 指令和程序 2.变量和类型: (1)数据类型:整型 int;浮点型 float; 字符串型 chr;布尔型 Ture Flase;复数型 ...
2019-08-14 17:47:33 148
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人