- 博客(16)
- 收藏
- 关注
RSS订阅原创 hive快速入门
本文转至 余子越的博客 文章 hive快速入门，欢迎访问yuchaoshui.com 了解更多信息！文章目录一. hive执行流程二. hive登录三. 内部表四. 外部表4.1 外部表使用方法4.2 外部表场景举例五. 分区表六. 分桶表七. 临时表一. hive执行流程HiveQL 通过命令行或者客户端提交，经过 Compiler 编译器，运用 MetaStore 中的元数 据进行类型检测和语法分析，生成一个逻辑方案(Logical Plan)，然后通过优化处理，产生一个 MapReduce 任务
2020-11-24 15:54:16
330
原创 集群内快速同步配置
本文转至 余子越的博客 文章 集群内快速同步配置，欢迎访问yuchaoshui.com 了解更多信息！场景再现在多数集群中，节点的配置必须保持一致，一旦管理节点修改了配置，就需要把配置同步到其他节点，通常情况下是下面这样的，它的缺点是每次都需要写全路径。scp -r /path/conf node1:/path/confscp -r /path/conf node2:/path/confscp -r /path/conf node3:/path/conf解决方法使用 rsync 命令同步
2020-11-22 00:49:40
637
2
原创 Python 函数参数形式
一、位置参数二、默认参数三、可变参数四、关键字参数五、命名关键字参数六、函数参数组合使用七、函数参数类型检查一、位置参数 根据定义的函数的参数位置来判断参数的值。位置参数一旦定义，在调用函数时，就必须传入对应的参数值。def show_info(name, age): print("name: {0}, age: {1}".format(name...
2020-11-22 00:03:46
128
原创 iptables 常用例子总结
本文转至 余子越的博客 ，文章 iptables 常用例子总结，欢迎访问yuchaoshui.com 了解更多信息！ 一、基本原理总结1. 常用的几个链2. 常用的几个表3. 常用的几个处理动作4. 常用检查模式5. 开启转发配置二、本机端口到本机端口重定向1. 场景还原2. 细节实现三、公网 IP 到 本地局域网的 IP 映射1. 场景还原2. 细节...
2018-03-10 14:31:51
1736
原创 CentOS6 iptables 学习总结
本文转至 余子越的博客 ，文章 CentOS6 iptables 学习总结，欢迎访问yuchaoshui.com 了解更多信息！ 一、简介二、对链的理解三、对表的理解四、数据包传输的过程五、链和表的关系六、四个表（优先级由高到低）七、五个链八、数据包连接的四种状态九、tcp标志位十、五个基本处理动作十一、数据包的模式检查十二、iptables常用命令十三、常...
2018-03-10 14:26:54
563
原创 Python2 Python3 字符编码总结
本文转至 余子越的博客 ，文章 Python2 Python3 字符编码总结，欢迎访问yuchaoshui.com 了解更多信息！ 一、编码与解码二、ascii、gb2312、gbk、unicode、utf-81、ascii编码2、gb2312编码3、gbk编码4、unicode编码5、utf-8编码三、数据的存在形式四、Python2 字符编码五、pytho...
2018-03-10 14:17:52
222
原创 Python装饰器的来龙去脉
本文转至 余子越的博客 ，文章 Python 装饰器，欢迎访问yuchaoshui.com 了解更多信息！ 一、装饰器二、装饰器实现1. 把函数传递到一个新函数获取2. 更改函数的调用方式3. 使用Python提供的语法糖 @三、双重装饰器四、保留函数元信息五、解除一个装饰器六、有参数的装饰器七、带可选参数的装饰器八、装饰器实现函数参数类型检查九、内置装饰...
2018-03-09 23:25:12
172
原创 Selenium 上手入门
本文转至 余子越的博客 ，文章 Selenium 上手入门，欢迎访问yuchaoshui.com 了解更多信息！ 一、简要介绍二、系统环境三、环境搭建四、上手例子1、网页交互2、高效爬虫五、常用API六、文档汇总1、Driver驱动下载地址2、Selenium 文档地址一、简要介绍 Selenium 是一个优秀的web自动化测试工具，利用...
2018-03-09 23:22:00
395
原创 Python 脚本实现 Menu 菜单
本文转至 余子越的博客 ，文章 Python 脚本实现 Menu 菜单，欢迎访问yuchaoshui.com 了解更多信息！ 一、说明二、代码一、说明 在操作系统上执行某些脚本时，会有一些 menu 选择菜单， 如果用 Python 来实现，可以尝试用下面的思路试试。二、代码#!/usr/bin/env python# _*_ coding:...
2018-03-09 23:19:38
15732
1
原创 Python logging 日志模块总结
本文转至 余子越的博客 ，文章 Python logging 日志模块总结，欢迎访问yuchaoshui.com 了解更多信息！ 一、logging 模块四个概念二、创建日志步骤详细说明1. 创建logger2. 创建handler3. 将handler加入logger4. 在自己应用中使用logger5. 一个完整的日志记录三、 format 可选参数列表四、...
2018-03-09 14:32:11
173
原创 Python 连接 Redis
本文转至 余子越的博客 ，文章 Python 连接 Redis，欢迎访问yuchaoshui.com 了解更多信息！ 一、模块安装二、直接连接三、连接池连接四、pipline机制五、编写成模块导入一、模块安装 使用 redis 模块，使用 pip 安装即可pip install redis二、直接连接import redisr ...
2018-03-09 14:27:53
865
原创 Python 日志模块应用
本文转至 余子越的博客 ，文章 Python 日志模块应用，欢迎访问yuchaoshui.com 了解更多信息！ 一、 简单使用一二、 简单使用二三、多进程多线程写日志四、 结尾 总结一、 简单使用一 直接使用 logging 模块，不手动创建logger。#!/usr/bin/env python# _*_ coding:utf-8 _*_im...
2018-03-09 14:25:03
375
原创 Python 连接 MySQL
本文转至 余子越的博客 ，文章 Python 连接 MySQL，欢迎访问yuchaoshui.com 了解更多信息！ 一、普通 MySQL 连接方法二、使用连接池连接MySQL三、模块导入连接 MySQL一、普通 MySQL 连接方法 使用模块 MySQLdb 普通方式连接。#!/usr/bin/env python# _*_ coding:utf-...
2018-03-09 10:50:06
414
原创 Python 函数参数形式
本文转至 余子越的博客 ，文章 Python 函数参数形式，欢迎访问yuchaoshui.com 了解更多信息！ 一、位置参数二、默认参数三、可变参数四、关键字参数五、命名关键字参数六、函数参数组合使用七、函数参数类型检查一、位置参数 根据定义的函数的参数位置来判断参数的值。位置参数一旦定义，在调用函数时，就必须传入对应的参数值。def sho...
2018-03-09 10:34:58
292
原创 Python 配置文件 ConfigParser 模块
本文转至 余子越的博客 ，文章 Python 配置文件 ConfigParser 模块，欢迎访问yuchaoshui.com 了解更多信息！ 一、配置文件例子二、主程序文件三、主要配置及使用方法 将程序的配置写到一个统一的配置文件时一个好的做法，ConfigParser 模块给出了很好的方法。a) 配置文件中包含一个或多个 section， 每个 sect...
2017-12-11 14:18:25
2143
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人