仰望星空的小随

原创 tmux基本操作

文章目录1. 简介1.1. 会话与进程2. tmux的功能2. tmux的基本使用和常用操作2.1 安装tmux2.2 启动和退出tmux2.3 tmux快捷键使用方式3 . 会话管理和快捷键3.1 创建会话3.2 退出当前会话3.3 进入tmux会话3.4 杀死会话3.5 切换会话3.6 重命名会话3.7 会话常用快捷键快捷键1. 简介Tmux 是一个终端复用器（terminal multiplexer），非常有用，属于常用的开发工具。我们在linux服务器上的工作一般都是通过一个远程的终端连接软

原创 airflow配置相关

airflow配置信息Airflow 1.10+安装整体流程建库、建用户Airflow安装airflow 配置1. 安装Mysql模块2. 用户认证3. 配置邮件服务4、配置Executor5. 修改log地址6. 修改webserver地址7. 可选配置8.celery配置信息9.scheduler配置信息调度程序尝试触发新任务的时间运行airflow安装问题汇总配置任务Airflow 1.10+安装本次安装Airflow版本为1.10+，其需要依赖Python和DB，本次选择的DB为Mysql。本

原创 spark操作dataframe

1.创建dataframe1.1读取文件来创建dataframefrom pyspark.sql import SparkSession #sparkSession为同统一入口#创建spakr对象spark = SparkSession\ .builder\ .appName('readfile')\ .getOrCreate()# 1.读取csv,parquet等文件文件logFilePath = 'births_train.csv'log_df = spark.

原创 django配置mysql数据库的读写分离

修改数据库的配置文件DATABASES = { 'default': { # 写（主机） 'ENGINE': 'django.db.backends.mysql', # 数据库引擎 'HOST': '192.168.103.158', # 数据库主机 'PORT': 3306, # 数据库端口 'USER': 'admin', # 数据库用户名 'PASSWORD': '111111', # 数据库用户密码

原创 argparse命令行模块详解

这里写自定义目录标题欢迎使用Markdown编辑器传入一个参数操作args字典传入多个参数改变出入参数类型位置参数可选参数（关键字参数）默认值必需参数欢迎使用Markdown编辑器argsparse是python的命令行解析的标准模块，内置于python，不需要安装。这个库可以让我们直接在命令行中就可以向程序中传入参数并让程序运行。传入一个参数新建一个test.py脚本文件，cd到该文件所在的目录下，编写如下脚本内容：import argparseparser = argparse.Argum

原创 git常用命令详解

原创 WebStorm如何缩放代码

打开settings，直接在搜索框中输入change font size 在右侧中的mouse中将change font size打上勾号即可

原创 pycharm导入路径问题

pycharm导入路径问题博主在导入自定义模块式出现模块下有红色波浪线，如下：例如from conf import setting 导入时会从当前目录下找找到youkuClient就不会再往下找了，所以引入模块的路径不能夸路径，否则及就会导致寻找不到模块路径正确的引入方法是：from youkuClient.conf import setting这样就不会报红线的问题了，至于网...

原创 windows10如何将python2和python3添加到环境变量中

windows10如何将python2和python3添加到环境变量中点击我的电脑----->右键‘属性’----->高级系统管理-------->高级-------->环境变量------>新建------->此时输入变量名和变量值强调：变量名命名为：path 变量值就是我们要运行的软件所在的文件夹的路径我们把python2....

原创 Python实现终端显示不同颜色字体和背景颜色

实现过程： 终端的字符颜色是用转义序列控制的，是文本模式下的系统显示功能，和具体的语言无关。 转义序列是以ESC开头,即用\033来完成（ESC的ASCII码用十进制表示是27，用八进制表示就是033）。书写格式： 开头部分：\033[显示方式;前景色;背景色m +结尾部分：\033[0m 注意：开头部分的三个参数：显示方式，前景色，背景色是可选参数，可以只...

原创 Pycharm常用快捷键简介

pycharm常用快捷键1、编辑（Editing）Ctrl + Space    基本的代码完成（类、方法、属性）Ctrl + Alt + Space  快速导入任意类Ctrl + Shift + Enter    语句完成Ctrl + P    参数信息（在方法中调用参数）Ctrl + Q    快速查看文档F1   外部文档Shift + F1    外部文档，进入web文档主页Ctrl + ...

原创 Python之fromkeys、enumerate用法

一、fromkeys的用法简述：fromkeys是创造一个新的字典。就是事先造好一个空字典和一个列表，fromkeys会接收两个参数，第一个参数为从外部传入的列表，会将列表中的元素循环取出作为字典的key值，另外一个参数是字典的value值，不写所有的key值所对应的value值均为None，写了则为默认的值二、enumerate的用法enumerate()是python的内置函数enumerat...

原创 详解if __name__ == ‘__main__‘:的基本用法

1、详解图一 2、详解图二3、总结：如果我们是直接执行某个.py文件的时候，该文件中那么”__name__ == '__main__'“是True,但是我们如果从另外一个.py文件通过import导入该文件的时候，这时__name__的值就是我们这个py文件的名字而不是__main__。这个功能还有一个用处：调试代码的时候，在”if __name__ == '...

原创 pycharm的强大之处之两个文件代码的比对

1、ctrl+鼠标左键键选中左边选中两个文件,鼠标右键出现会话框，选中compare files第二步：进入比对对话框，可以选择同时进行滚动，也可以选择让一边进行滚动温馨提示：欢迎分享和收藏...