021.常用模块之os、sys、subprocess

一、os模块

​ os模块是与操作系统交互的一个接口

（一）os模块的用法

os.getcwd()  # 获取当前工作目录，即当前python脚本工作的目录路径
os.chdir('dirname')  # 改变当前脚本工作目录：相当于shell下的cd
os.curdir  # 返回当前目录的字符串名：('.')
os.pardir  # 返回当前目录的父目录的字符串名：('..')
os.makedirs('dirname1/dirname2')  # 可生成多层递归目录
os.removedirs('dirname')  # 若目录为空，则删除，并递归到上一级目录，如若也为空，则删除，依次类推
os.mkdir('dirname')  # 生成单级目录；相当于shell中的mkdir dirname
os.rmdir('dirname')  # 删除单级空目录，若目录不为空则无法删除，报错；相当于shell中的rmdir dirname
os.listdir('dirname')  # 列出指定目录下的所有文件和子目录，包括隐藏文件，并以列表的方式打印
os.remove()  # 删除一个文件
os.rename('oldname','newname') # 重命名文件/目录
os.stat('path/filename')  # 获取文件/目录信息
os.sep  # 输出操作系统特定的路径分隔符，win下为'\\',linux下为'/'
os.linesep  # 输出当前平台使用的行终止符，win下为'\r\n',linux下为'\n'
os.pathsep  # 输出用于分割文件路径的字符串 win下为';',linux下为:空格
os.name  # 输出字符串指示当前使用平台win->'nt'; Linux->'posix'
os.system('bash command')  # 运行shell指令，直接显示。
os.environ  # 获取系统的环境变量
os.path.abspath(path)  返回path规范化的绝对路径
os.path.split(path)  将path分割成目录和文件名二元组返回
os.path.dirname(path)  返回path的目录。其实就是os.path.split(path)的第一个元素
os.path.basename(path)  返回path最后的文件名。如何path以／或\结尾，那么就会返回空值。即os.path.split(path)的第二个元素
os.path.exists(path)  如果path存在，返回True；如果path不存在，返回False
os.path.isabs(path)  如果path是绝对路径，返回True
os.path.isfile(path)  如果path是一个存在的文件，返回True。否则返回False
os.path.isdir(path)  如果path是一个存在的目录，则返回True。否则返回False
os.path.join(path1[, path2[, ...]])  将多个路径组合后返回，第一个绝对路径之前的参数将被忽略
os.path.getatime(path)  返回path所指向的文件或者目录的最后存取时间
os.path.getmtime(path)  返回path所指向的文件或者目录的最后修改时间
os.path.getsize(path) 返回path的大小

在Linux和Mac平台上，该函数会原样返回path，在windows平台上会将路径中所有字符转换为小写，并将所有斜杠转换为饭斜杠。
>>> os.path.normcase('c:/windows\\system32\\')   
'c:\\windows\\system32\\'   
   

规范化路径，如..和/
>>> os.path.normpath('c://windows\\System32\\../Temp/')   
'c:\\windows\\Temp'   

>>> a='/Users/jieli/test1/\\\a1/\\\\aa.py/../..'
>>> print(os.path.normpath(a))
/Users/jieli/test1

（二）os处理路径

os路径处理
#方式一：不推荐使用
import os
#具体应用
import os,sys
possible_topdir = os.path.normpath(os.path.join(
    os.path.abspath(__file__),
    os.pardir, #上一级
    os.pardir,
    os.pardir
))
sys.path.insert(0,possible_topdir)


#方式二：推荐使用
os.path.dirname(os.path.dirname(os.path.dirname(os.path.abspath(__file__))))

二、sys模块

sys.argv  # 命令行参数list，第一个元素是程序本身路径
sys.exit(n)  # 退出程序，正常退出时使用exit(0)
sys.version  # 获取python解释器版本的信息
sys.maxint  # 最大int值
sys.path  # 返回模块的搜索路径，PYTHONPATH环境变量的值
sys.platform  # 返回操作系统平台名称

# 实现命令行输入参数后就能用的copy工具
import sys
# 使用  命令行界面，python3 本文件的结对路径 源文件的结对路径 目标文件的绝对路径
src_file = sys.argv[1]
dst_file = sys.argv[2]
with open(src_file, mode='rb') as f1, open(dst_file, mode='wb') as f2:
    for line in f1:
        f2.write(line)

# 实现打印进度条
#=========知识储备==========
#进度条的效果
[#             ]
[##            ]
[###           ]
[####          ]

#指定宽度
print('[%-15s]' %'#')
print('[%-15s]' %'##')
print('[%-15s]' %'###')
print('[%-15s]' %'####')

#打印%
print('%s%%' %(100)) #第二个%号代表取消第一个%的特殊意义

#可传参来控制宽度
print('[%%-%ds]' %50) #[%-50s]
print(('[%%-%ds]' %50) %'#')
print(('[%%-%ds]' %50) %'##')
print(('[%%-%ds]' %50) %'###')


#=========实现打印进度条函数==========
import sys
import time

def progress(percent,width=50):
    if percent >= 1:
        percent=1
    show_str=('[%%-%ds]' %width) %(int(width*percent)*'#')
    print('\r%s %d%%' %(show_str,int(100*percent)),file=sys.stdout,flush=True,end='')


#=========应用==========
data_size=1025
recv_size=0
while recv_size < data_size:
    time.sleep(0.1) #模拟数据的传输延迟
    recv_size+=1024 #每次收1024

    percent=recv_size/data_size #接收的比例
    progress(percent,width=70) #进度条的宽度70

三、subprocess模块

import  subprocess

'''
sh-3.2# ls /Users/egon/Desktop |grep txt$
mysql.txt
tt.txt
事物.txt
'''

res1 = subprocess.Popen('ls /Users/jieli/Desktop',shell=True,stdout=subprocess.PIPE)
res = subprocess.Popen('grep txt$',shell=True,stdin=res1.stdout,
                 stdout=subprocess.PIPE)

print(res.stdout.read().decode('utf-8'))


#等同于上面,但是上面的优势在于,一个数据流可以和另外一个数据流交互,可以通过爬虫得到结果然后交给grep
res1=subprocess.Popen('ls /Users/jieli/Desktop |grep txt$',shell=True,stdout=subprocess.PIPE)
print(res1.stdout.read().decode('utf-8'))


#windows下:
# dir | findstr 'test*'
# dir | findstr 'txt$'
import subprocess
res1 = subprocess.Popen(r'dir C:\Users\Administrator\PycharmProjects\test\函数备课',shell = True,stdout=subprocess.PIPE)
res=subprocess.Popen('findstr test*',shell=True,stdin=res1.stdout,
                 stdout=subprocess.PIPE)

print(res.stdout.read().decode('gbk')) #subprocess使用当前系统默认编码，得到结果为bytes类型，在windows下需要用gbk解码