Python编程中常用的12种基础知识总结:正则表达式替换,遍历目录方法,列表按列排序、去重,字典排序,字典、列表、字符串互转,时间对象操作,命令行参数解析(getopt),print 格式化输出,进制转换,Python调用系统命令或者脚本,Python 读写文件。
1、正则表达式替换
目标: 将字符串line中的 overview.gif 替换成其他字符串
1
2
3
4
5
6
7
8
9
10
11
|
>>> line =
'<IMG ALIGN="middle" SRC=\'#\'" /span>
>>> mo=re.compile(r'(?<=SRC=)"([\w+\.]+)"',re.I)
>>> mo.sub(r'"\1****"',line)
'<IMG ALIGN="middle" SRC=\'#\'" /span>
>>> mo.sub(r'replace_str_\1',line)
'<IMG ALIGN="middle" replace_str_overview.gif BORDER="0" ALT="">'< /span>
>>> mo.sub(r'"testetstset"',line)
'<IMG ALIGN="middle" SRC=\'#\'" /span>
|
注意: 其中 \1 是匹配到的数据,可以通过这样的方式直接引用
2、列表按列排序(list sort)
如果列表的每个元素都是一个元组(tuple),我们要根据元组的某列来排序的化,可参考如下方法
下面例子我们是根据元组的第2列和第3列数据来排序的,而且是倒序(reverse=True)
1
2
3
4
5
6
7
8
9
10
11
12
|
>>> a =
[('2011-03-17', '2.26', 6429600, '0.0'), ('2011-03-16', '2.26', 12036900, '-3.0'),
('2011-03-15', '2.33', 15615500,'-19.1')]
>>> print
a[0][0]
2011-03-17
>>> b =
sorted(a, key=lambda
result: result[1],reverse=True)
>>> print
b
[('2011-03-15', '2.33', 15615500, '-19.1'), ('2011-03-17', '2.26', 6429600, '0.0'),
('2011-03-16', '2.26', 12036900, '-3.0')]
>>> c =
sorted(a, key=lambda
result: result[2],reverse=True)
>>> print
c
[('2011-03-15', '2.33', 15615500, '-19.1'), ('2011-03-16', '2.26', 12036900, '-3.0'),
('2011-03-17', '2.26', 6429600, '0.0')]
|
3、字典排序(dict sort)
一般来说,我们都是根据字典的key来进行排序,但是我们如果想根据字典的value值来排序,就使用如下方法
1
2
3
4
5
|
>>> from
operator import
itemgetter
>>> aa =
{"a":"1","sss":"2","ffdf":'5',"ffff2":'3'}
>>> sort_aa =
sorted(aa.items(),key=itemgetter(1))
>>> sort_aa
[('a', '1'), ('sss', '2'), ('ffff2', '3'), ('ffdf', '5')]
|
从上面的运行结果看到,按照字典的value值进行排序的
4、列表去重(list uniq)
有时候需要将list中重复的元素删除,就要使用如下方法
1
2
3
4
5
6
7
|
>>> lst=
[(1,'sss'),(2,'fsdf'),(1,'sss'),(3,'fd')]
>>> set(lst)
set([(2, 'fsdf'), (3, 'fd'), (1, 'sss')])
>>>
>>> lst =
[1, 1, 3, 4, 4, 5, 6, 7, 6]
>>> set(lst)
set([1, 3, 4, 5, 6, 7])
|
5、字典,列表,字符串互转
以下是生成数据库连接字符串,从字典转换到字符串
1
2
3
4
5
|
>>> params =
{"server":"mpilgrim", "database":"master", "uid":"sa", "pwd":"secret"}
>>> ["%s=%s"
%
(k, v) for
k, v in
params.items()]
['server=mpilgrim', 'uid=sa', 'database=master', 'pwd=secret']
>>> ";".join(["%s=%s"
%
(k, v) for
k, v in
params.items()])
'server=mpilgrim;uid=sa;database=master;pwd=secret'
|
下面的例子 是将字符串转化为字典
1
2
3
4
5
6
|
>>> a =
'server=mpilgrim;uid=sa;database=master;pwd=secret'
>>> aa =
{}
>>> for
i in
a.split(';'):aa[i.split('=',1)[0]] =
i.split('=',1)[1]
...
>>> aa
{'pwd': 'secret', 'database': 'master', 'uid': 'sa', 'server': 'mpilgrim'}
|
6、遍历目录方法
在某些时候,我们需要遍历某个目录找出特定的文件列表,可以通过os.walk方法来遍历,非常方便
1
2
3
4
5
6
7
8
9
10
11
|
import
os
fileList =
[]
rootdir =
"/data"
for
root, subFolders, files in
os.walk(rootdir):
if
'.svn'
in
subFolders: subFolders.remove('.svn') #
排除特定目录
for
file
in
files:
if
file.find(".t2t") !=
-1:#
查找特定扩展名的文件
file_dir_path =
os.path.join(root,file)
fileList.append(file_dir_path)
print
fileList
|
7、时间对象操作
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
|
将时间对象转换成字符串
>>> import
datetime
>>> datetime.datetime.now().strftime("%Y-%m-%d %H:%M")
'2011-01-20 14:05'
时间大小比较
>>> import
time
>>> t1 =
time.strptime('2011-01-20 14:05',"%Y-%m-%d %H:%M")
>>> t2 =
time.strptime('2011-01-20 16:05',"%Y-%m-%d %H:%M")
>>> t1 > t2
False
>>> t1 < t2
True
时间差值计算,计算8小时前的时间
>>> datetime.datetime.now().strftime("%Y-%m-%d %H:%M")
'2011-01-20 15:02'
>>> (datetime.datetime.now() -
datetime.timedelta(hours=8)).strftime("%Y-%m-%d %H:%M")
'2011-01-20 07:03'
将字符串转换成时间对象
>>> endtime=datetime.datetime.strptime('20100701',"%Y%m%d")
>>> type(endtime)
<type
'datetime.datetime'>
>>> print
endtime
2010-07-01
00:00:00
将从 1970-01-01
00:00:00
UTC
到现在的秒数,格式化输出
>>> import
time
>>> a =
1302153828
>>> time.strftime("%Y-%m-%d %H:%M:%S",time.localtime(a))
'2011-04-07 13:23:48'
|
8、命令行参数解析(getopt)
通常在编写一些日运维脚本时,需要根据不同的条件,输入不同的命令行选项来实现不同的功能 在Python中提供了getopt模块很好的实现了命令行参数的解析,下面距离说明。请看如下程序:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
|
#!/usr/bin/env python
# -*- coding: utf-8 -*-
import
sys,os,getopt
def
usage():
print
'''''
Usage: analyse_stock.py [options...]
Options:
-e : Exchange Name
-c : User-Defined Category Name
-f : Read stock info from file and save to db
-d : delete from db by stock code
-n : stock name
-s : stock code
-h : this help info
test.py -s haha -n "HA Ha"
'''
try:
opts, args =
getopt.getopt(sys.argv[1:],'he:c:f:d:n:s:')
except
getopt.GetoptError:
usage()
sys.exit()
if
len(opts) ==
0:
usage()
sys.exit()
for
opt, arg in
opts:
if
opt in
('-h', '--help'):
usage()
sys.exit()
elif
opt ==
'-d':
print
"del stock %s"
%
arg
elif
opt ==
'-f':
print
"read file %s"
%
arg
elif
opt ==
'-c':
print
"user-defined %s "
%
arg
elif
opt ==
'-e':
print
"Exchange Name %s"
%
arg
elif
opt ==
'-s':
print
"Stock code %s"
%
arg
elif
opt ==
'-n':
print
"Stock name %s"
%
arg
sys.exit()
|
9、print 格式化输出
9.1、格式化输出字符串
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
|
截取字符串输出,下面例子将只输出字符串的前3个字母
>>> str="abcdefg"
>>> print
"%.3s"
%
str
abc
按固定宽度输出,不足使用空格补全,下面例子输出宽度为10
>>> str="abcdefg"
>>> print
"%10s"
%
str
abcdefg
截取字符串,按照固定宽度输出
>>> str="abcdefg"
>>> print
"%10.3s"
%
str
abc
浮点类型数据位数保留
>>> import
fpformat
>>> a=
0.0030000000005
>>> b=fpformat.fix(a,6)
>>> print
b
0.003000
对浮点数四舍五入,主要使用到round函数
>>> from
decimal import
*
>>> a ="2.26"
>>> b ="2.29"
>>> c =
Decimal(a) -
Decimal(b)
>>> print
c
-0.03
>>> c /
Decimal(a) *
100
Decimal('-1.327433628318584070796460177')
>>> Decimal(str(round(c /
Decimal(a) *
100, 2)))
Decimal('-1.33')
|
9.2、进制转换
有些时候需要作不同进制转换,可以参考下面的例子(%x 十六进制,%d 十进制,%o 十进制)
1
2
3
|
>>> num =
10
>>> print
"Hex = %x,Dec = %d,Oct = %o"
%(num,num,num)
Hex
=
a,Dec =
10,Oct
=
12
|
10、Python 捕获用户 Ctrl+C ,Ctrl+D 事件
有些时候,需要在程序中捕获用户键盘事件,比如ctrl+c退出,这样可以更好的安全退出程序
1
2
3
4
5
6
|
try:
do_some_func()
except
KeyboardInterrupt:
print
"User Press Ctrl+C,Exit"
except
EOFError:
print
"User Press Ctrl+D,Exit"
|
11、Python调用系统命令或者脚本
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
|
使用 os.system() 调用系统命令 , 程序中无法获得到输出和返回值
>>> import
os
>>> os.system('ls -l /proc/cpuinfo')
>>> os.system("ls -l /proc/cpuinfo")
-r--r--r--
1
root root 0
3
月 29
16:53
/proc/cpuinfo
0
使用 os.popen() 调用系统命令, 程序中可以获得命令输出,但是不能得到执行的返回值
>>> out =
os.popen("ls -l /proc/cpuinfo")
>>> print
out.read()
-r--r--r--
1
root root 0
3
月 29
16:59
/proc/cpuinfo
使用 commands.getstatusoutput() 调用系统命令, 程序中可以获得命令输出和执行的返回值
>>> import
commands
>>> commands.getstatusoutput('ls /bin/ls')
(0, '/bin/ls')
|
12、Python 读写文件
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
|
一次性读入文件到列表,速度较快,适用文件比较小的情况下
track_file =
"track_stock.conf"
fd =
open(track_file)
content_list =
fd.readlines()
fd.close()
for
line in
content_list:
print
line
逐行读入,速度较慢,适用没有足够内存读取整个文件(文件太大)
fd =
open(file_path)
fd.seek(0)
title =
fd.readline()
keyword =
fd.readline()
uuid =
fd.readline()
fd.close()
写文件 write 与 writelines 的区别
Fd.write(str) :
把str写到文件中,write()并不会在str后加上一个换行符
Fd.writelines(content) :
把content的内容全部写到文件中,原样写入,不会在每行后面加上任何东西
|