python clips常用功能代码片段

convert strings to dict

my_dict = {}
for line in lines.splitlines():
    elements = re.split(r"\s*:\s*", line)
    if len(elements) != 2:
        continue

    my_dict[str(elements[0]).strip()] = str(elements[1]).strip()

 

#
# -*- coding: UTF-8 -*-

#一些简单实用、常用的Python脚本短片
'''
异常处理
捕捉异常可以使用try/except语句。

try/except语句用来检测try语句块中的错误，从而让except语句捕获异常信息并处理。

如果你不想在异常发生时结束你的程序，只需在try里捕获它。

语法：

以下为简单的try....except...else的语法：

try:
<语句>        #运行别的代码
except <名字>：
<语句>        #如果在try部份引发了'name'异常
except <名字>，<数据>:
<语句>        #如果引发了'name'异常，获得附加的数据
else:
<语句>        #如果没有异常发生
try的工作原理是，当开始一个try语句后，python就在当前程序的上下文中作标记，这样当异常出现时就可以回到这里，try子句先执行，接下来会发生什么依赖于执行时是否出现异常。

如果当try后的语句执行时发生异常，python就跳回到try并执行第一个匹配该异常的except子句，异常处理完毕，控制流就通过整个try语句（除非在处理异常时又引发新的异常）。
如果在try后的语句里发生了异常，却没有匹配的except子句，异常将被递交到上层的try，或者到程序的最上层（这样将结束程序，并打印默认的出错信息）。
如果在try子句执行时没有发生异常，python将执行else语句后的语句（如果有else的话），然后控制流通过整个try语句。
实例
下面是简单的例子，它打开一个文件，在该文件中的内容写入内容，且并未发生异常：

#!/usr/bin/python
# -*- coding: UTF-8 -*-

try:
    fh = open("testfile", "w")
    fh.write("这是一个测试文件，用于测试异常!!")
except IOError:
    print "Error: 没有找到文件或读取文件失败"
else:
    print "内容写入文件成功"
    fh.close()
以上程序输出结果：

$ python test.py 
内容写入文件成功
$ cat testfile       # 查看写入的内容
这是一个测试文件，用于测试异常!!
实例
下面是简单的例子，它打开一个文件，在该文件中的内容写入内容，但文件没有写入权限，发生了异常：

#!/usr/bin/python
# -*- coding: UTF-8 -*-

try:
    fh = open("testfile", "w")
    fh.write("这是一个测试文件，用于测试异常!!")
except IOError:
    print "Error: 没有找到文件或读取文件失败"
else:
    print "内容写入文件成功"
    fh.close()
    
使用except而带多种异常类型
你也可以使用相同的except语句来处理多个异常信息，如下所示：

try:
    正常的操作
   ......................
except(Exception1[, Exception2[,...ExceptionN]]]):
   发生以上多个异常中的一个，执行这块代码
   ......................
else:
    如果没有异常执行这块代码

try-finally 语句
try-finally 语句无论是否发生异常都将执行最后的代码。

try:
<语句>
finally:
<语句>    #退出try时总会执行
raise
实例
#!/usr/bin/python
# -*- coding: UTF-8 -*-

try:
    fh = open("testfile", "w")
    fh.write("这是一个测试文件，用于测试异常!!")
finally:
    print "Error: 没有找到文件或读取文件失败"
如果打开的文件没有可写权限，输出如下所示：

$ python test.py 
Error: 没有找到文件或读取文件失败
同样的例子也可以写成如下方式：

#!/usr/bin/python
# -*- coding: UTF-8 -*-

try:
    fh = open("testfile", "w")
    try:
        fh.write("这是一个测试文件，用于测试异常!!")
    finally:
        print "关闭文件"
        fh.close()
except IOError:
    print "Error: 没有找到文件或读取文件失败"
当在try块中抛出一个异常，立即执行finally块代码。

finally块中的所有语句执行后，异常被再次触发，并执行except块代码。

参数的内容不同于异常。

异常的参数
一个异常可以带上参数，可作为输出的异常信息参数。

你可以通过except语句来捕获异常的参数，如下所示：

try:
    正常的操作
   ......................
except ExceptionType, Argument:
    你可以在这输出 Argument 的值...
变量接收的异常值通常包含在异常的语句中。在元组的表单中变量可以接收一个或者多个值。

元组通常包含错误字符串，错误数字，错误位置。

实例
以下为单个异常的实例：

#!/usr/bin/python
# -*- coding: UTF-8 -*-

# 定义函数
def temp_convert(var):
    try:
        return int(var)
    except ValueError, Argument:
        print "参数没有包含数字\n", Argument

# 调用函数
temp_convert("xyz");
以上程序执行结果如下：

$ python test.py 
参数没有包含数字
invalid literal for int() with base 10: 'xyz'
触发异常
我们可以使用raise语句自己触发异常

raise语法格式如下：

raise [Exception [, args [, traceback]]]
语句中 Exception 是异常的类型（例如，NameError）参数标准异常中任一种，args 是自已提供的异常参数。

最后一个参数是可选的（在实践中很少使用），如果存在，是跟踪异常对象。

实例
一个异常可以是一个字符串，类或对象。 Python的内核提供的异常，大多数都是实例化的类，这是一个类的实例的参数。

定义一个异常非常简单，如下所示：

def functionName( level ):
    if level < 1:
        raise Exception("Invalid level!", level)
        # 触发异常后，后面的代码就不会再执行
注意：为了能够捕获异常，"except"语句必须有用相同的异常来抛出类对象或者字符串。

例如我们捕获以上异常，"except"语句如下所示：

try:
    正常逻辑
except Exception,err:
    触发自定义异常    
else:
    其余代码
实例
#!/usr/bin/python
# -*- coding: UTF-8 -*-

# 定义函数
def mye( level ):
    if level < 1:
        raise Exception,"Invalid level!"
        # 触发异常后，后面的代码就不会再执行
try:
    mye(0)            # 触发异常
except Exception,err:
    print 1,err
else:
    print 2
执行以上代码，输出结果为：

$ python test.py 
1 Invalid level!
用户自定义异常
通过创建一个新的异常类，程序可以命名它们自己的异常。异常应该是典型的继承自Exception类，通过直接或间接的方式。

以下为与RuntimeError相关的实例,实例中创建了一个类，基类为RuntimeError，用于在异常触发时输出更多的信息。

在try语句块中，用户自定义的异常后执行except块语句，变量 e 是用于创建Networkerror类的实例。

class Networkerror(RuntimeError):
    def __init__(self, arg):
        self.args = arg
在你定义以上类后，你可以触发该异常，如下所示：

try:
    raise Networkerror("Bad hostname")
except Networkerror,e:
    print e.args
'''

 #!/usr/bin/python
# -*- coding: UTF-8 -*-

# 定义函数
class FooError(BaseException):
    def __init__(self, m):
        self.message = m
    def __str__(self):
        return self.message
    
def mye( level ):
    if level < 1:
        raise FooError("Throw expection in mye()")
# 触发异常后，后面的代码就不会再执行
err = []
try:
    mye(0) # 触发异常    
    mye(2)
except FooError as err:
    print (1,err)
else:
    print (2)
    
#1. 唯一性
def all_unique(lst):
    return len(lst) == len(set(lst))

x = [1,1,2,2,3,2,3,4,5,6]
x1=set(x)
print("x1: ", x1)
print("x1: ", x1)
y = [1,2,3,4,5]
print("element is unique in x :", all_unique(x)) # False
print("element is unique in y:", all_unique(y)) # True

#2. 变位词(相同字母异序词),此方法可用于检查两个字符串是否为变位词。
#统计词频
colors = ['red', 'blue', 'red', 'green', 'blue', 'blue']
result = {}
for color in colors:
    if result.get(color)==None:
        result[color]=1
    else:
        result[color]+=1
print (result)
#{'red': 2, 'blue': 3, 'green': 1}

print("下面我们看用Counter怎么实现：")
from collections import Counter
colors = ['red', 'blue', 'red', 'green', 'blue', 'blue']
c = Counter(colors)
print (dict(c))

#Counter操作
#可以创建一个空的Counter：
cnt = Counter()

#之后在空的Counter上进行一些操作。
#也可以创建的时候传进去一个迭代器（数组，字符串，字典等）：
c = Counter('gallahad')                 # 传进字符串
c = Counter({'red': 4, 'blue': 2})      # 传进字典
c = Counter(cats=4, dogs=8)             # 传进元组
#判断是否包含某元素，可以转化为dict然后通过dict判断，Counter也带有函数可以判断：

c = Counter(['eggs', 'ham'])
print(c['bacon'])                              # 不存在就返回0
#0

#删除元素：
c['sausage'] = 0                        # counter entry with a zero count
del c['sausage']   

#获得所有元素：
c = Counter(a=4, b=2, c=0, d=-2)
list(c.elements())
#['a', 'a', 'a', 'a', 'b', 'b']

#查看最常见出现的k个元素：
Counter('abracadabra').most_common(3)
#[('a', 5), ('r', 2), ('b', 2)]

#Counter更新：
c = Counter(a=3, b=1)
d = Counter(a=1, b=2)
c + d                       # 相加
#Counter({'a': 4, 'b': 3})
c - d                       # 相减，如果小于等于0，删去
#Counter({'a': 2})
c & d                       # 求最小
#Counter({'a': 1, 'b': 1})
c | d                       # 求最大
#Counter({'a': 3, 'b': 2})

#例子：读文件统计词频并按照出现次数排序，文件是以空格隔开的单词的诸多句子：

from collections import Counter
lines = open("30s.py","r",encoding='UTF-8').read().splitlines()
lines = [lines[i].split(" ") for i in range(len(lines))]
words = []
for line in lines:
    words.extend(line)
result = Counter(words)
print ("result:", result.most_common(10))

#当需要统计的文件比较大，使用read()一次读不完的情况：
from collections import Counter
result = Counter()
with open("./30s.py","r",encoding='UTF-8') as f:
    while True:
        lines = f.read(1024).splitlines()
        if lines==[]:
            break
        lines = [lines[i].split(" ") for i in range(len(lines))]
        words = []
        for line in lines:
            words.extend(line)
        tmp = Counter(words)
        result+=tmp

print ("result:", result.most_common(10))

#3. 内存: 此代码段可用于检查对象的内存使用情况。
import sys
variable = 30
print("size of v: ", sys.getsizeof(variable)) # 14

#4. 字节大小 此方法可输出字符串的字节大小。
def byte_size(string):
    return(len(string.encode('utf-8')))
print("byte_size() of ' ': ", byte_size('')) # 4
print("byte_size() of 'Hello world':", byte_size('Hello World')) # 11

#5. 打印N次字符串 此代码段无需经过循环操作便可多次打印字符串。
n = 2;
s ="Programming";
print("%d: %s" %(n, s * n) ); # ProgrammingProgramming

#6. 首字母大写 以下代码片段只利用了title()，就能将字符串中每个单词的首字母大写。
s = "programming is awesome"
print("s:", s.title()) # Programming Is Awesome

#7. 列表细分 该方法将列表细分为特定大小的列表。
def chunk(list, size):
    return [list[i:i+size] for i in range(0,len(list), size) ]
print ("chunk: %s" % (chunk(s, 2) ) )

#8. 压缩 以下代码使用filter()将错误值(False、None、0和“ ”)从列表中删除。
def compact(lst):
    return list(filter(bool, lst))
compact([0, 1, False, 2, '', 3, 'a', 's', 34]) # [ 1, 2, 3, 'a', 's', 34 ]

#filter() 函数用于过滤序列，过滤掉不符合条件的元素，返回由符合条件元素组成的新列表
#该接收两个参数，第一个为函数，第二个为序列，序列的每个元素作为参数传递给函数进行判断，
#然后返回 True 或 False，最后将返回 True 的元素放到新列表中。
def is_odd(n):
    return n % 2 == 1
 
newlist = filter(is_odd, [1, 2, 3, 4, 5, 6, 7, 8, 9, 10])
print("newlist:", list(newlist))

'''
归纳str内置函数usage:
1字符串查找类：find、index；
2、字符串判断类：islower、isalpha；
3、内容判断类：startswith、endswith；
4、操作类函数：format、strip、join。

str.join(sequence)
join() 方法用于将序列中的元素以指定的字符连接生成一个新的字符串。 sequence -- 要连接的元素序列。
返回通过指定字符连接序列中元素后生成的新字符串。

Python中有join和os.path.join()两个函数，具体作用如下：

join：连接字符串数组。将字符串、元组、列表中的元素以指定的字符(分隔符)连接生成一个新的字符串
os.path.join()：  将多个路径组合后返回

一、函数说明

1.join（）函数

语法：‘sep’.join（seq）

参数说明：

sep：分隔符。可以为空

seq：要连接的元素序列、字符串、元组、字典等

上面的语法即：以sep作为分隔符，将seq所有的元素合并成一个新的字符串

返回值：返回一个以分隔符sep连接各个元素后生成的字符串

2、os.path.join()函数

语法：  os.path.join(path1[,path2[,......]])

返回值：将多个路径组合后返回

注：第一个绝对路径之前的参数将被忽略

函数：split()

Python中有split()和os.path.split()两个函数，具体作用如下：

split()：拆分字符串。通过指定分隔符对字符串进行切片，并返回分割后的字符串列表(list)

os.path.split()：按照路径将文件名和路径分割开

一、函数说明

1、split()函数

语法：str.split(str="",num=string.count(str))[n]

参数说明：

str:表示为分隔符，默认为空格，但是不能为空('')。若字符串中没有分隔符，则把整个字符串作为列表的一个元素

num:表示分割次数。如果存在参数num，则仅分隔成 num+1 个子字符串，并且每一个子字符串可以赋给新的变量

[n]:表示选取第n个分片

注意：当使用空格作为分隔符时，对于中间为空的项会自动忽略

2、os.path.split()函数

语法：os.path.split('PATH')

参数说明：

1.PATH指一个文件的全路径作为参数：

2.如果给出的是一个目录和文件名，则输出路径和文件名

3.如果给出的是一个目录名，则输出路径和为空文件名

二、分离字符串

string = "www.gziscas.com.cn"

1.以'.'为分隔符

print(string.split('.'))

['www', 'gziscas', 'com', 'cn']

2.分割两次

print(string.split('.'，2))

['www', 'gziscas', 'com.cn']

3.分割两次，并取序列为1的项

print(string.split('.',2)[1])

gziscas

4.分割两次，并把分割后的三个部分保存到三个文件

u1, u2, u3 =string.split('.',2)

print(u1)—— www

print(u2)—— gziscas

print(u3) ——com.cn

三、分离文件名和路径

import os

print(os.path.split('/dodo/soft/python/'))

('/dodo/soft/python', '')

print(os.path.split('/dodo/soft/python'))

('/dodo/soft', 'python')

'''
#!/usr/bin/python3

s1 = "-"
s2 = ""
seq = ("r", "u", "n", "o", "o", "b") # 字符串序列
print ("s1:",s1.join( seq ))   #s1: r-u-n-o-o-b
print ("s2:",s2.join( seq ))   #s2: runoob

import os
os.path.join( '/hello/' , 'good/boy/' , 'doiido' )

#list() 函数用于将元组、区间（range）等转换为列表。
a = (1,2) #tuple
b = {"1":2,"3":3} #dict
c = {1,2,3}  #set
d = range(2,10,2) #range
print("a:", list(a))
print("b:", list(b))
print("c:", list(c))
print("d:", list(d))

#help(str())

#9. 计数 以下代码可用于调换2D数组排列。
array = [['a', 'b'], ['c', 'd'], ['e', 'f']]
transposed = zip(*array)
print(list(transposed) )# [('a', 'c', 'e'), ('b', 'd', 'f')]

#10. 链式比较 以下代码可对各种运算符进行多次比较。
a = 3
print( 2 < a < 8) # True
print(1 == a < 2) # False

#11. 逗号分隔 
#此代码段可将字符串列表转换为单个字符串，同时将列表中的每个元素用逗号隔开。

hobbies = ["basketball", "football", "swimming"]
print("My hobbies are: " + ", ".join(hobbies)) # My hobbies are: basketball, football, swimming

#12. 元音计数 此方法可计算字符串中元音(“a”、“e”、“i”、“o”、“u”)的数目。

import re
def count_vowels(str):
    return (len(re.findall(r'[aeiou]', str, re.IGNORECASE)))
print ("foobar:", count_vowels('foobar')) # 3
print("gym:", count_vowels('gym')) # 0

#13. 首字母小写 此方法可将给定字符串的首字母转换为小写模式。
def decapitalize(str):
    #return str[:1].lower() + str[1:]
    return str[0].lower() + str[1:]
print("decapitalize(FooBar):",decapitalize('FooBar')) # 'fooBar'

#14. 展开列表 下列代码采用了递归法展开潜在的深层列表。

def spread(arg):
    ret = []
    for i in arg:
        if isinstance(i, list):
            ret.extend(i)
        else:
            ret.append(i)
    return ret

def deep_flatten(lst):
    result = []
    result.extend(spread(list(map(lambda x: deep_flatten(x) if type(x) == list else x, lst))))
    return result
deep_flatten([1, [2], [[3], 4], 5]) # [1,2,3,4,5]

'''
Lists 的两个方法 extend 和 append 看起来类似，但实际上完全不同。extend 接受一个参数，这个参数总是一个 list，并且把这个 list 中的每个元素添加到原 list 中。
在这里 list 中有 3 个元素 ('a'、'b' 和 'c')，并且使用另一个有 3 个元素 ('d'、'e' 和 'f') 的 list 扩展之，因此新的 list 中有 6 个元素。
另一方面，append 接受一个参数，这个参数可以是任何数据类型，并且简单地追加到 list 的尾部。在这里使用一个含有 3 个元素的 list 参数调用 append 方法。
原来包含 3 个元素的 list 现在包含 4 个元素。为什么是 4 个元素呢？因为刚刚追加的最后一个元素本身是个 list。List 可以包含任何类型的数据，也包括其他的 list。这或许是您所要的结果，或许不是。如果您的意图是 extend，请不要使用 append。
'''
li = ['a', 'b', 'c']
li.extend(['d', 'e', 'f'])
print("li:", li)

li = ['a', 'b', 'c']
li.append(['d', 'e', 'f'])
print("li:", li)

#15. 寻找差异 此方法仅保留第一个迭代中的值来查找两个迭代之间的差异
def difference(a, b):
    set_a = set(a)
    set_b = set(b)
    comparison = set_a.difference(set_b)
    return list(comparison)
print ("diff: ", difference([1,2,3], [1,2,4])) # [3]

#16. 输出差异 以下方法利用已有函数，寻找并输出两个列表之间的差异。
def difference_by(a, b, fn):
    b = set(map(fn, b))
    return [item for item in a if fn(item) not in b]
from math import floor
difference_by([2.1, 1.2], [2.3, 3.4],floor) # [1.2]
difference_by([{ 'x': 2 }, { 'x': 1 }], [{ 'x': 1 }], lambda v : v['x']) # [ { x: 2 } ]

#17. 链式函数调用 以下方法可以实现在一行中调用多个函数
def add(a, b):
    return a + b

def subtract(a, b):
    return a - b

a, b = 4, 5
print((subtract if a > b else add)(a, b)) # 9

#18. 重复值存在与否:以下方法利用set()只包含唯一元素的特性来检查列表是否存在重复值。
def has_duplicates(lst):
    return len(lst) != len(set(lst))

x = [1,2,3,4,5,5]
y = [1,2,3,4,5]
has_duplicates(x) # True
has_duplicates(y) # False

#19. 合并字典: 以下方法可将两个字典合并。

def merge_two_dicts(a, b):
    c = a.copy() # make a copy of a
    c.update(b) # modify keys and values of a with the ones from b
    return c
a = { 'x': 1, 'y': 2}
b = { 'y': 3, 'z': 4}
print(merge_two_dicts(a, b)) # {'y': 3, 'x': 1, 'z': 4}

#在Python3.5及升级版中，也可按下列方式执行步骤代码：

def merge_dictionaries(a, b):
    return {**a, **b}
a = { 'x': 1, 'y': 2}
b = { 'y': 3, 'z': 4}
print(merge_dictionaries(a, b)) # {'y': 3, 'x': 1, 'z': 4}

#20. 将两个列表转换为字库
def to_dictionary(keys, values):
    return dict(zip(keys, values))

keys = ["a", "b", "c"]
values = [2, 3, 4]
print(to_dictionary(keys, values)) # {'a': 2, 'c': 4, 'b': 3}

'''
zip函数的原型为：zip([iterable, …])
参数iterable为可迭代的对象，并且可以有多个参数。
该函数返回一个以元组为元素的列表，其中第 i 个元组包含每个参数序列的第 i 个元素。
返回的列表长度被截断为最短的参数序列的长度。
只有一个序列参数时，它返回一个1元组的列表。
没有参数时，它返回一个空的列表
'''

a=[1,2,3,4,5]
b=(1,2,3,4,5)
d="zhang"
zz=zip(a,b,d)
print(list(zz))

#21. 列举 以下代码段可以采用列举的方式来获取列表的值和索引。

list = ["a", "b", "c", "d"]

for index, element in enumerate(list):
    print("Value", element, "Index ", index, )
    
#22. 时间成本 以下代码可计算执行特定代码所需的时间。
import time
start_time = time.time()
print("start time:", start_time)
a = 1
b = 2
c = a + b
print(c) #3
end_time = time.time()
print("end time:", end_time)
total_time = end_time - start_time
print("Time total: ", total_time)
# ('Time: ', 1.1205673217773438e-05)

#23. Try else语句
#可将else作为try/except语句的一部分，如果没有异常情况，则执行else语句。

try:
    2*3
except TypeError:
    print("An exception was raised")
else:
    print("Thank God, no exceptions were raised.")
#Thank God, no exceptions were raised.

#24. 出现频率很高的元素: 此方法将输出列表中出镜率很高的元素。
def most_frequent(list):
    return max(set(list), key = list.count)

list = [1,2,1,2,3,2,1,4,2,1,4,4,4,4]
print("element with max frequecy:", most_frequent(list))

#25. 回文(正反读有一样的字符串)
#以下代码检查给定字符串是否为回文。首先将字符串转换为小写，然后从中删除非字母字符，最后将新字符串版本与原版本进行比对。
def palindrome(string):
    from re import sub
    s = sub('[\W_]', '', string.lower())
    return s == s[::-1]
st = palindrome('taco cat') # True
print (st)

#29. 交换变量 此方法为能在不使用额外变量的情况下快速交换两种变量。

def swap(a, b):
    return b, a

a, b = -1, 14
swap(a, b) # (14, -1)

try:
    mye(2)
except FooError as err:
    print ("exception:", err)
    
def main():
    artist = 'kanye_west'
    model_path = '../save/models/kanye_west/kanye_west.ckpt-30000'
    num_save = 1000

    try:
        opts, _ = getopt.getopt(sys.argv[1:], 'l:a:N:', ['load_path=', 'artist_name=', 'num_save='])
    except getopt.GetoptError:
        sys.exit(2)

    for opt, arg in opts:
        if opt in ('-l', '--load_path'):
            model_path = arg
        if opt in ('-a', '--artist_name'):
            artist = arg
        if opt in ('-n', '--num_save'):
            num_save = int(arg)

    save(artist, model_path, num_save)