爬虫学习历程【一些基础函数】

爬虫学习历程

开门见山

split()

作用：给定一个分隔符，将整个字符串分割成一个列表。

a = 'www.baidu.com'
print(a.split('.'))

运行结果：

replace()

作用：顾名思义，替换，将第一个

a = 'www.baidu.com'
print(a.replace('w','c'))

运行结果：

strip()

作用：默认是去除字符串两侧的空格，加上参数可以去除指定字符

a = 'www.baidu.com'
print(a.strip('w'))

运行结果：

format()☆☆☆

作用：给括号里的内容作为待选

a = input('请输入a：')
url = 'www.{}.com'.format(a)
print(url)
b = input('请输入b: ')
url = 'www.{}.com'.format(b)
print(url)

运行结果：

使用format()

使用爬虫时经常会用到多个网页，比如如下格式：
www.baidu1.com
www.baidu2.com
www.baidu3.com
手动输入很麻烦，这时要用到format()函数

urls = ['www.baidu{}.com'.format(number)for number in range(1,10)]
for url in urls:
	print(url)

运行结果：

zip()

作用：打包列表中的元素

a = [1,2,3,4]
b = ['one','two','three','four']
for a,b in zip(a,b):
	print(a,b)

运行结果：

读取文件

open()打开文件
‘r’：读模式
‘w’: 写模式
‘a’: 追加模式
‘b’: 二进制模式（可以加到其他模式后面使用）
‘+’: 读/写模式（可以加到其他模式后面使用）

write()读写文件
close()关闭文件
read()读文件

f = open('./1.txt','a+')
i = 10
while i>0:
	f.write('hello\n')
	i = i-1
f.close()

运行结果：