0821总结

遇错误

导入txt时，报错
UnicodeDecodeError: ‘utf-8’ codec can’t decode byte 0xa1 in position 0: invalid start byte
解决：报错"UnicodeDecodeError: ‘utf-8’ codec can’t decode byte"

学新

Pandas中的DataFrame修改列名

#pandas 空的dataframe 插入列名
colum = ['性别','年龄','M','样本类型'] + muta_list + ['B']
data1 = pd.DataFrame(columns=colum)

pandas 读写文件-慢 vs 内建 open() 读写文件-快

爬数据+入库

爬数据

参考大佬： 淘宝爬取商品信息以及数据分析

所用url: https://curl.trillworks.com/

入库

sqlalchemy中create_engine用法

x1
x2
x3

PS：
从零开始写爬虫（5）-- 数据入库