easouchen-CSDN博客

原创 Windows 环境下安装MySQL 数据库，并迁移Data目录到其他分区

由于工作原因，部署了一套MySQL数据库环境。具体内容如下：服务器操作系统：windows server2012 standard mysql 版本：Mysql 5.7.29 社区版（下载地址）一、安装过程 1）安装.net 依赖包 4.72（下载地址） 2）安装mysql, 选择custom...

2020-01-14 16:43:56 2458

原创 Python 对于时间的处理

在项目中，我们常常要对时间进行处理，所以会用到常用的time、datetime等模块。今天，分享下关于时间处理的一些方法import datetimeimport time# 获取当前时间的时间戳old_time = time.time()# 休眠 2 秒time.sleep(2)new_time = time.time()# 计算刚才程序运行了多长时间...

2019-06-05 23:09:27 184

原创 Python 集合 Set 的奇妙用处

Python 中内置了很多有趣而又强大的功能库，今天，要为大家分享的是集合 Set作为Python 基本元素之一的集合，具有非常鲜明的特点：子元素唯一，也就是集合里面的元素都是唯一的不同的集合可以做逻辑运算，如并集、差集等下面通过一些例子来看下集合的使用场景：# 定义一个集合set1 = set()# 增加一个元素, 注意，元素不能为字典\集合\列表类型...

2019-06-04 23:37:13 461

原创 Python 构建一个函数，读取excel，并返回一个字典

在工作中，常常会遇到需要将excel 数据导入到数据库的场景。为了方便对数据进行清洗并写入数据库，所以希望能将每一行的数据以字典的形式存放起来，如同[ {"id":1, "name": "张三"}， ] 这种形式。下面开始介绍如何进行。首先新建一个测试项目，项目中包含一个py 文件，用于写方法。还有一个待导入的excel 文件： ...

2019-06-04 22:38:13 5481

原创 python 爬虫趣玩系列--12306网站登录\订票-陈亦苏-专题视频课程

本课程为python 爬虫实战分享，模仿12306登录并预定车票。在此过程中，学会使用requests模块，携带自定义的headers、cookies数据登录网站、图形验证码验证等。并且学会fiddler抓包工具的基本用法...

2017-09-30 14:22:26 318

原创 python爬取京东商品信息

本文主要采用python selenium 模块进行京东商品信息的采集。由于京东的搜索页面载入时只加载30条记录，只有下拉到页面底部后，再加载另外30条记录。为完整抓取其信息，本文采用了selenium + phantomjs 的方式进行数据爬取，并存储到mysql中。由于使用了multiprocssing.Pool 所以还支持自定义多线程数一工具及使用到的模块使用python 2.7

2017-09-27 01:05:19 3058

easouchen的博客