- 博客(6)
- 资源 (10)
- 问答 (1)
- 收藏
- 关注
转载 Python下APScheduler的快速指南
原文转载地址:https://blog.csdn.net/luanpeng825485697/article/details/84395302APScheduler介绍APScheduler是基于Quartz的一个Python定时任务框架,实现了Quartz的所有功能,使用起来十分方便。提供了基于日期、固定时间间隔以及crontab类型的任务,并且可以持久化任务。APScheduler...
2019-05-29 16:03:57 6302
原创 selenium优化禁止图片和css加载
在使用 selenium 模拟抓取网页的时候,速度效率其实是非常慢的,可以稍微优化一下,禁止不必要的图片加载和css加载,示例代码如下:from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsimport timeimport randomoptions = Options...
2019-05-21 11:35:16 20481 2
原创 ubuntu/深度系统下安装python3.6.4
背景开发使用python3.6.4 但是系统自己带的是2.7 和3.5版本的 不仅要安装python3.6 还要将环境隔离开下载安装下载python3.6编译安装1 、建立一个soft 文件夹 用来存放下载文件mkdir soft环境准备sudo apt-get install opensslsudo apt-get install libssl-dev2 进入...
2019-05-15 09:59:56 7156
原创 go语言批量检测代理ip是否可用
在做爬虫的时候,经常会用到代理ip,然而代理ip也会经常会去检测是否有效,所以假设我在redis中有如下几个ip:下面需要做的是使用go去读取出来,然后依次去请求如下地址:http://icanhazip.com如果有成功返回ip则表示此代理ip有效,相关的参考代码如下:package mainimport ( "encoding/json" "fmt" ...
2019-05-09 17:36:52 8240
原创 go操作redis set集合简单demo
连接redis之前,需安装go get github.com/garyburd/redigo/redis然后参考以下示例:package mainimport ( "fmt" "github.com/garyburd/redigo/redis")func main() { //连接redis conn,err := redis.Dial("tcp...
2019-05-05 16:22:42 7600
原创 go语言请求url测试代理ip是否可用简单demo
package mainimport ( "fmt" "io/ioutil" "log" "net/http" "net/url" "time")/*验证代理ip是否可用通过传入一个代理ip,然后使用它去访问一个url看看是否访问成功,以此为依据进行判断当前代理ip是否有效。参数:proxy_addr 要验证的ip返回:ip 验证通过的ip、...
2019-05-05 14:37:43 9656
全国5亿+栅格数据 geohash7
2024-06-24
全国2万+商场电子围栏数据(更新时间:2022-10-28)
2022-11-24
根据postgresql或者greenplum数据库创建表的sql语句转换成最基本的django model
2018-09-12
重写Django REST framework源码demo
2018-07-17
python操作mysql数据库mysql_operation
2017-09-08
写谷歌浏览器插件的时候怎么获取到newwork中的请求的response信息
2017-08-17
TA创建的收藏夹 TA关注的收藏夹
TA关注的人