- 博客(12)
- 收藏
- 关注
原创 行政区电子围栏
获取每个城市的行政区http://www.tcmap.com.cn/beijing/url='http://www.tcmap.com.cn/shanghai/'req=requests.get(url)req.encoding=req.apparent_encodinghtml=BeautifulSoup(req.text,'lxml')dd=html.find('table'...
2019-06-05 15:57:10
963
原创 scrapy批量插入mysql
spider.pysql='insert into tiebadata(publish_name,publish_time,publish_url,publish_content,comment_content,comment_time,comment_name,keyword,app_name,run_time)VALUES (%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)'...
2018-12-04 16:12:59
1515
原创 scrapy异步存储mysql
piplines.pyclass DuoTestPipeline(object): def __init__(self,db_pool): self.db_pool=db_pool @classmethod #从setting中读取数据 def from_settings(cls, settings): db_params ...
2018-12-04 15:12:34
624
原创 钉钉发送报警
import json,requestsdef info(): url = 'https://oapi.dingtalk.com/robot/send?access_token=xxxxxxxxxxxxxxxx' headers = { 'Content-Type': 'application/json;charset=utf-8' } for...
2018-08-21 11:27:30
1030
转载 经纬度和墨卡托坐标互相转换
import math#经纬度转墨卡托坐标def ls(lat,lng): # list=ll_wl.split(',') lat=float(lat) lng=float(lng) x = lng* 20037508.34 / 180 y = math.log(math.tan((90 + lat) * math.pi / 360)) / (mat...
2018-08-21 10:48:38
7998
原创 使用datetime对时间进行操作
import re,timefrom datetime import timedelta,datetimelist=[u'10分钟前',u'2小时前',u'22小时前',u'昨天 14:55',u'08-18',u'Tue Jun 12 15:49:08 +0800 2018',u'刚刚']for i in list: if '分钟前' in i.encode('utf-8'):...
2018-08-21 10:28:58
831
转载 百度API访问地理位置
1.利用经纬度返回对应的地址以及周边建筑的地址http://api.map.baidu.com/geocoder/v2/?callback=renderReverse&location='+'latitude'+','longitude'+'&output=json&pois=1&ak=密钥2.利用两个经纬度返回距离和用时http://api.map.baidu.c...
2018-06-28 20:41:18
2888
原创 scrapy 在启动文件进行传值
comment.pyimport scrapyfrom scrapy.http import Requestclass CommentSpider(scrapy.Spider): name = 'comment' def __init__(self,value): self.value=value self.header={ ...
2018-06-11 16:35:50
868
原创 yagmail发送企业邮件
import yagmailyag=yagmail.SMTP(user='xxx.xxxx@csdn.com',password='11111',host='smtp.exmail.qq.com',port=465)# '''# 第一个参数 发件人邮箱地址# 第二个参数 密码# 第三个参数 发送邮箱的服务器# 第四个参数 发送邮箱的端口# '''content='正文内容'#正文...
2018-06-11 15:27:57
3543
转载 Pygame开发打飞机游戏
pygame 开发打飞机游戏一、实验说明1. 实现效果单文件实现微信打飞机小游戏2. 开发环境python 2.7pygamerandomsys3. 源码下载本课程中的所有源码:http://labfile.oss.aliyuncs.com/courses/49/PythonShootGame.zip二、项目简介1. 介绍本项目来源自Ki
2017-08-25 08:10:44
2926
转载 Python 识别验证码
一、实验说明1.1 实验内容生活中,我们在登录微博,邮箱的时候,常常会碰到验证码。在工作时,如果想要爬取一些数据,也会碰到验证码的阻碍。本次试验将带领大家认识验证码的一些特性,并利用 Python 中的 pillow 库完成对验证码的破解。1.2 实验知识点本节实验中将学习和实践以下知识点:Python基本知识PIL模块的使用1.3 实验环境Python2.7P
2017-08-24 14:01:01
2091
1
原创 python二叉树 知识点概括
二叉树的自我理解二叉树作为一个Python中的典型,其实质就是一个分叉形式的数组,以一个节点开始,每次延伸出两个左右子节点,无限延伸知道没有子节点。这些节点看似散乱,实际上是可以根据某种规律来按顺序读出来的,这就可以看做是一种专门的读取方法。假设最上级是一个总文件夹,后面的内容都是文件夹的下一级,二叉树的遍历方式就可以稳当的读出所有文件。二叉树的遍历方式我已知二叉树有四
2017-08-22 16:56:39
5346
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人