1.如何多表查询?有几种方式,有什么区别?
INNER JOIN(内连接):如果表中有至少一个匹配,则返回行 【在语法中可以省略INNER关键字】
LEFT JOIN(左连接):从左表返回所有的行,如果右表中没有匹配,对应的列返回Null
RIGHT JOIN(右连接):从右表返回所有的行 ,如果左表中没有匹配,对应的列返回Null
FULL JOIN(全连接):只要其中一个表中存在匹配,则返回行(即结合左连接和右连接的结果)
2.向上取整,向下取整怎么实现
向上取整: math.ceil()
向下取整: math.floor()
3.主动退出爬虫的两种形式
1. exit()
2.self.crawler.engine.close_spider(self, ‘cookie失效关闭爬虫’)
raise CloseSpider(‘cookie失效关闭爬虫’)
4.如何实现定时爬虫
第一种方式: 修改配置文件
vim /etc/crontab
分 时 日 月 周 用户 命令
45 14 19 7 4 root echo ‘’ >> /text.txt
第二种方式:
coding:utf8
import datetime
import time
def doSth():
把爬虫程序放在这个类里
print(u’这个程序要开始疯狂的运转啦’)
一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
while True:
now = datetime.datetime.now()
print(now.hour, now.minute)
if now.hour == h and now.minute == m:
doSth()
每隔60秒检测一次
time.sleep(60)
main()
————————————————
版权声明:本文为CSDN博主「大蛇王」的原创文章,遵循CC 4.0 by-sa版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/t8116189520/article/details/78832548