![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
Apus_1999
热爱编程的小码农
展开
-
分布式爬虫参数设置
一、自身的spider.py设置from scrapy_redis.spiders import RedisSpiderclass MySpider(RedisSpider): redis_key = 'myspider:start_urls' def __init__(self, *args, **kwargs): domain = kwargs.pop('domain', '') #当我们初始化爬虫时,如果定义了初始域名,原创 2022-04-18 12:53:03 · 192 阅读 · 0 评论 -
selenium迭代获取数据信息,页面未附着的解决方案
问题:selenium.common.exceptions.StaleElementReferenceException: Message: stale element reference: element is not attached to the page document (Session info: chrome=99.0.4844.74)产生原因:最近在学习爬虫,其中在学习selenium时出现了这个问题,网上也出现了一些对于这种问题的解决方案。第一种:wait =原创 2022-04-13 10:31:12 · 627 阅读 · 0 评论 -
mysql主从连接,提供文档理解
zz主从连接,网上的教程有很多,但只告诉你怎么做,却没告诉你怎么来的,本文对建立之中大家可能有问题的一些内容进行解答:GRANT REPLICATION SLAVE ON *.* TO 'slave'@'%' identified by 'slave';这句代码应该是网上流传最多的,其中的解释却很少。本文对其进行解释,如果你需要对某一对象授予权限,那么你需要做的是采用GRANT,而在建立主从建构上来说,官方说明是采用GRANT REPLICATION SLAVE ON *.*,这一段使我们不需要改原创 2022-04-09 16:50:22 · 1634 阅读 · 0 评论 -
django 模型choice基本讲解
choice的主要使用形式为[(A,B),(C,D),(E,F)]这种形式,对于有一定python了解的同学可能知道python可以采用zip的方式生成。这里放一个简单例子:a = ['li', 'zhao', 'dan']b = ['1', '2', '3']c = zip(a, b)print(list(c))[('li', '1'), ('zhao', '2'), ('dan', '3')]当然直接用元祖的方式也可以使用choice当然,还有更进一步的使用:from原创 2022-04-08 20:19:59 · 3466 阅读 · 0 评论 -
django1.1.1与django3.2.0在模板语言转数据库的区别
一、外键建立要求:1.要创建的外键的数据表A(主表)和关联表B(从表)必须采用同样的引擎如InnoDB存储引擎2.要创建的A表字段数据类型必须和B表对应的字段的数据类型保持一致,包括长度二、django1.1.1与django3.2.0区别对于django3.2.0,默认是BIgAutoField创立主键,这在mysql中表示为bigint,可以理解为最大int长度为所示值(比如例子中的20),这种值增大了数据库的可扩展性,但是也加大了数据库的存储量。那么此时如果数据库中的表并不全是在d原创 2022-04-08 09:57:37 · 1353 阅读 · 0 评论 -
Ubuntu磁盘分区和内存查看
适用问题:一、对于磁盘分区,首先可以查看磁盘的现有容量:1. sudo fdisk -l :查看原始磁盘分区上图loop表示:我们可以将镜像文件通过mount挂载在我们的系统上,使得我们可以像访问普通文件一下简单的访问镜像系统。2.df -l :查看硬盘使用情况fdisk侧重于显示分区表的信息;df侧重于显示当前系统中所有文件系统的信息:二、解决办法无论怎么做,都要先扩展磁盘容量扩展最方便的是下载gpartedsudo apt-get in...原创 2022-04-05 21:58:52 · 27319 阅读 · 0 评论 -
Mongodb基本使用与常见问题
一、安装后常见问题:当我们在mongodb中创建生产环境后,常见的问题有以下二个:(1)当我们关闭虚拟机或者主机时并没有关掉生产环境,此时就会产生错误,经常如下图:about to fork child process, waiting until server is ready for connections. forked process: 11396 ERROR: child process failed, exited with error number 48 To see add原创 2022-04-15 13:36:10 · 3148 阅读 · 0 评论