python
灼灼桃花夭
吾非莲
展开
-
Python之 python -m pip install --upgrade pip升级失败
多少原创 2023-02-23 11:59:49 · 2951 阅读 · 0 评论 -
PHP之 执行python ( linux )
1 php 端在使用 exec 调用 python外部程序时,必须使用$set_charset = ‘export LANG=en_US.UTF-8;’ 加在调用的命令前面。否则报错 或 返回结果与终端执行python返回不一致 示例如下:(1) Linux版本(2) Window版本 不能使用 $set_charset = ‘export LANG=en_US.UTF-8;’ 加在调用的命令前面.php执行命令python接收参数·· 返回数据...原创 2022-06-10 17:03:40 · 907 阅读 · 0 评论 -
Python之 chromedriver不能保持登录状态(共享cookie失败,使用debugger共享成功)
有时候,需要调用浏览器请求,但是cookie不能同步,保持登录解决办法https://blog.csdn.net/suntao1995/article/details/119559593https://blog.csdn.net/xueyan2018/article/details/122336850思路不调用chromedriver,用已打开的调试窗口登陆,然后后续运行chromedriver在已调试的浏览器运行,就是我打开一个A浏览器,然后代码运行后直接在A浏览器上面改变界面测试,这样A浏览器原创 2022-05-11 16:12:42 · 1406 阅读 · 0 评论 -
pymysql.cursors.SSCursor 报错 Previous unbuffered result was left incomplete
读取大数据量时,使用 SSCursor (流式游标) 解决 Python 使用 pymysql 查询大量数据导致内存使用过高的问题如果用传统的 fetchall() 或 fetchone() 方法,都是先默认在内存里缓存下所有行然后再处理,大量的数据会导致内存资源消耗光,内存容易溢出。使用 SSCursor (流式游标),避免客户端占用大量内存。(这个 cursor 实际上没有缓存下来任何数据,它不会读取所有所有到内存中,它的做法是从储存块中读取记录,并且一条一条返回给你。)使用迭代器而不用 fetc原创 2022-05-11 15:57:47 · 1029 阅读 · 0 评论 -
Python之 一步一步来教你爬虫,使用python抓取网页数据并储存
参考https://blog.csdn.net/pythonxiaopeng/article/details/109030653import requestsfrom bs4 import BeautifulSoupimport csvimport pandas as pdimport urllib# 哔哩哔哩网页抓取演示headers = {'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/转载 2022-04-19 10:44:38 · 1554 阅读 · 0 评论