- 博客(7)
- 问答 (2)
- 收藏
- 关注
RSS订阅原创 scrapy学习笔记（三）-关于动态加载网页的爬取（序）
还是老老实实使用主流方案Splash去进行Javascript渲染，返回渲染好的画面再进行解析吧。
2023-01-10 14:08:21
700
原创 scrapy学习笔记（二）-目录文件意义简析
项目python模块, 代码将从这里导入: 放置spider的目录: 项目items文件: 为方便调试，自定义的main文件: 项目配置文件: 项目管道文件: 项目配置文件。
2023-01-02 23:49:35
549
原创 scrapy学习笔记（一）-安装、搭建
首先是想在pycharm里去用scrapy，于是就想直接安装这个库，但是出现了各种问题，比如层层依赖什么的，在windows下安装的话，还是极度推荐使用。3、搭建最后一步，如图创建文件，至此一个scrapy项目大致框架搭建完成；文件及其内容具体含义后续再研究。python什么的都不用下，下了也没事，从环境变量里去掉换上anoconda的就可以，网上有相关教程。下划线处换成刚加入的main文件路径，之后就可以直接在pycharm调试了。这个包管理软件去做一个pycharm下的scrapy开发环境的。
2022-12-26 22:59:34
297
2原创 Vs Code通过SSH远程连接linux服务器失败解决方案
当你发现无法vscode连接服务器或Linux服务器无法上网时，尝试到Linux服务器输入命令：ifconfig当你发现ip地址只有127.0.0.1时，则可以尝试使用该方案尝试解决问题。输入命令：sudo dhclient -v进行动态获取IP地址，再进行重新连接。...
2022-05-25 23:52:27
431
原创 开平方根算法
int main(){ while (true) { bool jud = 1; int a=0, b; int n; printf("input the value to sqrt:"); cin >> n; //寻找最近的a for (int j = n; j > 0&& !a; j--) { for (int i = j / 2; i > 0 ; i--) { if (((i * i) > j) &
2021-06-21 15:36:42
180
原创 关于指针变量作为函数参数时，malloc/new之后使用总结
void test1(int** a){ *a = new int; **a = 1; cout << "function test1:address of level_2 pointer a->" << a <<endl; cout << "function test1:address of level_1 pointer *a->" << *a<<endl; cout << "function t
2021-05-18 23:52:51
331
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人