- 博客(5)
- 收藏
- 关注
RSS订阅原创 scrapy 爬取知乎登录认证部分（采用cookie登录）
scrapy 爬虫，为异步io框架;因此此处选择，先用requests请求，保存cookie文件，然后scrapy爬取前，在入口处加载cookie。 * 登录，保存cookie方法见前两节，此处展示的是scrapy读取cookie * 首先要明确，scrapy框架关于登录的一些基础知识 1. scrapy 爬取有一个入口，在入口处加载cookie，后续的爬取会自动加载cookie信息...
2018-04-21 17:24:08
1221
原创 新版知乎登录request登录（2）（类编程）
接上一篇，用类重构了代码，方法是一致的，但是看起来更整洁些。 不多说了，上代码：#! /usr/local/bin python3.6"""@Time : 2018/4/17 20:00@Author : ysj@Site : @File : ZhiHuLogIn.py@Software: PyCharm"""import timeimport re...
2018-04-17 21:54:15
1551
5
原创 新版知乎登录request登录（1）（函数式编程）
新版知乎登录request登录运行脚本前提pip3 install requests更换用户名，密码，直接运行即可，运行时可能需要输入验证码，验证位于当前目录下。具体代码，及关键步骤注释如下：#!/usr/bin/env python3.6# -*- coding: utf-8 -*-# @Time : 2018/4/16 15:06# @Author :...
2018-04-16 22:21:45
745
1
原创 Could not read from remote repository （git pycharm）问题解决及记录
Could not read from remote repository （git pycharm）问题解决及记录问题描述： 克隆github（其他git服务器理论一致）项目后，用pycharm码代码，添加，提交都是没问题，之后到了pull，或者push的时候，总是报“Could not read from remote repository”的错误，但是在下方cmd的命令行里面操作使用...
2018-04-16 10:30:27
5184
翻译 CSDN-markdown编辑器
欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I...
2018-04-16 10:15:45
100
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人