模拟登陆 Selenium

模拟登陆

使用爬虫实现登录操作.

为何需要做模拟登陆?
有些平台只有登录之后才可以访问其内部其他的子页面.

如何实现模拟登陆?
模拟点击登录按钮发起的请求即可
阻力:验证码的识别

验证码识别
使用线上的打码平台进行各种各样验证码的识别?(不包含滑动验证)
git下载滑动验证的代码

打码平台:
1 超级鹰:http://www.chaojiying.com/about.html
注册,登录
创建一个软件ID(899370)
下载实例代码
2 云打码

古诗文网的模拟登陆

1 创建超级鹰，下载代码

import requests
from hashlib import md5
class Chaojiying_Client(object):
    def __init__(self, username, password, soft_id):
    self.username = username
    password =  password.encode('utf8')
    self.password = md5(password).hexdigest()
    self.soft_id = soft_id
    self.base_params = {
        'user': self.username,
        'pass2': self.password,
        'softid': self.soft_id,
    }
    self.headers = {
        'Connection': 'Keep-Alive',
        'User-Agent': 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0)',
    }

    def PostPic(self, im, codetype):
        """
        im: 图片字节
        codetype: 题目类型 参考 http://www.chaojiying.com/price.html
        """
        params = {
            'codetype': codetype,
        }
        params.update(self.base_params)
        files = {'userfile': ('ccc.jpg', im)}
        r = requests.post('http://upload.chaojiying.net/Upload/Processing.php', data=params, files=files, headers=self.headers)
        return r.json()

    def ReportError(self, im_id):
        """
        im_id:报错题目的图片ID
        """
        params = {
            'id': im_id,
        }
        params.update(self.base_params)
        r = requests.post('http://upload.chaojiying.net/Upload/ReportError.php', data=params, headers=self.headers)
        return r.json()

#定义一个识别验证码图片的函数
def getCode_text(imgPath,imgType):
    chaojiying = Chaojiying_Client('bobo328410948', 'bobo328410948', '899370')
    im = open(imgPath, 'rb').read()
    return chaojiying.PostPic(im,imgType)['pic_str']


2 模拟登陆
import requests
from lxml import etree
sess=requests.Session()
headers = {
    'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36'
}


#获取验证码图片地址保存到到本地
main_url='https://so.gushiwen.cn/user/login.aspx?from=