python 登录并爬取淘宝信息

最新推荐文章于 2024-08-28 01:52:01 发布

小奇葩

最新推荐文章于 2024-08-28 01:52:01 发布

阅读量3.7k

点赞数 1

分类专栏：爬虫文章标签： crawl python selenium 淘宝网

本文链接：https://blog.csdn.net/Japan__/article/details/50821586

版权

本文介绍了一种使用Python结合Selenium库登录淘宝网站并爬取部分页面内容的方法。虽然可能会触发风控机制，但不登录的爬虫可能更安全。欢迎大家交流改进策略。

摘要由CSDN通过智能技术生成

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from selenium import webdriver
import time
import datetime
import traceback
import logging
import os
from selenium.webdriver.common.action_chains import ActionChains
import codecs


#登录
def login(driver,site):
    driver.get(site)
    time.sleep(5)
    try:
        #点击请登录
        driver.find_element_by_class_name("h").click()
        time.sleep(5)
        #输入账号和密码
        driver.find_element_by_id("TPL_username_1").send_keys(u"yourusername")
        time.sleep(5)
        #print driver.find_element_by_id("TPL_username_1")
        driver.find_element_by_id("TPL_password_1").send_keys(u"yourpsd")
        time.sleep(5)

        #点击登录
        driver.find_element_by_id("J_SubmitStatic").click()
        time.sleep(30)

    except:
        print u"failure"



def crawlmarket(driver,filename,site):
    #driver = webdriver.Firefox()
    driver.get(si