python 登陆开心网图片批量下载-selenium实现

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32

from selenium import webdriver import time import re import random   browser = webdriver.Firefox() browser.get( "http://3g.kaixin001.com/" ) browser.find_element_by_id( "username" ).send_keys( "登陆账号" ) browser.find_element_by_id( "password" ).send_keys( "密码" ) browser.find_element_by_name( "login" ).click() #输入账号密码，点击登录按钮登录 browser.find_element_by_class_name( "name" ).click() time.sleep(random.randint( 2 , 8 )) browser.find_element_by_link_text( "我的照片(37)" ).click()   #照片相册名字 time.sleep(random.randint( 2 , 8 )) browser.find_element_by_class_name( "pic_container" ).click() #默认使用class name定位仅可以定位带第一个照片专辑，使用xpath或link txt定位可定位其他照片专辑 time.sleep(random.randint( 2 , 8 )) browser.find_element_by_xpath( "/html/body/div[7]/a[1]" ).click() html = browser.page_source yeshu = browser.find_element_by_class_name( "c9" ).text #确定当前专辑有几张照片，为下面的循环做准备 yeshu2 = int (yeshu[ 3 : 5 ]) f = open ( "123.txt" , "a+" ) if yeshu2> 0 :      for i in range ( 0 ,yeshu2): #确定照片张数之后循环指定次数，获取图片地址，依次下一张          i - = 1          html1 = browser.page_source          htmlimg = re.findall( "下载中(.*)下载原图" ,html1,re.S)          strli = "".join(htmlimg)        #列表转换为字符串          print (strli)          f.write(strli)          time.sleep(random.randint( 2 , 8 ))          browser.find_element_by_link_text( "下一张" ).click() f.close()

python调用selenium实现登陆开心网，下载指定专辑内的照片。整个过程调用火狐浏览器实现，可看到每一步的操作步骤。过程中遇到一些问题总结如下:

1.selenium定位元素时有时使用常规的id，name，class name，等方式都无法定位时，可以考虑使用xpath实现定位。比如某些元素属性都一致的时候。或者使用link txt定位

2.random模块可以实现随机数功能，简单好用，很强大。

3.strli="".join(htmlimg)    列表转换为字符串，列表之间的内容用“”之间的内容进行连接。对应的是aplit，用法如下

split(…)
S.split([sep [,maxsplit]]) -> 由字符串分割成的列表
返回一组使用分隔符（sep）分割字符串形成的列表。如果指定最大分割数，则在最大分割时结束。如果分隔符未指定或者为none，则分隔符默认为空格。