【python学习.第五周任务】

做了上述的准备,简单结合下就可以综合起来做这周的任务了。

一开始我传进GITHUB的代码有不足,一是只有所有网址都检查完才能传进去,这样根本无法测试(电脑跑得慢哈哈),我又改了一下,可以一边扫描一边传进去。为了测试方便,我把遍历换成了两个网址,一个被注册了,一个没被注册,我想效果是一样的。

然后这是改后的代码。。。。。。。


__author__ = 'Administrator'
# -*- coding: UTF-8 -*-
import urllib
import urllib2
import re
import MySQLdb
range=['a','b','c','d','e','f','g','h','i','j','k','l','m','o','p','q','r','s','t','u','v','w','x','y','z']
temps = ['aabav','aaaaa']
result=[]
try:
    conn=MySQLdb.connect(host='localhost',user='cjw',passwd='123456',port=3306)
    cur=conn.cursor()
    conn.select_db('python1')
    cur.execute('create table url10(URL varchar(20))')
    url = 'http://www.zgsj.com/domain_reg/domaintrans.asp'
    for temp in temps:

        values = {'d_name':"%s.com" %temp,
              'dtype':"common",
              'drand':"1416053904465"}
        data = urllib.urlencode(values)
        user_agent = 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/37.0.2062.124 Safari/537.36'
        headers = {'User-Agent' : user_agent }

        req = urllib2.Request(url,data,headers)
        response = urllib2.urlopen(req)
        the_page = response.read()

        reg = r"value='([a-zA-Z]+\.com)' checked"

        if re.findall(reg,the_page):
            result.append(re.findall(reg,the_page))
            value=re.findall(reg,the_page)
            cur.execute('insert into url10 values(%s)',value)
            conn.commit()
            print str(re.findall(reg,the_page))
        else:
            pass
    conn.commit()
    cur.close()
    conn.close()
except MySQLdb.Error,e:
     print "Mysql Error %d: %s" % (e.args[0], e.args[1])

然后这是结果,,,,,









PS:我觉得,是不是该做完后把表删掉呢,因为这样我测试下就要改一下表的名字,看我都到url9了,就知道我已经测试了9次。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值