百度和360的关键词提交查询

程序员班长

于 2020-01-28 00:06:41 发布

阅读量506

点赞数

分类专栏： Python 文章标签：关键词爬虫

本文链接：https://blog.csdn.net/KK_2018/article/details/104096713

版权

Python 专栏收录该内容

85 篇文章 20 订阅

订阅专栏

import requests
url1 = "http://www.baidu.com/s"  # 百度
url2 = "http://www.so.com/s"  # 360


def getHTMLText(url):
    try:
        if url == url1:
            kv = {'wd': "关键词"}
        else:
            kv = {'q': "关键词"}
        r = requests.get(url, params=kv, timeout=30)
        r.raise_for_status()  # 如果不是200，引发HTTPError异常
        r.encoding = r.apparent_encoding
        print(r.request.url)
        print(len(r.text))
    except:
        print("爬取失败")


if __name__ == "__main__":
    print("百度：")
    getHTMLText(url1)
    print("360：")
    getHTMLText(url2)