python 网络爬虫(一):世界上最简单的Web浏览器

本文介绍了使用Python的socket库实现一个简单的网络爬虫,作为基础的网络爬虫示例。作者提到,虽然这个爬虫非常原始,没有数据处理功能,但它展示了爬虫的基本工作原理。此外,文章提供了Python Coursera教程的下载链接,并推荐对socket不熟悉的读者参考相关资料。文章最后指出,实际爬虫开发中更常用的是urllib库,并预告了接下来将探讨如何利用urllib抓取网页数据。
摘要由CSDN通过智能技术生成

在coursera上python课程,刚好看到以前也学过的python网络程序这一部分。


兴致所致,自由发挥一段socket程序,也算是一个小小的爬虫(很原始,没有任何数据处理)。


有兴趣学习python的朋友可以在下方链接处下载python_coursera教程文档(pdf,免费),里面有更多的参考资料。


如果对于socket不太了解,可以Google查阅相关内容,也可以点击我的博客文章,有四篇做入门讲解的内容(只不过当时是用C语言实现的)。


下面附上最简单的web浏览器python源码及命令行界面下的结果:


# !/user/bin/python2.7
# -*- coding : utf-8 -*-

author = 'Meditator_hkx'

import socket

mysock = socket.socket(socket.AF_INET,socket.SOCK_STREAM)

mysock.connect(('www.py4inf.com',80))   #client applies to link to server ...
                                        #using http service (port:80)
mysock.send('GET http://py4inf.com/code/remeo.txt HTTP/1.0\n\n')

while True:
	data = mysock.recv(512)
	if (len(data) < 1) :
		br
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值