python网络安全毕业设计_基于Python的网络爬虫系统的设计与实现

2018

年第

12

期

信息与电脑

China Computer&Communication

软件开发与应用

基于

Python

的网络爬虫系统的设计与实现

刘

杰

葛晓玢

闻顺杰

（铜陵职业技术学院 信息工程系，安徽 铜陵

244061）

摘 要：

互联网发展至今已成为人类日常工作与生活中获取信息的主要途径之一。传统的信息获得方式主要是用户

使用搜索引擎搜索信息，这种方式虽然具有出色的搜索速度，但也存在着搜索信息与所需信息契合度不高、信息未进行

有效分类等不足。因此，如何提升用户信息搜索的质量就成为了互联网从业者当前关注的重点，而其中的很多人都将研

究重点放在了通过系统层面改善用户信息获取质量上。笔者介绍一种基于

Python

的网络爬虫系统的设计要求，具体阐述

如何实现信息的高质量获取。

关键词：

Python；网络爬虫系统；搜索引擎

中图分类

号：TP393.092

文献标识码：A

文章编号：1003-9767（2018）12-092-03

Design and Implementation of Web Crawler System Based on Python

Liu Jie, Ge Xiaobin, Wen ShunJie

(

Department of Information Engineering, Tongling Polytechnic, Tongling Anhui 2440