爬虫实战6—分布式系统设计

文章说明：本文是在学习一个网络爬虫课程时所做笔记，文章如有不对的地方，欢迎指出，积极讨论。

一、分布式系统

分布式系统（distributed system）：是建立在网络之上的软件系统，具有高度的内聚性和透明性。网络和分布式系统之间的区别更多的在于高层软件（特别是OS），而不是硬件。内聚性是指每一个数据库分布节点高度自治，有本地的数据库管理系统。透明性是指每一个数据库分布节点对用户的应用来说都是透明的，看不出是本地还是远程。在分布式数据库系统，用户感觉不到数据是分布的，即用户不须知道是否分割、有无副本、数据存于哪个站点以及事务在哪个站点上执行等。

软件系统（software systems）：是指由系统软件、支撑软件和应用软件组成的计算机软件系统，它是计算机系统中有软件组成的部分。

分布式处理（distributedprocessing）和并行处理（Parallel processing）是为了提高并行处理速度采用的两种不同的体系架构。并行处理是利用多个功能部件或多个处理机同时工作来提高系统性能或可靠性的计算机系统，这种系统至少包含指令级或指令级以上的并行。分布式处理则是将不同地点的，或具有不同功能的，或拥有不同数据的多台计算机通过通信网络连接起来，在控制系统的统一管理控制下，协调地完成大规模信息处理任务的计算机系统。

处理机（processor）：包括CPU、主存储器和I/O接口。处理机外接外围设备就构成完整的计算机系统。

（一）Deduce ofdistributed system

(1)A program：is the codeyou write.

(2)A process：is what youget when you run it.

(3)A message：is used tocommunicate betwee