Python网络数据采集14:远程采集

    程序在不同的机器上运行,或者在电脑上用不同的IP地址运行。

14.1 为什么要用远程服务器

     有两个目的:对更大计算能力和灵活性的需求,以及对可变IP地址的需求。

     避免IP地址被封杀:

     移植性与扩展性:

14.2 Tor代理服务器

     虽然每个服务器的入站和出站通信都可以被查到,但是要想查出通信的真正起点和终点,必须知道整个通信链路上所有服务器的入站和出站通信细节,而这基本是不可能实现的。

     Tor 下载页面(https://www.torproject.org/download/download)下载并安装

      PySock是一个非常简单的Python代理服务器通信模块,它可以和Tor配合使用。https://pypi.python.org/pypi/PySocks

import socks
import socket
from urllib.request import urlopen
socks.set_default_proxy(socks.SOCKS5, "localhost", 9150)
socket.socket = socks.socksocket
print(urlopen('http://icanhazip.com').read())

14.3 远程主机

    

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值