实战:使用Docker配置ubuntu下的scrapy爬虫环境

1 准备docker容器

1.1 安装DockerToolBox

参考:
http://www.oschina.net/translate/installing-docker-on-mac-os-x
https://github.com/boot2docker/osx-installer/releases

1.2 配置ubuntu镜像

$docker pull daocloud.io/ubuntu:14.04

1.3 启动docker镜像进入ubuntu14.04

$docker run -it ubuntu:14.04

2 docker容器中的安装

2.1 更新apt-get

  #apt-get update

2.2 安装python2.7.6

  #sudo apt-get install python

2.3 安装wget,命令行下面下载文件的工具

  #apt-get install wget

2.4 进入临时目录以下载安装所需文件

  #cd tmp

2.5 下载并安装pip

 #wget https://bootstrap.pypa.io/get-pip.py
 #python get-pip.py

—————- base end —————–

2.6 安装make

 #apt-get install make

2.7 安装g++

 #apt-get install  build-depgcc
 #apt-get  install  build-essential

——— gcc end ————

2.8 安装依赖

 #apt-get install libxml2-dev libxslt1-dev
 #apt-get install libgsl0-dev
 #apt-get install python-dev
 #apt-get install libffi-dev
 #apt-get install libssl-dev

——— dep end ————

2.9安装scrapy

 #pip install scrapy

3 如何保存修改

3.1 退出dockerTerminal

 #exit

3.2 查看containerId

$docker ps -a -q
cc4072aadb13

3.3 保存镜像

$ docker commit cc40 ubuntu/spider
02db509cb269710f8f80b2a35f12995c59c668b3e3ba2e7148987bc55d713fa5

3.4 查看刚才保存的镜像

$ docker images
REPOSITORY          TAG                 IMAGE ID            CREATED              VIRTUAL SIZE
ubuntu/spider       latest              138b6860da02        About a minute ago   228.2 MB
ubuntu              latest              6cc0fc2a5ee3        3 days ago           187.9 MB
ubuntu              14.04               6cc0fc2a5ee3        3 days ago           187.9 MB
honeydeiMac:~ caojianfeng$ 

3.5你可以使用如下命令进入之前安装的环境了

 $docker run -it ubuntu/spider
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值