蓝天采集器安装部署

最新推荐文章于 2022-07-30 22:21:56 发布
最新推荐文章于 2022-07-30 22:21:56 发布
阅读量996 收藏
点赞数
分类专栏： 【Python】 文章标签： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ma969070578/article/details/119573450
版权

1、安装docker、portainer

centos7安装docker以及搭建portainer可视化UI_Sir_小三的博客

https://blog.csdn.net/qq_42962779/article/details/104666070

Xshell 6 (Build 0197)
Copyright (c) 2002 NetSarang Computer, Inc. All rights reserved.

Type `help' to learn how to use Xshell prompt.
[C:\~]$ 

Connecting to 10.0.0.79:22...
Connection established.
To escape to local shell, press 'Ctrl+Alt+]'.

WARNING! The remote SSH server rejected X11 forwarding request.
Last login: Wed Mar 17 20:09:34 2021 from 10.0.0.23
[root@localhost ~]# whereis docker
docker:[root@localhost ~]#  yum install -y yum-utils device-mapper-persistent-data lvm2
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
epel/x86_64/metalink                                                                                                                                                                                             | 6.2 kB  00:00:00     
 * base: mirrors.ustc.edu.cn
 * epel: mirrors.ustc.edu.cn
 * extras: mirrors.ustc.edu.cn
 * updates: mirrors.ustc.edu.cn
base                                                                                                                                                                                                             | 3.6 kB  00:00:00     
extras                                                                                                                                                                                                           | 2.9 kB  00:00:00     
mysql-connectors-community                                                                                                                                                                                       | 2.6 kB  00:00:00     
mysql-tools-community                                                                                                                                                                                            | 2.6 kB  00:00:00     
mysql57-community                                                                                                                                                                                                | 2.6 kB  00:00:00     
updates                                                                                                                                                                                                          | 2.9 kB  00:00:00     
(1/2): epel/x86_64/updateinfo                                                                                                                                                                                    | 1.0 MB  00:00:01     
(2/2): epel/x86_64/primary_db                                                                                                                                                                                    | 6.9 MB  00:00:13     
正在解决依赖关系
--> 正在检查事务
---> 软件包 device-mapper-persistent-data.x86_64.0.0.7.3-3.el7 将被 升级
---> 软件包 device-mapper-persistent-data.x86_64.0.0.8.5-3.el7_9.2 将被 更新
---> 软件包 lvm2.x86_64.7.2.02.180-8.el7 将被 升级
---> 软件包 lvm2.x86_64.7.2.02.187-6.el7_9.3 将被 更新
--> 正在处理依赖关系 lvm2-libs = 7:2.02.187-6.el7_9.3，它被软件包 7:lvm2-2.02.187-6.el7_9.3.x86_64 需要
---> 软件包 yum-utils.noarch.0.1.1.31-50.el7 将被 升级
---> 软件包 yum-utils.noarch.0.1.1.31-54.el7_8 将被 更新
--> 正在检查事务
---> 软件包 lvm2-libs.x86_64.7.2.02.180-8.el7 将被 升级
---> 软件包 lvm2-libs.x86_64.7.2.02.187-6.el7_9.3 将被 更新
--> 正在处理依赖关系 device-mapper-event = 7:1.02.170-6.el7_9.3，它被软件包 7:lvm2-libs-2.02.187-6.el7_9.3.x86_64 需要
--> 正在检查事务
---> 软件包 device-mapper-event.x86_64.7.1.02.149-8.el7 将被 升级
---> 软件包 device-mapper-event.x86_64.7.1.02.170-6.el7_9.3 将被 更新
--> 正在处理依赖关系 device-mapper-event-libs = 7:1.02.170-6.el7_9.3，它被软件包 7:device-mapper-event-1.02.170-6.el7_9.3.x86_64 需要
--> 正在处理依赖关系 device-mapper = 7:1.02.170-6.el7_9.3，它被软件包 7:device-mapper-event-1.02.170-6.el7_9.3.x86_64 需要
--> 正在检查事务
---> 软件包 device-mapper.x86_64.7.1.02.149-8.el7 将被 升级
--> 正在处理依赖关系 device-mapper = 7:1.02.149-8.el7，它被软件包 7:device-mapper-libs-1.02.149-8.el7.x86_64 需要
---> 软件包 device-mapper.x86_64.7.1.02.170-6.el7_9.3 将被 更新
---> 软件包 device-mapper-event-libs.x86_64.7.1.02.149-8.el7 将被 升级
---> 软件包 device-mapper-event-libs.x86_64.7.1.02.170-6.el7_9.3 将被 更新
--> 正在检查事务
---> 软件包 device-mapper-libs.x86_64.7.1.02.149-8.el7 将被 升级
---> 软件包 device-mapper-libs.x86_64.7.1.02.170-6.el7_9.3 将被 更新
--> 解决依赖关系完成

依赖关系解决

========================================================================================================================================================================================================================================
 Package                                                              架构                                          版本                                                           源                                              大小
========================================================================================================================================================================================================================================
正在更新:
 device-mapper-persistent-data                                        x86_64                                        0.8.5-3.el7_9.2                                                updates                                        423 k
 lvm2                                                                 x86_64                                        7:2.02.187-6.el7_9.3                                           updates                                        1.3 M
 yum-utils                                                            noarch                                        1.1.31-54.el7_8                                                base                                           122 k
为依赖而更新:
 device-mapper                                                        x86_64                                        7:1.02.170-6.el7_9.3                                           updates                                        297 k
 device-mapper-event                                                  x86_64                                        7:1.02.170-6.el7_9.3                                           updates                                        192 k
 device-mapper-event-libs                                             x86_64                                        7:1.02.170-6.el7_9.3                                           updates                                        191 k
 device-mapper-libs                                                   x86_64                                        7:1.02.170-6.el7_9.3                                           updates                                        325 k
 lvm2-libs                                                            x86_64                                        7:2.02.187-6.el7_9.3                                           updates                                        1.1 M

事务概要
========================================================================================================================================================================================================================================
升级  3 软件包 (+5 依赖软件包)

总下载量：3.9 M
Downloading packages:
Delta RPMs disabled because /usr/bin/applydeltarpm not installed.
(1/8): device-mapper-1.02.170-6.el7_9.3.x86_64.rpm                                                                                                                                                               | 297 kB  00:00:01     
(2/8): device-mapper-event-libs-1.02.170-6.el7_9.3.x86_64.rpm                                                                                                                                                    | 191 kB  00:00:01     
(3/8): device-mapper-event-1.02.170-6.el7_9.3.x86_64.rpm                                                                                                                                                         | 192 kB  00:00:01     
(4/8): device-mapper-libs-1.02.170-6.el7_9.3.x86_64.rpm                                                                                                                                                          | 325 kB  00:00:02     
(5/8): lvm2-libs-2.02.187-6.el7_9.3.x86_64.rpm                                                                                                                                                                   | 1.1 MB  00:00:03     
(6/8): device-mapper-persistent-data-0.8.5-3.el7_9.2.x86_64.rpm                                                                                                                                                  | 423 kB  00:00:05     
(7/8): lvm2-2.02.187-6.el7_9.3.x86_64.rpm                                                                                                                                                                        | 1.3 MB  00:00:06     
(8/8): yum-utils-1.1.31-54.el7_8.noarch.rpm                                                                                                                                                                      | 122 kB  00:00:05     
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
总计                                                                                                                                                                                                    505 kB/s | 3.9 MB  00:00:07     
Running transaction check
Running transaction test
Transaction test succeeded
Running transaction
  正在更新    : 7:device-mapper-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                          1/16 
  正在更新    : 7:device-mapper-libs-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                     2/16 
  正在更新    : 7:device-mapper-event-libs-1.02.170-6.el7_9.3.x86_64                                                                                                                                                               3/16 
  正在更新    : 7:device-mapper-event-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                    4/16 
  正在更新    : 7:lvm2-libs-2.02.187-6.el7_9.3.x86_64                                                                                                                                                                              5/16 
  正在更新    : device-mapper-persistent-data-0.8.5-3.el7_9.2.x86_64                                                                                                                                                               6/16 
  正在更新    : 7:lvm2-2.02.187-6.el7_9.3.x86_64                                                                                                                                                                                   7/16 
  正在更新    : yum-utils-1.1.31-54.el7_8.noarch                                                                                                                                                                                   8/16 
  清理        : 7:lvm2-2.02.180-8.el7.x86_64                                                                                                                                                                                       9/16 
  清理        : yum-utils-1.1.31-50.el7.noarch                                                                                                                                                                                    10/16 
  清理        : 7:lvm2-libs-2.02.180-8.el7.x86_64                                                                                                                                                                                 11/16 
  清理        : 7:device-mapper-event-1.02.149-8.el7.x86_64                                                                                                                                                                       12/16 
  清理        : 7:device-mapper-event-libs-1.02.149-8.el7.x86_64                                                                                                                                                                  13/16 
  清理        : 7:device-mapper-1.02.149-8.el7.x86_64                                                                                                                                                                             14/16 
  清理        : 7:device-mapper-libs-1.02.149-8.el7.x86_64                                                                                                                                                                        15/16 
  清理        : device-mapper-persistent-data-0.7.3-3.el7.x86_64                                                                                                                                                                  16/16 
  验证中      : 7:lvm2-2.02.187-6.el7_9.3.x86_64                                                                                                                                                                                   1/16 
  验证中      : 7:device-mapper-event-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                    2/16 
  验证中      : device-mapper-persistent-data-0.8.5-3.el7_9.2.x86_64                                                                                                                                                               3/16 
  验证中      : 7:device-mapper-libs-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                     4/16 
  验证中      : 7:device-mapper-event-libs-1.02.170-6.el7_9.3.x86_64                                                                                                                                                               5/16 
  验证中      : 7:lvm2-libs-2.02.187-6.el7_9.3.x86_64                                                                                                                                                                              6/16 
  验证中      : 7:device-mapper-1.02.170-6.el7_9.3.x86_64                                                                                                                                                                          7/16 
  验证中      : yum-utils-1.1.31-54.el7_8.noarch                                                                                                                                                                                   8/16 
  验证中      : device-mapper-persistent-data-0.7.3-3.el7.x86_64                                                                                                                                                                   9/16 
  验证中      : yum-utils-1.1.31-50.el7.noarch                                                                                                                                                                                    10/16 
  验证中      : 7:lvm2-libs-2.02.180-8.el7.x86_64                                                                                                                                                                                 11/16 
  验证中      : 7:device-mapper-1.02.149-8.el7.x86_64                                                                                                                                                                             12/16 
  验证中      : 7:device-mapper-libs-1.02.149-8.el7.x86_64                                                                                                                                                                        13/16 
  验证中      : 7:device-mapper-event-1.02.149-8.el7.x86_64                                                                                                                                                                       14/16 
  验证中      : 7:device-mapper-event-libs-1.02.149-8.el7.x86_64                                                                                                                                                                  15/16 
  验证中      : 7:lvm2-2.02.180-8.el7.x86_64                                                                                                                                                                                      16/16 

更新完毕:
  device-mapper-persistent-data.x86_64 0:0.8.5-3.el7_9.2                                     lvm2.x86_64 7:2.02.187-6.el7_9.3                                     yum-utils.noarch 0:1.1.31-54.el7_8                                    

作为依赖被升级:
  device-mapper.x86_64 7:1.02.170-6.el7_9.3 device-mapper-event.x86_64 7:1.02.170-6.el7_9.3 device-mapper-event-libs.x86_64 7:1.02.170-6.el7_9.3 device-mapper-libs.x86_64 7:1.02.170-6.el7_9.3 lvm2-libs.x86_64 7:2.02.187-6.el7_9.3

完毕！
[root@localhost ~]# yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
已加载插件：fastestmirror, langpacks
adding repo from: http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
grabbing file http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo to /etc/yum.repos.d/docker-ce.repo
repo saved to /etc/yum.repos.d/docker-ce.repo
[root@localhost ~]# yum makecache fast
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
epel/x86_64/metalink                                                                                                                                                                                             | 6.2 kB  00:00:00     
 * base: mirrors.ustc.edu.cn
 * epel: mirrors.ustc.edu.cn
 * extras: mirrors.ustc.edu.cn
 * updates: mirrors.ustc.edu.cn
base                                                                                                                                                                                                             | 3.6 kB  00:00:00     
docker-ce-stable                                                                                                                                                                                                 | 3.5 kB  00:00:00     
extras                                                                                                                                                                                                           | 2.9 kB  00:00:00     
mysql-connectors-community                                                                                                                                                                                       | 2.6 kB  00:00:00     
mysql-tools-community                                                                                                                                                                                            | 2.6 kB  00:00:00     
mysql57-community                                                                                                                                                                                                | 2.6 kB  00:00:00     
updates                                                                                                                                                                                                          | 2.9 kB  00:00:00     
(1/2): docker-ce-stable/7/x86_64/updateinfo                                                                                                                                                                      |   55 B  00:00:00     
(2/2): docker-ce-stable/7/x86_64/primary_db                                                                                                                                                                      |  58 kB  00:00:00     
元数据缓存已建立
[root@localhost ~]#  yum -y install docker-ce
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
 * base: mirrors.ustc.edu.cn
 * epel: mirrors.ustc.edu.cn
 * extras: mirrors.ustc.edu.cn
 * updates: mirrors.ustc.edu.cn
正在解决依赖关系
--> 正在检查事务
---> 软件包 docker-ce.x86_64.3.20.10.5-3.el7 将被 安装
--> 正在处理依赖关系 container-selinux >= 2:2.74，它被软件包 3:docker-ce-20.10.5-3.el7.x86_64 需要
--> 正在处理依赖关系 containerd.io >= 1.4.1，它被软件包 3:docker-ce-20.10.5-3.el7.x86_64 需要
--> 正在处理依赖关系 docker-ce-cli，它被软件包 3:docker-ce-20.10.5-3.el7.x86_64 需要
--> 正在处理依赖关系 docker-ce-rootless-extras，它被软件包 3:docker-ce-20.10.5-3.el7.x86_64 需要
--> 正在检查事务
---> 软件包 container-selinux.noarch.2.2.119.2-1.911c772.el7_8 将被 安装
---> 软件包 containerd.io.x86_64.0.1.4.4-3.1.el7 将被 安装
---> 软件包 docker-ce-cli.x86_64.1.20.10.5-3.el7 将被 安装
---> 软件包 docker-ce-rootless-extras.x86_64.0.20.10.5-3.el7 将被 安装
--> 正在处理依赖关系 fuse-overlayfs >= 0.7，它被软件包 docker-ce-rootless-extras-20.10.5-3.el7.x86_64 需要
--> 正在处理依赖关系 slirp4netns >= 0.4，它被软件包 docker-ce-rootless-extras-20.10.5-3.el7.x86_64 需要
--> 正在检查事务
---> 软件包 fuse-overlayfs.x86_64.0.0.7.2-6.el7_8 将被 安装
--> 正在处理依赖关系 libfuse3.so.3(FUSE_3.2)(64bit)，它被软件包 fuse-overlayfs-0.7.2-6.el7_8.x86_64 需要
--> 正在处理依赖关系 libfuse3.so.3(FUSE_3.0)(64bit)，它被软件包 fuse-overlayfs-0.7.2-6.el7_8.x86_64 需要
--> 正在处理依赖关系 libfuse3.so.3()(64bit)，它被软件包 fuse-overlayfs-0.7.2-6.el7_8.x86_64 需要
---> 软件包 slirp4netns.x86_64.0.0.4.3-4.el7_8 将被 安装
--> 正在检查事务
---> 软件包 fuse3-libs.x86_64.0.3.6.1-4.el7 将被 安装
--> 解决依赖关系完成

依赖关系解决

========================================================================================================================================================================================================================================
 Package                                                        架构                                        版本                                                            源                                                     大小
========================================================================================================================================================================================================================================
正在安装:
 docker-ce                                                      x86_64                                      3:20.10.5-3.el7                                                 docker-ce-stable                                       27 M
为依赖而安装:
 container-selinux                                              noarch                                      2:2.119.2-1.911c772.el7_8                                       extras                                                 40 k
 containerd.io                                                  x86_64                                      1.4.4-3.1.el7                                                   docker-ce-stable                                       33 M
 docker-ce-cli                                                  x86_64                                      1:20.10.5-3.el7                                                 docker-ce-stable                                       33 M
 docker-ce-rootless-extras                                      x86_64                                      20.10.5-3.el7                                                   docker-ce-stable                                      9.1 M
 fuse-overlayfs                                                 x86_64                                      0.7.2-6.el7_8                                                   extras                                                 54 k
 fuse3-libs                                                     x86_64                                      3.6.1-4.el7                                                     extras                                                 82 k
 slirp4netns                                                    x86_64                                      0.4.3-4.el7_8                                                   extras                                                 81 k

事务概要
========================================================================================================================================================================================================================================
安装  1 软件包 (+7 依赖软件包)

总下载量：102 M
安装大小：424 M
Downloading packages:
(1/8): container-selinux-2.119.2-1.911c772.el7_8.noarch.rpm                                                                                                                                                      |  40 kB  00:00:00     
warning: /var/cache/yum/x86_64/7/docker-ce-stable/packages/docker-ce-20.10.5-3.el7.x86_64.rpm: Header V4 RSA/SHA512 Signature, key ID 621e9f35: NOKEY=-                                               ] 531 kB/s |  49 MB  00:01:42 ETA 
docker-ce-20.10.5-3.el7.x86_64.rpm 的公钥尚未安装
(2/8): docker-ce-20.10.5-3.el7.x86_64.rpm                                                                                                                                                                        |  27 MB  00:01:34     
(3/8): containerd.io-1.4.4-3.1.el7.x86_64.rpm                                                                                                                                                                    |  33 MB  00:02:12     
(4/8): fuse-overlayfs-0.7.2-6.el7_8.x86_64.rpm                                                                                                                                                                   |  54 kB  00:00:01     
(5/8): fuse3-libs-3.6.1-4.el7.x86_64.rpm                                                                                                                                                                         |  82 kB  00:00:02     
(6/8): slirp4netns-0.4.3-4.el7_8.x86_64.rpm                                                                                                                                                                      |  81 kB  00:00:01     
(7/8): docker-ce-rootless-extras-20.10.5-3.el7.x86_64.rpm                                                                                                                                                        | 9.1 MB  00:00:33     
(8/8): docker-ce-cli-20.10.5-3.el7.x86_64.rpm                                                                                                                                                                    |  33 MB  00:01:40     
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
总计                                                                                                                                                                                                    538 kB/s | 102 MB  00:03:15     
从 https://download.docker.com/linux/centos/gpg 检索密钥
导入 GPG key 0x621E9F35:
 用户ID     : "Docker Release (CE rpm) <docker@docker.com>"
 指纹       : 060a 61c5 1b55 8a7f 742b 77aa c52f eb6b 621e 9f35
 来自       : https://download.docker.com/linux/centos/gpg
Running transaction check
Running transaction test
Transaction test succeeded
Running transaction
  正在安装    : 2:container-selinux-2.119.2-1.911c772.el7_8.noarch                                                                                                                                                                  1/8 
setsebool:  SELinux is disabled.
  正在安装    : containerd.io-1.4.4-3.1.el7.x86_64                                                                                                                                                                                  2/8 
  正在安装    : slirp4netns-0.4.3-4.el7_8.x86_64                                                                                                                                                                                    3/8 
  正在安装    : fuse3-libs-3.6.1-4.el7.x86_64                                                                                                                                                                                       4/8 
  正在安装    : fuse-overlayfs-0.7.2-6.el7_8.x86_64                                                                                                                                                                                 5/8 
  正在安装    : 1:docker-ce-cli-20.10.5-3.el7.x86_64                                                                                                                                                                                6/8 
  正在安装    : docker-ce-rootless-extras-20.10.5-3.el7.x86_64                                                                                                                                                                      7/8 
  正在安装    : 3:docker-ce-20.10.5-3.el7.x86_64                                                                                                                                                                                    8/8 
  验证中      : 1:docker-ce-cli-20.10.5-3.el7.x86_64                                                                                                                                                                                1/8 
  验证中      : fuse3-libs-3.6.1-4.el7.x86_64                                                                                                                                                                                       2/8 
  验证中      : fuse-overlayfs-0.7.2-6.el7_8.x86_64                                                                                                                                                                                 3/8 
  验证中      : slirp4netns-0.4.3-4.el7_8.x86_64                                                                                                                                                                                    4/8 
  验证中      : 2:container-selinux-2.119.2-1.911c772.el7_8.noarch                                                                                                                                                                  5/8 
  验证中      : 3:docker-ce-20.10.5-3.el7.x86_64                                                                                                                                                                                    6/8 
  验证中      : docker-ce-rootless-extras-20.10.5-3.el7.x86_64                                                                                                                                                                      7/8 
  验证中      : containerd.io-1.4.4-3.1.el7.x86_64                                                                                                                                                                                  8/8 

已安装:
  docker-ce.x86_64 3:20.10.5-3.el7                                                                                                                                                                                                      

作为依赖被安装:
  container-selinux.noarch 2:2.119.2-1.911c772.el7_8    containerd.io.x86_64 0:1.4.4-3.1.el7    docker-ce-cli.x86_64 1:20.10.5-3.el7    docker-ce-rootless-extras.x86_64 0:20.10.5-3.el7    fuse-overlayfs.x86_64 0:0.7.2-6.el7_8   
  fuse3-libs.x86_64 0:3.6.1-4.el7                       slirp4netns.x86_64 0:0.4.3-4.el7_8     

完毕！
[root@localhost ~]#  yum -y install docker-ce
已加载插件：fastestmirror, langpacks
Loading mirror speeds from cached hostfile
 * base: mirrors.ustc.edu.cn
 * epel: mirrors.ustc.edu.cn
 * extras: mirrors.ustc.edu.cn
 * updates: mirrors.ustc.edu.cn
软件包 3:docker-ce-20.10.5-3.el7.x86_64 已安装并且是最新版本
无须任何处理
[root@localhost ~]# systemctl start docker
[root@localhost ~]# systemctl status docker
● docker.service - Docker Application Container Engine
   Loaded: loaded (/usr/lib/systemd/system/docker.service; disabled; vendor preset: disabled)
   Active: active (running) since 四 2021-03-18 10:19:58 CST; 6s ago
     Docs: https://docs.docker.com
 Main PID: 75153 (dockerd)
    Tasks: 10
   Memory: 45.0M
   CGroup: /system.slice/docker.service
           └─75153 /usr/bin/dockerd -H fd:// --containerd=/run/containerd/containerd.sock

3月 18 10:19:57 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:57.463595989+08:00" level=info msg="scheme \"unix\" not registered, fallback to default scheme" module=grpc
3月 18 10:19:57 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:57.463623962+08:00" level=info msg="ccResolverWrapper: sending update to cc: {[{unix:///run/containerd/containerd.sock  <nil> 0 <nil>}] ...>}" module=grpc
3月 18 10:19:57 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:57.463645716+08:00" level=info msg="ClientConn switching balancer to \"pick_first\"" module=grpc
3月 18 10:19:57 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:57.501381304+08:00" level=info msg="Loading containers: start."
3月 18 10:19:58 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:58.100079703+08:00" level=info msg="Default bridge (docker0) is assigned with an IP address 172.17.0.0/16. Daemon option --bip can be us...red IP address"
3月 18 10:19:58 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:58.225075484+08:00" level=info msg="Loading containers: done."
3月 18 10:19:58 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:58.250995308+08:00" level=info msg="Docker daemon" commit=363e9a8 graphdriver(s)=overlay2 version=20.10.5
3月 18 10:19:58 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:58.251112062+08:00" level=info msg="Daemon has completed initialization"
3月 18 10:19:58 localhost.localdomain systemd[1]: Started Docker Application Container Engine.
3月 18 10:19:58 localhost.localdomain dockerd[75153]: time="2021-03-18T10:19:58.312163254+08:00" level=info msg="API listen on /var/run/docker.sock"
Hint: Some lines were ellipsized, use -l to show in full.
[root@localhost ~]# systemctl enable docker
Created symlink from /etc/systemd/system/multi-user.target.wants/docker.service to /usr/lib/systemd/system/docker.service.
[root@localhost ~]# docker pull portainer/portainer
Using default tag: latest
latest: Pulling from portainer/portainer
d1e017099d17: Pull complete 
717377b83d5c: Pull complete 
Digest: sha256:f8c2b0a9ca640edf508a8a0830cf1963a1e0d2fd9936a64104b3f658e120b868
Status: Downloaded newer image for portainer/portainer:latest
docker.io/portainer/portainer:latest
[root@localhost ~]# docker images 
REPOSITORY            TAG       IMAGE ID       CREATED        SIZE
portainer/portainer   latest    62771b0b9b09   7 months ago   79.1MB
[root@localhost ~]# docker run -d --name portainer  -p 9000:9000 -v /var/run/docker.sock:/var/run/docker.sock -v /data/portainer_data:/data 10383f5b5720
Unable to find image '10383f5b5720:latest' locally
docker: Error response from daemon: pull access denied for 10383f5b5720, repository does not exist or may require 'docker login': denied: requested access to the resource is denied.
See 'docker run --help'.
[root@localhost ~]# ^C
[root@localhost ~]# docker run -d --name portainer  -p 9000:9000 -v /var/run/docker.sock:/var/run/docker.sock -v /data/portainer_data:/data docker run -d --name portainer  -p 9000:9000 -v /var/run/docker.sock:/var/run/docker.sock -v /data/portainer_data:/data 10383f5b5720
Unable to find image 'docker:latest' locally
^C
[root@localhost ~]# docker run -d --name portainer  -p 9000:9000 -v /var/run/docker.sock:/var/run/docker.sock -v /data/portainer_data:/data 62771b0b9b09
bce6b03b4f82f4c8ab79017681f94a94ba66e291bb3e9aedaadef688254697cc
[root@localhost ~]# docker ps -l
CONTAINER ID   IMAGE          COMMAND        CREATED          STATUS          PORTS                    NAMES
bce6b03b4f82   62771b0b9b09   "/portainer"   13 seconds ago   Up 11 seconds   0.0.0.0:9000->9000/tcp   portainer
[root@localhost ~]# docker ps
CONTAINER ID   IMAGE          COMMAND        CREATED          STATUS          PORTS                    NAMES
bce6b03b4f82   62771b0b9b09   "/portainer"   16 seconds ago   Up 14 seconds   0.0.0.0:9000->9000/tcp   portainer
[root@localhost ~]# docker run -itd --name urlos --restart always -p 9968:9968 -p 9966:9966 -v /data/urlos:/data/urlos urlos/urlos
Unable to find image 'urlos/urlos:latest' locally
latest: Pulling from urlos/urlos
d519e2592276: Pull complete 
d22d2dfcfa9c: Pull complete 
b3afe92c540b: Pull complete 
0a12cf65874f: Pull complete 
a20602cd9445: Pull complete 
3e92bdf6a658: Pull complete 
ed7d46f87c1f: Pull complete 
06b38fc59f54: Pull complete 
Digest: sha256:22466cdd477267c2ee74ad90b88d24e92158ca1260e0524d1d7bf59322e9f1fb
Status: Downloaded newer image for urlos/urlos:latest
37c699062d8d8bb3e56dd58095562399924ac727245a37ebfeee603c51814d39
[root@localhost ~]#

2、安装chrome浏览器

[root@skycaiji001 ~]# google-chrome-stable --no-sandbox --headless --disable-gpu --screenshot https://www.baidu.com/
[0329/101048.035635:WARNING:headless_browser_main_parts.cc(83)] Cannot create Pref Service with no user data dir.
[0329/101051.782237:INFO:CONSOLE(203)] "A parser-blocking, cross site (i.e. different eTLD+1) script, https://ss1.bdstatic.com/5eN1bjq8AAUYm2zgoY3K/r/www/cache/static/protocol/https/bundles/polyfill_9354efa.js, is invoked via document.write. The network request for this script MAY be blocked by the browser in this or a future page load due to poor network connectivity. If blocked in this page load, it will be confirmed in a subsequent console message. See https://www.chromestatus.com/feature/5718547946799104 for more details.", source: https://www.baidu.com/ (203)
[0329/101051.783921:INFO:CONSOLE(203)] "A parser-blocking, cross site (i.e. different eTLD+1) script, https://ss1.bdstatic.com/5eN1bjq8AAUYm2zgoY3K/r/www/cache/static/protocol/https/bundles/polyfill_9354efa.js, is invoked via document.write. The network request for this script MAY be blocked by the browser in this or a future page load due to poor network connectivity. If blocked in this page load, it will be confirmed in a subsequent console message. See https://www.chromestatus.com/feature/5718547946799104 for more details.", source: https://www.baidu.com/ (203)
[0329/101051.783957:INFO:CONSOLE(203)] "A parser-blocking, cross site (i.e. different eTLD+1) script, https://ss1.bdstatic.com/5eN1bjq8AAUYm2zgoY3K/r/www/cache/static/protocol/https/global/js/all_async_search_1646f36.js, is invoked via document.write. The network request for this script MAY be blocked by the browser in this or a future page load due to poor network connectivity. If blocked in this page load, it will be confirmed in a subsequent console message. See https://www.chromestatus.com/feature/5718547946799104 for more details.", source: https://www.baidu.com/ (203)
[0329/101052.068252:INFO:CONSOLE(211)] "每一个星球都有一个驱动核心，
每一种思想都有影响力的种子。
感受世界的温度，
年轻的你也能成为改变世界的动力，
百度珍惜你所有的潜力。


[root@skycaiji001 ~]# chrome -version
Google Chrome 89.0.4389.90

 

3、蓝天采集器

URLOS
http://10.0.0.79:9968/
urlos 
urlos


蓝天采集器 
http://10.0.0.79:8080/index.php
admin 
123456

蓝天采集器2.3.3使用手册
http://www.skycaiji.com/manual

天海行者
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
站长利器,全自动采集发布,开源免费-蓝天采集器-教程(2-全局设置)
kenywon的博客
10-23 1426
进入设置-采集设置,即可对任务进行全局默认设置,后期采集任务设置,可以进行个性化设置: 这里可以根据自己需求设置,第一项是采集设置,有一点需要特别说明一下,就是开启cli模式.如果你使用宝塔面板,在php后台禁用函数就可以了。禁掉proc-open这个就ok,如图: 第二项是图片本地化,如无特殊需要,保持默认即可: 第三项页面渲染,非特殊情况不用设置 第四项代理,如果你的ip被采集方BAN,可以考虑使用代理设置,非特殊情况不用设置. 第五项翻译,目前集成了百度,腾讯,有道翻译...
5分钟快速安装蓝天采集器
puiying的博客
07-06 5403
简介 蓝天采集器是一款免费的数据采集发布爬虫软件，采用php+mysql开发，可部署在云服务器，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预。 安装 为了方便部署和解决环境兼容性等问题，采用docker来部署安装skycaiji。 首先安装Docker容器管理面板URLOS，请参考官方文档：https://www.URLOS.com/center-...
蓝天采集器自动化采集发布
字节网盘SEO工具
05-25 395
介绍： 致力于网站数据自动化采集发布，系统采用PHP+MySQL开发，可部署在云端服务器，使数据采集便捷化，智能化，云端化 网盘下载地址： http://kekewl.cc/TbiPpCgo2RQ0 图片：
蓝天采集器安装环境要求
sr8899的博客
01-25 4870
蜀戎网分享：蓝天采集器安装下载操作教程 m.srso.cn
蓝天采集器 v1.3
10-11
蓝天采集器是一款的数据采集发布软件，可部署在云端服务器，几乎能采集所有类型的网页，无缝耦合各类CMS建站程序，免登陆实时发布数据，软件实现定时定量全自动采集发布，
本地安装蓝天采集器教程
quitesea的博客
10-18 2159
资源下载 蓝天采集器 https://www.skycaiji.com/ PHPStudy https://www.xp.cn/ 视频教程 高清视频查看： https://www.caiji321.com/archives/15.html 查看视频： 本地安装蓝天采集器 ...
蓝天采集系统的安装和遇到的问题及解决方案
weixin_30654583的博客
09-03 1178
关于软件 蓝天采集器（SkyCaiji），致力于网站数据自动化采集发布，系统采用PHP+Mysql开发，可部署在云端服务器，使数据采集便捷化，智能化，云端化，让您随时随地移动办公。 内容发布 无缝对接各类CMS建站程序，实现免登陆导入数据，支持自定义数据发布插件，也可直接导入数据库、存储为Excel文件、生成API接口等 数据采集 支持多级、多页、分页采集，自定义采集规则（支持...
初探PHP开源采集器----蓝天采集器
最新发布
astarblog的博客
07-30 1915
先去目录/plugin/release/diy目录中创建Astar.php,下面是我的astar.php的源码
蓝天采集器 v1.2
10-13
2. **云部署**：蓝天采集器可以部署在云端服务器，这提供了远程操作和管理的便利，同时减少了本地资源的消耗，使得用户能够随时随地进行数据采集工作。 3. **自动化采集与发布**：软件具备定时定量的全自动采集和...
蓝天采集器
08-15
综上所述，蓝天采集器是一款高效且灵活的数据采集解决方案，通过云部署、强大的网页解析能力、与CMS的深度整合以及自动化任务调度，为用户提供了便捷的数据获取和发布服务。配合压缩包中的各种配置文件，用户可以...
skycaiji:蓝天采集器是一种免费的数据采集发布爬虫软件，采用php + mysql开发，可部署在云服务器上，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预！是网页大数据采集软件中完全跨平台的云端爬虫系统
04-01
skycaiji:蓝天采集器是一种免费的数据采集发布爬虫软件，采用php + mysql开发，可部署在云服务器上，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登录实时发布数据，全自动无需人工干预！是网页大数据采集软件中完全跨平台的云端爬虫系统
蓝天采集器【数据采集云端爬虫可一键部署】2019最新版
09-30
蓝天采集器是一款免费的数据采集发布软件，可部署在云端服务器，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登陆实时发布数据，软件实现定时定量全自动采集发布，无需人工干预！是大数据、云时代网站数据自动化采集发布的最佳云端爬虫软件。 关于软件： SkyCaiji（蓝天数据采集发布系统），致力于网站数据自动化采集发布，使数据采集便捷化、智能化、云端化。系统可部署在云端服务器，实现移动化办公。 数据采集： 自定义采集规则（支持正则、XPATH、JSON等）精准匹配任意信息流，几乎能采集所有类型的网页，绝大多数文章类型页面内容可实现智能识别。 内容发布： 无缝耦合各类CMS建站程序，实现免登陆导入数据，支持自定义数据发布插件，也可以直接导入数据库、存储为Excel文件、生成API接口等。 自动化及云平台： 软件实现定时定量全自动采集发布，无需人工干预！内置云平台，用户可分享及下载采集规则，发布供求信息以及社区求助、交流等。
device-mapper-event-1.02.149-8.el7.x86_64.rpm
11-30
离线安装包，亲测可用
关关采集器安装及使用
12-21
关关采集器安装及使用，最新版采集器全程编写规则和采集教程
蓝天采集器自动采集系统
08-14
蓝天采集器是一款的数据采集发布软件，可部署在云端服务器，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登陆实时发布数据，软件实现定时定量全自动采集发布，无需人工干预！是大数据、云时代网站数据...
蓝天采集器 v2.1
10-02
6. **云端部署**：将蓝天采集器部署在云端，不仅可以降低硬件成本，还能确保24/7不间断运行，不受本地设备限制。同时，云服务通常提供高可用性和数据备份，保证了数据的安全性和服务稳定性。 7. **易用性与技术支持...
蓝天采集器-PHP
06-21
蓝天采集器是一款免费的数据采集发布软件，可部署在云端服务器，几乎能采集所有类型的网页，无缝对接各类CMS建站程序，免登陆实时发布数据，软件实现定时定量全自动采集发布，无需人工干预！是大数据、云时代网站...
站长利器,全自动采集发布,开源免费-蓝天采集器-教程(1-简介)
kenywon的博客
10-20 1889
作为一个小白站长,接触了很多自动采集的软件(手头拮据,所以都是免费的),从火车头,杰奇,YGBOOK,苹果CMS,WP-AutoPost,等等,每个软件都有难以容忍的缺陷,或者采集规则过时,不适应JSON匹配,或者代码加密,你永远不知道有没有后门,或者支持的CMS单一,不能满足需求,等等,直到遇到了蓝天采集器,目前我遇到的最完美的采集软件. 我选择该软件,基于以下几点: 1.软件开源免费,作者支持给力:后台没有加密代码,小白拿来可以直接用,有能力的朋友可以二开,面世一来一直在更新,我测试过20多个.
站长利器,全自动采集发布,开源免费-蓝天采集器-教程(3-采集设置)
kenywon的博客
11-01 2659
抱歉各位,前两天有事情,一直没更新.今天开始讲解蓝天采集器的采集设置: 1.选择任务-添加任务: 2.填写任务名称,任务分组.方便后期管理,如果不选择更多选项,则默认为通用设置选项,参考(教程2),填写完成.点击保存.然后选择②采集器设置 3.采集设置页面,自动补全网址这项必须选择,请求头信息建议选择,其他根据个人需要选择. 4.起始网址设置,一般选择批量生成,支持JSON格式,也就是现在的主流网站基本可以全部适应: 5.内容页网址,推荐使用匹配内容页网址,支持三种格...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值