特讯网络-CSDN博客

原创 Docker 的安装

Docker 是一种容器技术，它可以将应用和环境等进行打包，形成一个独立的，类似于 iOS 的 APP 形式的「应用」，这个应用可以直接被分发到任意一个支持 Docker 的环境中，通过简单的命令即可启动运行。Docker 是一种最流行的容器化实现方案。和虚拟化技术类似，它极大的方便了应用服务的部署；又与虚拟化技术不同，它以一种更轻量的方式实现了应用服务的打包。使用 Docker 可以让每个应用彼此相互隔离，在同一台机器上同时运行多个应用，不过他们彼此之间共享同一个操作系统。Docker 的优势在于，它可以

2021-11-14 23:17:41 1111

原创 Helm 的安装

Helm 是 Kubernetes 的包管理器。相关链接官网：Helm 中文文档：Helm | Docs该指南展示了如何安装 Helm CLI。Helm 可以用源码或构建的二进制版本安装。下面的内容来自：Helm | 安装Helm，最新内容以该链接为准。用 Helm 项目安装Helm 项目提供了两种获取和安装 Helm 的方式。这是官方提供的获取 Helm 发布版本的方法。另外， Helm 社区提供了通过不同包管理器安装 Helm 的方法。这些方法可以在下面的官方方法之后看到。用

2021-11-14 23:16:39 250

原创 Docker-Compose 的安装

Compose 是用于定义和运行多容器 Docker 应用程序的工具。通过 Compose，您可以使用 YML 文件来配置应用程序需要的所有服务。然后，使用一个命令，就可以从 YML 文件配置中创建并启动所有服务。如果你还不了解 YML 文件配置，可以先阅读YAML 入门教程。Compose 使用的三个步骤：使用 Dockerfile 定义应用程序的环境。使用 docker-compose.yml 定义构成应用程序的服务，这样它们可以在隔离环境中一起运行。最后，执行 docker-co.

2021-11-14 23:15:50 88

原创 MySQL 的安装

MySQL 是一个轻量级的关系型数据库，以表的形式来存储数据，本节我们来了解下它的安装方式。相关链接官方网站：MySQL 下载地址：MySQL :: MySQL Downloads 中文教程：MySQL 教程 | 菜鸟教程Windows 下的安装对于 Windows 来说，最安全稳妥的方式就是直接到官网下载安装包进行安装。可以访问官方网站下载，MySQL :: Download MySQL Community Server，如图所示：点击最大的 MySQL Installer 即可

2021-11-13 19:00:34 1164

原创 Splash 的安装

Splash 是一个 JavaScript 渲染的工具，本节来介绍一下它的安装方式。准备工作Splash 建议的安装方式是通过 Docker，安装是通过 Docker 安装，在这之前请确保已经正确安装好了 Docker，可以参考：https://setup.scrape.center/docker。安装有了 Docker，只需要一键启动 Splash 即可，命令如下： 1 docker run -p 8050:8050 scrapinghub/splas

2021-11-13 18:59:12 8466

原创 adbutils 的安装

adbutils 是 Python 中 adb 命令行的封装包。相关链接GitHub：https://github.com/openatx/adbutils PyPi：adbutils · PyPI安装方法pip 安装推荐使用 pip3 安装，命令如下： 1 pip3 install adbutils 命令执行完毕之后即可完成安装。验证安装安装完成之后，可以在 Python 命令行下测试，另外确保你的手机已经和电脑通过 USB

2021-11-13 18:57:47 3065 1

原创 retrying 库的安装

retrying 提供了一些装饰器，使得我们非常方便地配置重试机制。本节我们了解下 retrying 的安装方式。相关链接GitHub：https://github.com/rholder/retrying PyPi：retrying · PyPI安装方法pip 安装推荐使用 pip3 安装，命令如下： 1 pip3 install retrying 命令执行完毕之后即可完成安装。验证安装安装完成之后，可以在 Python

2021-11-13 18:57:03 1011

原创 Pyppetter 库的安装

Pyppeteer 是一个自动化测试框架，是 Puppteer 的 Python 版本。相关链接GitHub：https://github.com/pyppeteer/pyppeteer 文档：Pyppeteer’s documentation — Pyppeteer 0.0.25 documentation安装pip 安装推荐使用 pip3 安装，命令如下： 1 pip3 install pyppeteer 命令执行完毕之后即可完成安

2021-11-13 18:54:03 6450

原创 Redis 库的安装

Redis 是一个基于内存的高效的非关系型数据库，本节我们来了解下 Redis 在各个平台的安装过程。相关链接官方网站：https://redis.io 官方文档：Redis 中文官网：http://www.redis.cn GitHub：https://github.com/antirez/redis 中文教程：Redis 教程 | 菜鸟教程 Redis Desktop Manager：https://redisdesktop.com Redis Desktop Manager Git

2021-11-13 18:51:40 1154

原创 Python 爬虫入门四之 Urllib 库的高级用法

1. 设置 Headers有些网站不会同意程序直接用上面的方式进行访问，如果识别有问题，那么站点根本不会响应，所以为了完全模拟浏览器的工作，我们需要设置一些 Headers 的属性。首先，打开我们的浏览器，调试浏览器 F12，我用的是 Chrome，打开网络监听，示意如下，比如知乎，点登录之后，我们会发现登陆之后界面都变化了，出现一个新的界面，实质上这个页面包含了许许多多的内容，这些内容也不是一次性就加载完成的，实质上是执行了好多次请求，一般是首先请求 HTML 文件，然后加载 JS，CSS 等等，经

2021-11-13 14:29:56 102

原创 Python 爬虫入门三之 Urllib 库的基本使用

那么接下来，小伙伴们就一起和我真正迈向我们的爬虫之路吧。1. 分分钟扒一个网页下来怎样扒网页呢？其实就是根据 URL 来获取它的网页信息，虽然我们在浏览器中看到的是一幅幅优美的画面，但是其实是由浏览器解释才呈现出来的，实质它是一段 HTML 代码，加 JS、CSS，如果把网页比作一个人，那么 HTML 便是他的骨架，JS 便是他的肌肉，CSS 便是它的衣服。所以最重要的部分是存在于 HTML 中的，下面我们就写个例子来扒一个网页下来。 1234 impor

2021-11-13 14:23:27 754

原创 Python 爬虫利器二之 Beautiful Soup 的用法

上一节我们介绍了正则表达式，它的内容其实还是蛮多的，如果一个正则匹配稍有差池，那可能程序就处在永久的循环之中，而且有的小伙伴们也对写正则表达式的写法用得不熟练，没关系，我们还有一个更强大的工具，叫 Beautiful Soup，有了它我们可以很方便地提取出 HTML 或 XML 标签中的内容，实在是方便，这一节就让我们一起来感受一下 Beautiful Soup 的强大吧。1. Beautiful Soup 的简介简单来说，Beautiful Soup 是 python 的一个库，最主要的功能是从网

2021-11-13 14:21:27 1011

原创 Python2 爬虫学习系列教程

前言之前我们用了 urllib 库，这个作为入门的工具还是不错的，对了解一些爬虫的基本理念，掌握爬虫爬取的流程有所帮助。入门之后，我们就需要学习一些更加高级的内容和工具来方便我们的爬取。那么这一节来简单介绍一下 requests 库的基本用法。注：Python 版本依然基于 2.7官方文档以下内容大多来自于官方文档，本文进行了一些修改和总结。要了解更多可以参考官方文档安装利用 pip 安装 1 $ pip install requests ..

2021-11-13 14:18:43 218