Windows PC上创建大数据职业技能竞赛实验环境之一--基本环境的搭建

1 大数据职业竞赛环境的基础要求

软件环境

设备类型

软件类别

软件名称、版本号

竞赛服务器

竞赛环境大数据集群操作系统

CentOS 7

大数据平台组件

Hadoop 2.7.7

Hive 2.3.4 Spark 2.1.1 Kafka 2.0.0 Redis 4.0.1 Flume 1.7.0 Flink 1.10.2 JDK 1.8 MySQL 5.7

开发客户端

PC操作系统

Ubuntu18.04 64位

浏览器

Chrome

开发语言

Scala 2.11

开发工具

IDEA 2019（Community Edition）

Visual Studio Code 1.58

数据可视化组件

Vue.js 3.0

Echarts 5.1

文档编辑器

WPS linux版

2 PC Windows 10启用WSL 2（Windows subsystem for Linux）

参照微软WSL安装文档： 安装 WSL | Microsoft Docs​https://docs.microsoft.com/zh-cn/windows/wsl/install

要求运行 Windows 10 版本 2004 及更高版本（内部版本 19041 及更高版本）或 Windows 11。如果是旧版，或只是不想使用 install 命令并希望获得分步指引，参阅 旧版 WSL 手动安装步骤https://docs.microsoft.com/zh-cn/windows/wsl/install-manual

管理员账户运行Windows命令行：

wsl --list --online

NAME            FRIENDLY NAME
Ubuntu          Ubuntu
Debian          Debian GNU/Linux
kali-linux      Kali Linux Rolling
openSUSE-42     openSUSE Leap 42
SLES-12         SUSE Linux Enterprise Server v12
Ubuntu-16.04    Ubuntu 16.04 LTS
Ubuntu-18.04    Ubuntu 18.04 LTS
Ubuntu-20.04    Ubuntu 20.04 LTS

wsl --install -d Ubuntu-20.04

安装 WSL 后，需要为新安装的 Linux 发行版创建用户帐户和密码，比如用户名wslu，两次确认输入用户密码。

查看安装WSL：

wsl -l -v

  NAME                   STATE           VERSION
* Ubuntu20.04LTS         Running         2

可以看到现在运行的WSL 2，Ubuntu20.04LTS。

如果显示WSL版本1，需进行转换，变成WSL 2：

wsl --set-version Ubuntu20.04LTS 2

3 安装Docker Desktop

WSL 上的 Docker 容器入门 | Microsoft Docshttps://docs.microsoft.com/zh-cn/windows/wsl/tutorials/wsl-containers

• 确保计算机运行的是 Windows 10（已更新到版本 2004 的内部版本 18362 或更高版本）。

• 下载 Docker Desktop 并按照安装说明进行操作。

1. 安装后，从 Windows 开始菜单启动 Docker Desktop，然后从任务栏的隐藏图标菜单中选择 Docker 图标。 右键单击该图标以显示 Docker 命令菜单，然后选择“设置”。 

   

2. 确保在“设置”>“常规”中选中“使用基于 WSL 2 的引擎”。 

   

3. 通过转到“设置”>“资源”