数心-CSDN博客

原创在阿里云中搭建大数据实验环境

云计算是和自来水一样的商业模式。有了自来水，我们可以不用自己挖井，就可以快速、便捷、廉价地获得水资源。而有了云计算，我们就可以不用自己建机房、买设备、维护系统，就可以快速、便捷、廉价地获得IT资源（CPU、内存、带宽、存储和应用系统等）。正如人类社会已经全面从挖井取水过渡到自来水阶段一样，人类社会最终在IT资源获取方式方面，也会全面过渡到云计算阶段。大数据与云计算相辅相成，密不可分。云计算为大数据提供了廉价的底层基础设施，大数据为云计算提供了用武之地。第1步：购买阿里云的云服务器ECS（访问）第2步：从

2021-06-09 15:20:28 775

转载全面认识数据指标体系

数据指标就是一种定量思维方式的体现，他至少有两个作用：1 想不出来数据指标，说明是对这块事（团队要做的事）没有一个清晰的认知2 想得清楚数据指标，却做不出来，说明对整个团队缺少掌控，不能推动落地

2023-12-19 19:11:04 59 1

原创（九）在阿里云ECS的Ubuntu中安装Scala

可以到Scala官网下载Scala2.11.8安装包，或者，直接到笔者提供的百度云盘下载。笔者已经把Scala安装包保存到了百度云盘中，可以点击这里直接从百度云盘下载文件scala-2.11.8.tgz（提取码：gx0b）。下载成功以后，可以在本地电脑，打开FTP软件，使用linziyu用户名登录到阿里云ECS的Ubuntu系统，把scala-2.11.8.tgz通过FTP软件上传到“/home/linziyu/Downloads”目录下。然后，在本地电脑通过VNC Viewer连接远程的阿里云ECS实例

2021-06-09 16:04:39 196

原创（八）在ECS实例的Ubuntu系统中安装Hadoop

在阿里云ECS的Ubuntu系统中安装Hadoop，和在本地电脑安装Hadoop，基本相似，但是，也有略微差别，必须正确配置，否则，会导致无法顺利启动。安装Hadoop之前，请确保已经根据前面的博客《在ECS实例的Ubuntu系统中安装Java》完成了Java的安装。我们已经把Hadoop的安装包hadoop-2.7.1.tar.gz放在了百度云盘（建议选择2.7.1版本，确保和本教程的其他大数据软件在版本上能够兼容，选择其他Hadoop版本，可能导致其他软件会运行出错），可以点击这里到百度云盘下载Had

2021-06-09 16:03:42 516

原创（七）在ECS实例的Ubuntu系统中安装Java

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。无论是Hadoop，还是Spark，都需要Java运行环境，因此，需要在ECS实例的Ubuntu系统中安装Java。由于本教程使用Hadoop2.7.1和Spark2.1.0（要求必须Java8及以上版本），因此，需要安装Java8。如果你的ECS实例中的Ubuntu是Java7，那么版本太旧，必须删除，然后，安装Java8,。笔者在选择镜像时，阿里云在笔者购买的E

2021-06-09 16:01:16 354

原创（六）使用FTP软件向ECS实例中的Ubuntu系统上传和下载文件

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。在大数据实验操作中，我们经常需要从本地电脑上传数据或者软件到阿里云ECS的Ubuntu系统中，或者需要从ECS的Ubuntu系统中下载数据到本地电脑。因此，需要了解如何使用FTP软件向ECS实例中的Ubuntu系统上传和下载文件。首先，请下载一款FTP工具。笔者已经把FTP软件放到了百度云盘中，请点击这里到百度云盘下载FTP软件（提取码：gx0b），软件名称为Fil

2021-06-09 15:59:35 448

原创（五）使用VNC远程连接ECS实例中的Ubuntu系统

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。通过网页中的管理控制台来登录ECS实例中的Ubuntu系统，对于开发者而言，使用体验不是很好。建议在本地电脑使用VNC远程连接ECS实例中的Ubuntu系统，可以带来更好的体验。什么是VNCVNC基本上是由两部分组成：一部分是客户端的应用程序(vncviewer)；另外一部分是服务器端的应用程序(vncserver)。VNC的基本运行原理和一些Windows下

2021-06-09 15:52:15 471

原创（四）使用Putty软件实现SSH登录到Ubuntu系统

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。假设我们在本地使用台式机或笔记本电脑，有时候，我们要在远程的云服务器ECS的Ubuntu中执行一些Shell命令来完成一些操作，如果采用阿里云网页管理控制台的方式，非常繁琐（要访问官网、登录账户、发起远程连接、进入Ubuntu系统、打开终端），因此，建议在本地电脑上，使用Putty软件实现SSH登录到远程ECS实例中的Ubuntu系统，这样做非常方便快捷。Putt

2021-06-09 15:47:48 679

原创（三）为Ubuntu系统添加新的普通用户

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。在使用Ubuntu系统的过程中，一般不建议直接使用root用户，建议新建一个或多个普通用户，平时的大数据实验操作都使用普通用户登录Ubuntu系统。购买了阿里云的云服务器ECS实例以后，就可以打开浏览器，通过网页访问阿里云官网，通过网页中的管理控制台，使用root用户来登录ECS实例中的Ubuntu系统，然后，根据前面博客介绍的方法，在Ubuntu系统中打开一个命令

2021-06-09 15:46:15 1076

原创（二）从网页的控制台登录云服务器ECS中的Ubuntu系统

提示：本教程是一个系列文章，请务必按照本教程首页中给出的各个步骤列表，按照先后顺序一步步进行操作，本博客假设你已经顺利完成了之前的操作步骤。购买了阿里云的云服务器ECS实例以后，就可以打开浏览器，通过网页访问阿里云官网，通过网页中的管理控制台，来登录ECS实例中的Ubuntu系统。访问阿里云官网，在官网的右上角（如下图所示），点击“控制台”按钮。在弹出的网页中，在网页左上角，如下图所示，点击“云服务器ECS”。然后，在弹出的网页中，如下图所示，点击“云服务器ECS”。然后，在弹出的网页中，如下图所

2021-06-09 15:39:30 512

weixin_42210429的博客