VirtualBox6.1版本和Ubuntu16.04版本的安装教程,以及各种环境的配置(搭配林子雨老师教程)

1、安装VirtualBox

教程网址:在Windows中使用VirtualBox安装Ubuntu虚拟机(2020年7月版本)_厦大数据库实验室博客 (xmu.edu.cn)

林子雨老师给的是Ubuntukylin16.04版本的,可以考虑升级成18的:ubuntu16怎么升级到ubuntu18? - 知乎 (zhihu.com)

2、在VirtualBox上实现Windows与Ubuntu之间的连接:

(15条消息) virtualBox实现windows和Ubuntu之间的复制粘贴_virtualbox 粘贴__洋的博客-CSDN博客

如果无法复制,光盘读取不到,用来网上的很多方法,就用这个:

VirtualBox-Ubuntu-主机和虚拟机实现互相复制粘贴 - 夏夜星空晚风 - 博客园 (cnblogs.com)

(16条消息) VirtualBox虚拟机与主机之间复制粘贴设置以及文件拖拽virtualbox拖拽文件KirioYoLo的博客-CSDN博客

3、Ubuntu语言设置->从中文转到英文:

(15条消息) Linux 系统语言切换 ---- Linux Ubuntu 系统语言切换为英文linux修改系统语言为英文YanWennian的博客-CSDN博客

4、实现在Ubuntu上输入中文:(15条消息) ubuntu 16.04安装中文输入法ubuntu16.04 中文输入法一缕阳光best的博客-CSDN博客

5、在Ubuntu中,可以通过以下命令来查看当前已安装的Python版本: ls /usr/bin/python*

​ 执行此命令后,将列出所有可用的Python版本。

6、安装pip: sudo apt install python-pip

    python-setuptools-doc是Python的第三方库之一,它提供了与Python包相关的文档和教程。如果您尝试运行python-setuptools-doc命令时出现“command not found”错误,则可能是因为该库未在系统中安装。
​
要解决该问题,请尝试使用以下命令在Ubuntu中安装python-setuptools-doc:
sudo apt-get install python-setuptools-doc

7、安装Hadoop伪分布式:

Hadoop3.1.3安装教程单机/伪分布式配置Hadoop3.1.3/Ubuntu18.04(16.04)_厦大数据库实验室博客 (xmu.edu.cn)

如果在启动Hadoop的时候有很多的警告:

(16条消息) 解决 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform...警告_青玄叶鹤的博客-CSDN博客

8、安装spark2.4.0

Spark安装和编程实践(Spark2.4.0)_厦大数据库实验室博客 (xmu.edu.cn)

Linux Shell中的管道命令

Linux Shell中的管道命令_厦大数据库实验室博客 (xmu.edu.cn)

9、HBase的安装大数据原理与应用 第四章 分布式数据库HBase 学习指南_厦大数据库实验室博客/

如果在显示HBase版本时有出现:中文显示:无效变量名,错误:找不到或无法加载主类 可能是Hadoop和HBase包冲突所致 ,用下面这篇文章可以解决这个问题,

(16条消息) Hbase 出现:/usr/local/hadoop/bin/../libexec/hadoop-functions.sh: line 2395: HADOOP_ORG.APACHE.HADOOP.H_BA..的博客-CSDN博客

10、安装MySQL数据库

Ubuntu安装MySQL及常用操作_厦大数据库实验室博客 (xmu.edu.cn)

报错:MySQL:ERROR 1698 (28000): Access denied for user ‘root’@’localhost’

MySQL:ERROR 1698 (28000): Access denied for user ‘root’@’localhost’_厦大数据库实验室博客 (xmu.edu.cn)

11、安装anaconda和Jupyter Notebook

使用Jupyter Notebook调试PySpark程序_厦大数据库实验室博客 (xmu.edu.cn)

我生成的密码字符串:c15e1a902a8c:459602f7d7b7cf05159cbe2ed53a781e67cd2437,之后用于配置密码

12、安装Sqoop

Ubuntu安装Sqoop_厦大数据库实验室博客 (xmu.edu.cn)

使用命令:sqoop list-databases --connect jdbc:mysql://127.0.0.1:3306/ --username root -P,时报错:sqoop: command not found

13、安装hive

Hive3.1.2安装指南_厦大数据库实验室博客 (xmu.edu.cn)

在启动的时候可能会出现报错Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot create directory

解决办法:没有关闭安全模式,直接强制离开安全模式就行了

hdfs dfsadmin -safemode leave

14、安装Eclipse

大数据技术原理与应用 第三章 分布式文件系统HDFS 学习指南_厦大数据库实验室博客 (xmu.edu.cn)

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值