linux
文章平均质量分 55
caroline_richboom
大数据小白的自学之路
展开
-
使用VMware Workstation安装 Linux虚拟环境
打开VMware Workstation界面选择创建新的虚拟机建议直接选择默认的“典型(推荐)”,然后点击下一步若已提前准备好 Linux 系统的映像文件(.iso 文件),此处可选择“安装程序光盘映像文件”,并通过“浏览”按钮找到要安装 Linux 系统的 iso 文件的目录并选择;若没有提前准备好 Linux 系统的映像文件(.iso 文件),就选择“稍后安装操作系统”。点击“下一步”输入名称、用户名、密码等信息,点击“下一步”通过“浏览”选择安装虚拟机的位置,点击“下一步”.原创 2020-12-21 00:59:44 · 892 阅读 · 0 评论 -
实现主机与wmware workstation中虚拟机的文件传输(二)——安装VMware tools
打开wmware workstation界面选择要进行操作的虚拟机并启动右击虚拟机在出现的菜单栏中选择“安装VMware tools”安装成功的界面将里面的tools压缩包复制,保存到虚拟机目录中我此处粘贴到home下的downloads文件夹下打开终端:Ctrl+Alt+T,开始解压文件输入:tar zxvf VMwareTools-10.3.22-15902021.tar.gz出现上面的语句说明解压成功。安装VMwareTools输入命令:sudo ./vmwar原创 2020-12-21 00:57:26 · 1139 阅读 · 0 评论 -
wmware workstation中centos虚拟机重新安装vmware tools
选择要进行操作的虚拟机并启动右击虚拟机在出现的菜单栏中选择“重新安装VMware tools”重新安装成功的界面打开终端:Ctrl+Alt+T,开始解压文件输入:tar zxvf VMwareTools-10.3.22-15902021.tar.gz出现上面的语句说明解压成功。安装VMwareTools输入命令:sudo ./vmware-install.pl会提示输入密码,输入即可,然后开始安装,碰到提示直接回车即可成功安装的结果显示如上图重新启动虚拟机就完成了安原创 2020-12-21 00:54:23 · 1218 阅读 · 0 评论 -
实现主机与wmware虚拟机的文件传输(一)——编辑虚拟机设置
打开wmware workstation界面选择要进行操作的虚拟机点击“编辑虚拟机设置”选择‘选项’,再点击‘共享文件夹’,选择‘总是启用(E)’,再点击‘添加(A)’点击“下一步”点击“浏览”选择需要虚拟机共享的文件,点击‘确定’系统会自动填入路径和名称,点击“下一步”勾选“启用此共享(E)”,点击“完成”点击“确定”,就可以在虚拟机中对应的路径下找到共享的文件啦。...原创 2020-12-21 00:20:01 · 974 阅读 · 0 评论 -
wmware workstation无法点击安装vmware tools(显示呈灰色)的解决办法
若虚拟机正在运行,关闭正在运行的虚拟机选择要进行操作的虚拟机点击上方菜单栏中的“编辑虚拟机设置”将CD/DVD、CD/DVD2、软盘都设置为“使用物理驱动器”下的“自动检测”重启虚拟机,就可以重新安装vmware tools了...原创 2020-12-21 00:17:54 · 2288 阅读 · 0 评论 -
为centos-8.2.2004安装JDK并配置环境变量
一、下载JDK检查当前centos可以安装的JDK版本信息yum search java | grep -i --color JDK指定一个相应版本的JDK下载sudo yum install java-1.8.0-openjdk java-1.8.0-openjdk-devel碰到需要选择的就输入y等待安装完成二、配置环境变量查看JDK安装目录dirname $(readlink $(readlink $(which java)))可见:JDK的安装目录在:/usr/li原创 2020-12-20 18:50:39 · 1047 阅读 · 1 评论 -
使用VMware Workstation Pro创建Linux虚拟机
一、下载安装VMware Workstation Pro参照教程:在Windows下 下载与安装VMware Workstation Pro二、下载Linux系统镜像文件参照教程:使用virtualBox安装Linux虚拟机三、使用VMware Workstation Pro创建Linux虚拟机打开VMware Workstation Pro操作界面点击“创建新的虚拟机”选择“典型”,点击“下一步”选择下载好的Linux镜像文件,然后点击“下一步”设置用户名密码等信息,点击“下一步原创 2020-12-20 16:52:02 · 1084 阅读 · 0 评论 -
删除VMware Workstation Pro中的虚拟机
打开VMware Workstation Pro操作界面选择要删除的虚拟机,单击右键在出现的菜单栏中点击“管理”在出现的二级菜单中选择“从磁盘中删除”在弹出的警告窗口中选择“是”,就成功删除了虚拟机...原创 2020-12-20 14:42:12 · 654 阅读 · 1 评论 -
使用virtualBox安装Linux虚拟机
1、下载centos-8.2.2004centos-8.2.2004下载地址:添加链接描述点击x86_64选择合适的镜像源进行下载,我这里选择阿里云、选择合适的版本下载一定要记住下载的iso文件的位置!!!后面配置会用到2、新建一个虚拟机打开VirtualBox点击新建填写环境的名称,类型,版本等信息(如上图所示)因为Centos其实是RedHat的克隆版,所以版本类型选择RedHat(64-bit)然后点击下一步根据自己电脑设置内存大小,然后点击下一步如果是首次使用原创 2020-11-27 01:11:16 · 852 阅读 · 0 评论 -
在Windows中使用VirtualBox给其中的虚拟主机安装系统
1、下载windows 10 安装版下载网址:添加链接描述点击操作系统,根据需要选择系统,我这里选择如下图点击“详细信息”复制下载地址并访问会自动跳入下载界面2、安装系统下载完成后,启动自己的虚拟主机,点击管理器上排的“启动”按键点击“注册”,在电脑中找到刚刚下载的windows 10 安装版ISO光盘印象文件,然后点击选择点击启动选择语言,点击下一步点击现在安装我这里选择win10专业版,点击下一步勾选接受并点击下一步新安装选择第二种点击下一步开原创 2020-11-26 17:48:34 · 144 阅读 · 0 评论 -
在Windows中使用VirtualBox创建新的虚拟主机
进入Oracle VM VirtualBox 管理器点击新建在名称中输入虚拟机的名称类型根据本机的系统类型选择(我这里选择Windows)版本选择系统版本(我这里选择win10 64位)全都设置好后,点击下一步设置虚拟电脑的内存大小,如果没有特殊需要,按照建议的内存大小设置就行,然后点击下一步根据需要选择,我这里选择现在创建虚拟硬盘,点击创建选择VDI,点击下一步动态扩展:若为虚拟磁盘分配的是10G空间,虚拟磁盘占用真实磁盘空间的范围就为0~10G。固定大小:若为虚拟磁盘分原创 2020-11-26 15:40:56 · 398 阅读 · 0 评论 -
windows下下载与安装VirtualBox
1、下载VirtualBox下载网址:添加链接描述点击左侧菜单栏的downloads选择Windows版本下载,等待下载完成。2、安装VirtualBox双击下载好的VirtualBox安装包开始安装点击下一步保持默认选项与位置即可(位置也可以自己更改),点击下一步。根据需要勾选,点击下一步点击“是”点击“安装”安装过程出现如下提示框点击安装点击安装点击安装点击完成并运行VirtualBox恭喜安装成功!!!...原创 2020-11-26 15:14:56 · 482 阅读 · 0 评论 -
例题实践——使用FTP软件filezilla实现在Windows系统和Linux系统之间互传文件
一、 在Windows系统中新建一个文本文件test.txt,并通过FTP软件filezilla,把test.txt上传到Linux系统中的“/home/Hadoop”目录下,再利用Linux命令把该文件名修改为test1.txt1、 在桌面新建一个test.txt文本文件2、 通过FTP软件filezilla,把test.txt上传到Linux系统中的“/home/Hadoop”目录下(1) 在“远程站点”中选择好上传后的文件所要存放的目录(2)原创 2020-10-21 23:32:29 · 1043 阅读 · 0 评论 -
使用FTP软件filezilla实现在Windows系统和Linux系统之间互传文件
一、 下载安装FTP软件filezilla链接:filezilla百度云资源提取码:2677双击打开下载好的FTP软件filezilla点击“I agree”保持默认选择,点击“next”保持默认选择,点击“next”自定义安装路径,点击“next”保持默认选择,点击“install”点击“finish”就表示安装完成。二、 设置网络连接方式注意:请先关闭虚拟机,关闭VMware Workstation软件。然后,重新打开VMware Workstation 软件,在VM原创 2020-10-21 22:50:12 · 2653 阅读 · 0 评论 -
Linux常用命令总结实践:cd、ls、mkdir、cp、mv、touch、vim、chown、find、tar等Linux命令
一、实验环境操作系统:Ubuntu64位Hadoop版本:Hadoop 2.7.1Jdk版本:jdk-8u241-linux-x64二、 使用Linux系统的常用命令1、 切换到目录 /usr/bin;cd /usr/binLinux“cd”命令语法:cd [目标工作文件目录]Linux的绝对路径和相对路径:绝对路径:路径的写法一定是由根目录/写起的,例如 /usr/local/mysql;相对路径:路径的写法不是由根目录/写起的,例如:首先用户进入到 /home,然后再进入原创 2020-10-21 21:50:19 · 2345 阅读 · 0 评论 -
初学hadoop——Hive Java API的使用
以词频统计算法为例,来介绍怎么在具体应用中使用Hive一、 创建input目录,output目录会自动生成其中input为输入目录,output目录为输出目录。命令:cd /usr/local/hadoopmkdir input二、 在input文件夹中创建两个测试文件file1.txt和file2.txt命令:cd /usr/local/hadoop/inputecho "hello world" > file1.txtecho "hello hadoop" > fi原创 2020-10-21 13:13:46 · 441 阅读 · 0 评论 -
初学Hadoop——Hive命令行客户端使用
一、Hive简介Hive是一个基于HDFS和MapReduce的分布式数据仓库系统,以表的形式管理用户数据,用户只需要编写HQL语句就能够利用MR对存放在HDFS上的数据进行计算(Hive会将HQL语句自动转换为MR作业,提交给MR执行),降低了学习成本。此实验指导用户如何使用Hive提供的命令行客户端连接HiveServer,并通过HQL语句实现内部表、外部表、分区分桶表的创建、删除、修改、数据的导入导出、数据的查询等操作。二、 Hive的安装(1) 下载并解压hive源程序直接在虚拟机中原创 2020-10-21 11:40:07 · 4598 阅读 · 0 评论 -
初学Hadoop——MapReduce Java API的使用
一、MapReduce简介MapReduce是面向大数据并行处理的计算模型、框架和平台,它有以下三层含义:(1) MapReduce是一个基于集群的高性能并行计算平台它允许用市场上普通的商用服务器构成一个包含数十、数百至数千个节点的分布和并行计算集群。(2) MapReduce是一个并行计算与运行软件框架它提供了一个庞大但设计精良的并行计算软件框架,能自动完成计算任务的并行化处理,自动划分计算数据和计算任务,在集群节点上自动分配和执行任务以及收集计算结果,将数据分布存储、数据通信、容错处理等并行计原创 2020-10-20 21:13:53 · 1926 阅读 · 1 评论 -
初学Hadoop——HBase Java API的使用
使用Eclipse编写java程序,来对HBase数据库进行增删改查等操作,Eclipse可以在Ubuntu软件中心搜索下载并安装。一、 启动hadoop和hbasestart-dfs.shstart-hbase.sh二、新建Java工程和项目(文件)在eclipse中新建Java工程和项目(文件)(1)新建java工程(2) 新建java class文件右击工程->new->class三、 在工程中导入外部jar包这里只需要导入hbase安装目录中的lib文原创 2020-10-20 20:33:27 · 1212 阅读 · 0 评论 -
初学Hadoop——HBase命令行客户端使用
一 、HBase简介HBase是一个分布式的、面向列的开源数据库,源于Google的一篇论文《BigTable:一个结构化数据的分布式存储系统》。HBase以表的形式存储数据,表由行和列组成,列划分为若干个列族/列簇(column family)。HBase的运行有三种模式:单机模式、伪分布式模式、分布式模式:单机模式:在一台计算机上安装和使用HBase,不涉及数据的分布式存储;伪分布式模式:在一台计算机上模拟一个小的集群;分布式模式:使用多台计算机实现物理意义上的分布式存储。这里出于学习目的。原创 2020-10-20 20:10:55 · 1546 阅读 · 0 评论 -
初学Hadoop——HDFS Java API 的使用、在linux中安装eclipse
Hadoop不同的文件系统之间通过调用Java API进行交互,实验一中介绍的Shell命令,本质上也就是Java API的应用。Hadoop官方的Hadoop API文档,可以访问如下网站,查看各个API的功能:网站链接一、 Eclipse的安装利用Java API进行交互,需要利用软件Eclipse编写Java程序。这里我使用的在Ubuntu中安装eclipse。(1)在Ubuntu的边栏打开软件中心(2)在软件中心搜索栏输入“ec”,软件中心会自动搜索相关的软件点击图中的eclips原创 2020-10-20 19:43:02 · 4712 阅读 · 1 评论 -
初学Hadoop——HDFS命令行客户端使用
一、HDFS简介及其基本概念HDFS(Hadoop Distributed File System)是hadoop生态系统的一个重要组成部分,是hadoop中的存储组件,在整个Hadoop中的地位非同一般,是最基础的一部分,因为它涉及到数据存储,MapReduce等计算模型都要依赖于存储在HDFS中的数据。HDFS是一个分布式文件系统,以流式数据访问模式存储超大文件,将数据分块存储到一个商业硬件集群内的不同机器上。二、实验环境操作系统:Ubuntu64位Hadoop版本:Hadoop 2.7.1J原创 2020-10-20 15:12:50 · 697 阅读 · 0 评论