- 博客(16)
- 收藏
- 关注
原创 HDFS的Java操作
如果我们的代码中没有指定fs.defaultFS,并且工程classpath下也没有给定相应的配置,conf中的默认值就来自于hadoop的jar包中的core-default.xml,默认值为: file:///,则获取的将不是一个DistributedFileSystem的实例,而是一个本地文件系统的客户端对象。——从conf中的一个参数 fs.defaultFS的配置值判断;我们的操作目标是HDFS,所以获取到的fs对象应该是DistributedFileSystem的实例;
2023-06-16 03:06:20
920
原创 Idea集成Maven环境
1.1 Idea新建立Maven类型的Java项目1.2 选择Maven,选择quickstart1.3 选择项目名称,项目所处位置1.4 选择Maven指定的配置文件和仓库1.5 Maven项目构建完成
2023-06-16 03:01:00
148
原创 Maven安装
(4)验证Maven安装是否成功 打开cmd窗口,输入mvn –v命令 查看Maven的相关信息,能够出现这样的信息就说明Maven的安装已经成功了。新建系统变量 MAVEN_HOME,变量值:D:\apache-maven-3.8.3-bin\apache-maven-3.8.3。(5)修改配置文件,在maven根目录下conf目录中的settings.xml文件。(3)编辑系统变量 Path,添加变量值。(1)Maven版本要求。
2023-06-16 02:52:10
392
原创 HDFS的shell操作
命令功能示例-help输出这个命令参数手册-ls显示目录信息-mkdir在hdfs上创建目录从本地剪切粘贴到hdfs从hdfs剪切粘贴到本地-cat显示文件内容-text以字符形式打印一个文件的内容linux文件系统中的用法一样,对文件所属权限从本地文件系统中拷贝文件到hdfs路径去从hdfs拷贝到当前路径-cp从hdfs的一个路径拷贝hdfs的另一个路径-mv在hdfs目录中移动文件-get等同于copyToLocal,就是从hdfs下载文件到本地-put。
2023-06-16 02:39:35
121
原创 Hadoop安装
进行格式化,进入目录为cd /home/hd/apps/hadoop/etc/hadoop,输入命令 ll /home/hd/apps/hadoop/namenode,显示为No such file or directory,为正常运行操作,正式格式化。进入 cd /home/hd/apps/hadoop/etc/hadoop ,修改workers参数,当第一台虚拟机开启hadoop的时候,可以在其他两台虚拟机同时开启hadoop 输入命令 vi workers。上传hadoop安装包到apps的文件夹。
2023-06-16 02:35:41
225
原创 《毕业季,让我们共勉!》
最后,作为一名已经走出校园的工作者,我想说,无论您是计划迈入职场的毕业生,还是已经踏入职场的职业人士,在工作中一定要充满激情、勇于尝试,同时维护好自己的职业价值与品牌。因此,不仅要选择适合自己的IT专业方向,还需要在未来的工作中不断学习和提高技能,以应对不断变化的行业需求。有的人选择了进入IT行业,有的人选择了创业,有的人选择了深造,而还有一些人会在暑假中找到自己的出路。对于那些选择创业的人来说,更多的是在追求自主创新和实现自己理念的同时,也要对市场需求和潜在风险有清晰的认识。
2023-06-16 01:33:29
88
1
原创 《IT专业的发展前景与选择指南》
在这个行业中,诸如软件开发、网络安全、数据分析、AI算法、可视化设计、云计算等诸多职位都受到了高度重视,行业内的需求量和薪资水平也都在不断上升。其次,IT专业不断创新,每年都有新领域和新工具的出现,一个人在IT领域工作数年后,可以积累雄厚的技能和丰富的经验,并有机会成为行业内的专家。在这个数字时代,科技的发展加速了全球化和人类的高度互联,提高了人类的生活和工作效率。首先,考虑自己的兴趣和特长,在IT领域中的各种领域中可以进行实习,并尝试去深入了解每一个领域的内部工作流程和职责。
2023-06-16 01:29:07
171
1
原创 《职场人的指南:如何处理工作中的失误》
第三,在面对失误时,我们也需要承担相应的责任。失误不是我们自己,它应该被看作是一种经验,通过教训收获颇丰,我们可以更加坚定自己的方向,更加认真做好自己的工作。总而言之,在职场工作中,我们经常会犯错,鉴于这一事实,我们应该从容面对,积极处理自己的失误,以避免类似失误在未来的工作中再次发生。同时,我们还需要对自己的失误进行认真分析,找出失误的原因,以避免类似的失败再次发生。作为职场人,我们每个人都会在工作中犯错,这是不可避免的,但是正确地面对自己的失误,及时纠正自己的错误,承担责任并及时补救,才是关键所在。
2023-06-16 01:19:30
272
1
原创 Window的Java环境安装
1.下载百度网盘的Java环境jdk-8u131-windows-x64.exe2.点击jdk-8u131-windows-x64.exe,下一步3.更改Java你想安装位置,点击下一步4.Java安装完成,会显示修改jre1.8.0_131的位置,修改上面的Java位置保持一致5.点击确定并下一步,等待安装,此时在,与C:\web\Java\jdk1.8.0_131`平级。
2023-06-16 01:11:41
2569
1
原创 Linux用户管理
使用用户,需要有相应的接口,Linux提供了一系列命令来管理系统中的用户。Linux提供了一系列的命令来管理用户账户,常用的命令有useradd、userdel、usermod、passwd等。1. 添加用户 2. 更改用户 3. 删除用户 4. 更改或设置用户密码。su切换成root用户以后,发现工作目录仍然是普通用户的工作目录;su命令:当普通用户输入su则需要输入密码切换到root用户,而root用户使用su命令则不需要输入密码。如果直接输入 passwd 命令,则修改的是当前用户的密码;
2023-06-15 22:48:30
251
1
原创 Linux VIM编辑器
Vi是Unix世界里极为普遍的全屏幕文本编辑器,几乎可以说任何一台Unix/Linux机器都会提供这套软件,Vi 的原意是 “Visual”,它 可以立刻看到操作结果。Vim是一个类似于Vi的文本编辑器, 是Vi IMproved的简称。在Vi的基础上增加了很多新的特性,Vim最大的优势在于, 它最常用的命令 都是简单的字符, 这比起使用复杂的控制组合键要快得多, 而且解放手指的大量工作。Vim也支持在插入模式下使用上下箭头键, 这使初学者可以很容易上手。
2023-06-15 22:46:48
199
1
原创 Linux命令行
(1)Shell自身也是基于Linux的应用程序,其主要的功能是执行命令解释,将用户输入的命令为解释Linux内核可以认识的操作方法,Linux中运行Shell的环境是“终端”,打开终端可以启动shell环境。(3)Linux ls命令用于显示指定工作目录下之内容(列出目前工作目录所含之文件及子目录)(5)touch命令用于修改文件或者新建文件,若文件不存在,系统会建立一个新的文件。(6)Linux rm命令用于删除一个文件或者目录。(7) cp命令主要用于复制文件或目录。(9)其他shell命令。
2023-06-15 22:27:32
140
1
原创 Linux基础知识
Vi是Unix世界里极为普遍的全屏幕文本编辑器,几乎可以说任何一台Unix/Linux机器都会提供这套软件,Vi 的原意是 “Visual”,它 可以立刻看到操作结果。Vim是一个类似于Vi的文本编辑器, 是Vi IMproved的简称。在Vi的基础上增加了很多新的特性,Vim最大的优势在于, 它最常用的命令 都是简单的字符, 这比起使用复杂的控制组合键要快得多, 而且解放手指的大量工作。Vim也支持在插入模式下使用上下箭头键, 这使初学者可以很容易上手。
2023-06-14 23:15:40
115
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅