- 博客(6)
- 收藏
- 关注
RSS订阅原创 运行Hadoop自带的MapReduce程序WordCount
Hadoop自带了个单词计数的MapReduce程序WordCount，下面用三种方法运行该程序在开始前先在hdfs上面创建输入和输出路径：1、使用hdfs dfs -mkdir /input命令创建一个input文件夹2、使用hdfs dfs -put /home/kingssm/input/data.dat /input命令将需要执行的文件上传到hdfs上的输入文件夹3、使用hdfs ...
2019-12-11 17:47:06
3073
2
原创 Linux系统安装hadoop3.1.3实现全分布式
工具Linux系统：CentOS，版本7.0以上JDK：jdk1.8，1.8版本还分为不同的版本，但必须使用1.8版本的（注意：官网下载Linux版本的jdk）Hadoop：hadoop3.1.3，使用3.0版本以上的应该都没有问题，2.0以上的版本配置可能会有点不相同虚拟机：VMware workstations，即使是物理机安装Linux也可以JDK安装默认你虚拟机安装好了Linu...
2019-12-11 15:02:54
2130
原创 window上使用idea运行Hadoop自带的WordCount示例代码
折腾了好久，昨天终于把Hadoop安装在了window！！！有兴趣的也可以看一下怎么安装window安装hadoop安装完之后最关键的还是要知道怎么用吧，下面就使用Hadoop自带的WordCount例子运行一下工具：idea和maven（没有的话可以去下载，安装方法很简单，和jdk的安装一样，如果嫌麻烦，使用idea自带的maven也可以）new一个项目，选择使用maven构建，注意一定要...
2019-12-07 10:44:55
747
原创 window10安装Hadoop3.1.3
最近做实验需要在Linux系统安装Hadoop，由于我之前就想在window上安装，所以借此机会先在window上安装再在Linux安装。个人比较喜欢安装比较新的东西，所以选择Hadoop3.1.3准备工具 ：1、jdk8，这里不要用其他jdk了，会出现一些其他问题的，我用jdk11有些包就找不到，好像jdk9都不行2、Hadoop3.1.3，官网下载，也可以下载其他的3.0以上的版本，3...
2019-12-06 11:25:07
10541
10
原创 java的socket多线程编程之关闭socket
这两天在写socket通信，也就是下面的东西，然后遇到了个问题，怎样才能优雅的关闭socket（正常关闭而不是发生异常导致的关闭）直接说思路吧，后面再说我遇到的问题！我们这里说的关闭是用户点击断开按钮后再关闭，如果是用户直接退出程序可以在退出之前调用和关闭按钮一样的方法，或则采用心跳检测判断用户是否在连接，不过这里不说怎么实现这个。我们一般只说客户端断开连接，如果想要服务器断开和客户的连接...
2019-12-05 12:14:29
5034
2
原创 javafx非控制类获取控制类的控制器
先看下面的图，以官网的例子说事（我自己写的分包可能比较乱，不容易看明白，官网例子没有分包）App是启动类，下面有两个控制器，同时也有两个fxml文件对应这两个控制器。对于fxml中定义的组件（按钮、文本框等），如果我们要修改他们的值，比如让某个文本框显示某些东西，我们只能通过与该fxml对应的控制类进行修改。如果需要在其他类修改呢？那就必须获得这个控制器才行。看我的代码：我需要在其他类里...
2019-12-01 23:02:21
768
6
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人