- 博客(5)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 MapReduce的流程（带图有详解）
客户端Client提交一个作业，先提交给YARN集群，YARN集群接收到客户端Client的请求之后，知道客户端要去执行一个作业\要去处理某一个数据，然后它先去检查客户端有没有这个权限去提交这个作业，然后ResourceManager和NameNode进行通信，告诉NameNode有一个客户端想要去执行一个程序\去处理某一个数据，让NameNode让HDFS集群去检查一下要处理的这个文件是否在集群中，如果这个文件在的话，那么就正常开始执行。在YARN集群里面，ResourceManager随机的从众多..
2020-09-15 20:31:50
502
原创 IDEA配置推送jar包到linux服务器
Tools->Deployment->Configuration…1> Connection标签下 Type:SFTPSSH configuration:host:集群客户端的ipport:22User name:集群客户端的用户名Password:集群客户端的密码Root path:/home/用户名Encoding for client-server communication:UTF-82> Mappings标签下Local path:定位到idea当前工程
2020-09-14 18:53:24
565
2
原创 HDFS的读写原理(适合基础入门！！！)
HDFS的读原理 Configuration conf = new Configuration(); conf.set("fs.defaultFS","hdfs://us1:9000"); //DistributedFileSystem类的对象 FileSystem fs = org.apache.hadoop.fs.FileSystem.get(conf); FSDataInputStream fsdis = fs.open(new Path("/da...
2020-09-10 11:41:39
526
原创 mysql安装超详细
在windows中安装安装包(msi)安装：mysql-installer-community-8.0.21.0.msi基本都是点下一步，此处省略压缩包(zip)安装：在MySQL官网下载压缩包：mysql-8.0.21-winx64.zip解压生成mysql-8.0.21-winx64文件夹；编写MySQL服务器程序的配置文件，在MySQL的安装目录下创建名为my.ini的文件：[mysqld]basedir=D:\\Program Files\\mysql-8.0.21
2020-08-24 23:49:30
443
原创 最全的jdbc笔记
JDBC概述数据的持久化持久化(persistence)：把数据保存到可掉电式存储设备中以供之后使用。JDBC的理解JDBC(Java Database Connectivity)是一个独立于特定数据库管理系统、通用的SQL数据库存取和操作的公共接口（一组API）简单理解为：JDBC，是SUN提供的一套 API，使用这套API可以实现对具体数据库的操作（获取连接、关闭连接、DML、DDL、DCL)JDBC的好处面向应用的API：Java API，抽象接口，供应用程序开发人员使用（
2020-08-24 00:01:02
197
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人