mjlfto的博客

排序：
默认
按更新时间
按访问量
RSS订阅

原 qt 第一程序

抽风了想联系一下c++, 然后根据教程实现如下界面需求： 需求描述： 1.要求通过最上边的三个复选框调整文本框中文件字体属性，包括添加下划线、斜体、粗体 2.通过第二栏中的单选框调整文本框中字体颜色，默认为黑色， 调整分别为黑色、红色、蓝色 3.点击最下边三个按钮可以关闭窗体 实现需求： 1.创...

2019-06-02 18:58:42

阅读数 5

评论数 0

原 springboot多模块resources共享问题

spring boot 中maven多模块依赖配置文件共享问题，当我们在使用多模块是，可能需要配置一些参数，比如我们将与数据交互操作进行抽取形成了一个独立的模块，当其他模块需要依赖这个模块时，如果不做配置共享处理，那么在依赖模块中也需要和被依赖模块做相同的配置，这样显然非常麻烦而且不合理，我们希望...

2019-04-19 23:08:44

阅读数 61

评论数 0

原 jenkins从安装到构建maven项目

jenkins从安装到构建maven项目 1.jenkins简介 ​ 参考：https://blog.csdn.net/houyefeng/article/details/50912756 2.jenkins安装 ​ 2.1 jenkins使用过程中需要java ​ 2.2 jenkins 需要使...

2019-04-16 19:29:34

阅读数 24

评论数 0

原 Storm 简单记录

Storm 简单记录 DRPC(Distributed Remote Procedure Call) 分布式远程调用过程 DRPC是通过一个DRPC服务端（DRPC server）来实现分布式RPC功能的，DRPC server负责接收RPC的请求，接收到请求后将其发送给Storm中运行Topol...

2019-03-26 23:14:05

阅读数 26

评论数 0

原 storm集群搭建小记

storm 安装记录 伪分布式安装 ​ 1.下载storm包：https://www.apache.org/dyn/closer.lua/storm/apache-storm-1.2.2/apache-storm-1.2.2.tar.gz ​ 2.解压strom包: tar -xvf apache...

2019-03-23 20:26:41

阅读数 22

评论数 0

原 spark 核心笔记记录

spark 核心笔记记录 文章目录spark 核心笔记记录一、spark简介1.spark是什么：2.spark的运行模式：3.spark与MR的区别4.spark核心RDD5.RDD的宽窄依赖![在这里插入图片描述](https://img-blog.csdnimg.cn/20190304233...

2019-03-04 23:46:51

阅读数 117

评论数 0

原 DataX KafkaWriter 插件文档

DataX KafkaWriter 插件文档 最近学习使用datax工具， 发现阿里官方提供并没有kafkawriter插件，于是边自己写了一个; 该插件主要借鉴：datax插件开发宝典 然后在此基础上改造 源码：https://gitee.com/mjlfto/dataX/tree/master...

2019-02-20 17:42:27

阅读数 263

评论数 0

转 flume mysql 导入数据到 hdfs

#声明source, channel, sink a1.sources=sqlSource a1.channels=c1 a1.sinks=s1 #声明source类型 a1.sources.sqlSource.type=org.keedio.flume.source.SQLSource a1....

2019-02-01 15:18:45

阅读数 162

评论数 0

转 Hbase094XReader & Hbase11XReader

Hbase094XReader & Hbase11XReader 插件文档 1 快速介绍 HbaseReader 插件实现了从 Hbase中读取数据。在底层实现上，HbaseReader 通过 HBase 的 Java 客户端连接远程 HBase 服务，并通过 Scan ...

2019-01-31 10:01:11

阅读数 55

评论数 0

转 DataX FtpWriter

DataX FtpWriter 说明 1 快速介绍 FtpWriter提供了向远程FTP文件写入CSV格式的一个或者多个文件，在底层实现上，FtpWriter将DataX传输协议下的数据转换为csv格式，并使用FTP相关的网络协议写出到远程FTP服务器。 写入FTP文件内容存放的是一张逻辑意义上...

2019-01-31 09:49:10

阅读数 183

评论数 0

转 DataX FtpReader

DataX FtpReader 说明 1 快速介绍 FtpReader提供了读取远程FTP文件系统数据存储的能力。在底层实现上，FtpReader获取远程FTP文件数据，并转换为DataX传输协议传递给Writer。 本地文件内容存放的是一张逻辑意义上的二维表，例如CSV格式的文本信息。 2 功...

2019-01-31 09:47:41

阅读数 174

评论数 0

转 hdfswriter

DataX HdfsWriter 插件文档 1 快速介绍 HdfsWriter提供向HDFS文件系统指定路径中写入TEXTFile文件和ORCFile文件,文件内容可与hive中表关联。 2 功能与限制 (1)、目前HdfsWriter仅支持textfile和orcfile两种格式的文件，且文...

2019-01-29 14:08:56

阅读数 154

评论数 0

转 hdfsreader

DataX HdfsReader 插件文档 1 快速介绍 HdfsReader提供了读取分布式文件系统数据存储的能力。在底层实现上，HdfsReader获取分布式文件系统上文件的数据，并转换为DataX传输协议传递给Writer。 目前HdfsReader支持的文件格式有textfile（tex...

2019-01-29 14:07:50

阅读数 58

评论数 0

转 mysqlWriter

Datax mysqlWriter 内容来自：https://github.com/alibaba/DataX/blob/master/mysqlwriter/doc/mysqlwriter.md 1 快速介绍 MysqlWriter 插件实现了写入数据到 Mysql 主库的目的表的功能。在底层实...

2019-01-29 11:25:18

阅读数 112

评论数 0

转 mysqlReader

最近学习datax,做个小笔记：内容来自：https://github.com/alibaba/DataX/blob/master/mysqlreader/doc/mysqlreader.md 快速介绍 MysqlReader插件实现了从Mysql读取数据。在底层实现上，MysqlReader通过...

2019-01-29 10:54:24

阅读数 99

评论数 0

原 hive小记

struct: hive> create table t_struct( > id int, > info struct...

2018-12-26 23:17:21

阅读数 74

评论数 0

原 windows hadoop winutils

hadoop-3.1.1 https://gitee.com/mjlfto/hadoop-3.1.1/tree/master/hadoop-3.1.1

2018-12-19 14:18:50

阅读数 61

评论数 0

原 mapReduce

有一段时间没有写了，最近写MapReduce遇见一些问题，总结一下；图片来源网络借鉴 首先看一下YARN的调度流程： 首先各个NodeManager会向ResourceManager反馈自己的资源使用情况 client向ResourceManager提交一个任务，然后根据各个NodeMange...

2018-12-19 13:54:35

阅读数 90

评论数 1

原 CDH安装总结

CDH安装： 1.查看环境要求： ​ 在CDH官网查看安装CM需要的环境要求：https://www.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#pcm_jdk ​ 本次安...

2018-11-05 22:11:49

阅读数 89

评论数 0

原 一个自定义的IOC,AOP,MVC,简化版Mybatis框架

使用反射，cglib，注解结合，实现一个最简单的IOC, 最简单AOP，最简单的MVC(目前只支持restful JSON格式的数据响应), jdbc数据访问封装框架，当然这个框架非常不稳定、不成熟的自我学习、娱乐的框架 像ioc，aop，mybatis，mvc这样的概念就不在阐述了， 我所理解...

2018-09-05 12:01:20

阅读数 170

评论数 0

提示
确定要删除当前文章？
取消 删除
关闭
关闭