- 博客(14)
- 收藏
- 关注
原创 Scala学习笔记:Scala面向对象基础
Scala面向对象基础1.面向对象的基本概念2.面向对象的特征3.如何定义一个类4.内部类5.类的构造器 6.单例对象(object)单例模式7.应用程序对象8.apply方法9.类的继承 10.抽象类11.特质(Trait)12.包的使用
2018-08-29 23:40:53 386
原创 Scala学习笔记:Scala基础
Scala基础:数据类型,变量常量,函数,条件表达式,循环,函数参数,Lazy特性,异常处理,数组,映射和元组
2018-08-28 12:02:23 8194 3
原创 Flume学习笔记:Flume自定义Agent
Flume自定义Source、Sink、Interceptor,以及美团技术团队的DualChannel实现
2018-08-26 18:37:01 2131 1
原创 Flume学习笔记:Flume Interceptor的使用
Flume的三种Interceptor使用Timestamp,Host,Regex Filter
2018-08-25 11:32:20 613
转载 Flume学习笔记:Flume常用配置参数
概述本篇文章是根据Flume官网对Flume组件(Source,Channel,Sink)的常用配置参数做一个主要介绍,如有表达意思错误希望不吝指出。SourcesFlume中常用的Source有NetCat,Avro,Exec,Spooli...
2018-08-25 01:57:24 963
原创 Sqoop学习笔记:Sqoop安装及使用
Sqoop的安装测试环境hive-1.1.0-cdh5.14.0hbase-1.2.0-cdh5.14.0hadoop-2.6.0-cdh5.14.0zookeeper-3.4.5-cdh5.14.0jdk1.8.0_171sqoop-1.4.6-cdh5.14.01.解压Sqoop到/opt/software下2.拷贝mysql-connector-java-5.1.40...
2018-08-22 00:08:00 437
原创 HBase学习笔记:使用BulkLoad特性快速导入海量数据
概述 HBase包含几种将数据加载到表中的方法,最直接的方法是HBase Shell、使用MapReduce作业中的TableOutputFormat类,或者使用普通的客户端api,然而,这些并不总是最有效的方法。BulkLoad特性使用MapReduce作业以HBase的内部数据格式输出表数据,然后直接将生成的存储文件加载到一个正在运行的集群中。使用批量加载将比简单地使用HBas...
2018-08-12 00:54:29 22250 4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人