java
我爱奔跑的浮云
人活着,就图个自在!!!
展开
-
java socket编程 长链接处理
在进行Java socket编程的时候,涉及到两种链接方式,一种是短连接,一种是长连接。当我们在学习网络编程TCP的时候,一般都只是涉及到短连接编程,很少辉涉及到长连接,那么什么是长连接,什么是短连接呢?1.概念:短连接:指建立SOCKET连接后发送后接收完数据后马上断开连接,比如http,只是连接、请求、关闭,过程时间较短,服务器若是一段时间内没有收到请求即可关闭连接。长连接:指建立SOCKET长原创 2017-03-16 16:48:32 · 2151 阅读 · 0 评论 -
sqoop 从mysql 导入数据到 hbase 中
MYSQL 到 HBASEbin/sqoop import --connect jdbc:mysql://192.168.66.4:3306/networkmanagement \--username sendi \--password 1234 \--table alarm_result \--hbase-table sqoop_test \--column-f...原创 2018-06-21 19:20:52 · 2081 阅读 · 0 评论 -
sqoop 从mysql 导入数据到 hive 详细教程
一、简介Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。Sqoop专为大数据批量传输设计,能够分割数据集并创建Hadoop任务来处理每个区块。把MySQL、Oracle等数据库中的数据导入到HDFS...原创 2018-06-21 19:19:45 · 18397 阅读 · 2 评论 -
hive 建表与 load语法
hive 建表语法内部表:create table fzname(id int,name string,age int,tel string)ROW FORMAT DELIMITEDFIELDS TERMINATED BY ','STORED AS TEXTFILE;外部表:create external table fz_external_name(id int,...原创 2018-06-21 19:04:07 · 5683 阅读 · 0 评论 -
flume 简介
介绍Flume NG是Cloudera提供的一个分布式、可靠、可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合、移动,最后存储到一个中心化数据存储系统中。由原来的Flume OG到现在的Flume NG,进行了架构重构,并且现在NG版本完全不兼容原来的OG版本。经过架构重构后,Flume NG更像是一个轻量的小工具,非常简单,容易适应各种方式日志收集,并支持failover和负载...原创 2018-05-27 15:57:57 · 446 阅读 · 0 评论 -
redis 基础笔记
为什么需要用到redis?http://blog.csdn.net/yujin2010good/article/details/54729939特点:Redis支持数据的持久化,可以将内存中的数据保存在磁盘中,重启的时候可以再次加载进行使用。Redis不仅仅支持简单的key-value类型的数据,同时还提供list,set,zset,hash等数据结构的存储。Redis支持数据的备份,即mas原创 2018-04-02 22:18:34 · 139 阅读 · 0 评论 -
java短信发送接口开发
发送短信验证码几乎是现在每个网站都要使用到的一个功能,如注册的时候要发送短息验证码,修改密码的时候也要发送。但是第三方提供给我们的接口只是一个方法而已,并没有提供给我们更多的一个良好,可读性强的接口,如何设计一个阅读性强,扩展性高的接口。那么我们就需要设计两个接口: 一.SmsSender 接口,对接第三方短信,可以扩展支持不同的实现,如创蓝,leancloud等(相当于dao层),这个接口只负责原创 2017-03-08 18:06:56 · 2095 阅读 · 1 评论 -
JAVA回调机制(CallBack)详解
序言最近学习java,接触到了回调机制(CallBack)。初识时感觉比较混乱,而且在网上搜索到的相关的讲解,要么一言带过,要么说的比较单纯的像是给CallBack做了一个定义。当然了,我在理解了回调之后,再去看网上的各种讲解,确实没什么问题。但是,对于初学的我来说,缺了一个循序渐进的过程。此处,将我对回调机制的个人理解,按照由浅到深的顺序描述一下,如有不妥之处,望不吝赐教! 开始之前,先想象一个转载 2017-05-19 11:06:46 · 803 阅读 · 0 评论 -
阿里的 com.alibaba.fastjson的日常使用
json 在java中的使用技巧本Markdown编辑器使用[StackEdit][6]修改而来,用它写博客,将会带来全新的体验哦:什么是[json][6] json是一种轻量级的数据交换格式, 易于人阅读和编写。同时也易于机器解析和生成。格式对象: {key:value, key:value} 的键值对的结构数组:[{key:value, key:value},{key:value, k原创 2016-10-26 17:10:39 · 3944 阅读 · 0 评论 -
sqoop 从 MySQL 导入数据到 hdfs 中
MYSQL 数据导入到 HDFSsqoop import --connect jdbc:mysql://192.168.66.4:3306/networkmanagement \--username sendi \--password 1234 \--table people \--columns "name,age" \--where "age>18" \--targ...原创 2018-06-21 19:21:42 · 8036 阅读 · 1 评论