- 博客(4)
- 收藏
- 关注
RSS订阅转载 hbase 权威指南笔记（二）
这次我们先来讨论hbase的重试机制，为什么呐，因为最近公司最近也在做这方面的优化，所以就今天研究的一些成功记录一下。 configuration.setInt("hbase.client.pause", 50);configuration.setInt("hbase.client.retries.number", 5);configuration.setInt("hbase.clien...
2016-12-22 17:53:00
73
转载 spark1.4.1 启动过程
今天稍微没那么忙了，趁着这个时间，准备把spark的启动过程总结一下（），分享给大家。现在使用的spark1.4.1版本 当然前提是你已经把spark环境搭建好了。 1、我们启动spark的时候一般会使用官方提供的启动脚本，start-all.sh ,那我们先来看看，这个脚本做了什么。 # Start all spark daemons. # Starts the master on t...
2016-12-09 18:13:00
65
转载 mybatic与spring结合的事务管理
原文地址：http://czj4451.iteye.com/blog/2037759 mybatis与spring结合后，事务管理更加方便，这里介绍使用transactionnal的方式，有错的的地方，希望大家指出。 1. 和Spring集成后，使用Spring的事务管理：a.@Transactional方式：在类路径下创建beans-da-tx.xml文件，在appli...
2016-12-03 13:23:00
57
转载 spark streaming 与 kafka 结合使用的一些概念理解
1.createStream会使用 Receiver；而createDirectStream不会,数据会通过driver接收。 2.createStream使用 Receiver 源源不断的接收数据并把数据交给 ReceiverSupervisor 处理最终存储为 blocks 作为 RDD 的输入，从 kafka 拉取数据与计算消费数据相互独立；而createDirectS...
2016-11-30 17:08:00
57
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人