自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

zhixingheyi_tian的博客

  • 博客(3)
  • 资源 (11)
  • 收藏
  • 关注
全部文章> 2017年08月
排序：
按最后发布时间
按访问量
RSS订阅
09月 08月

原创 解决spark-redshift只能写不能读的问题

spark-redshift 是由 databricks 公司开发的读写redshift 工具包 在AWS 中国区总出现问题，比如读redshift 报错如下Exception in thread "main" com.amazonaws.services.s3.model.AmazonS3Exception: Access Denied (Service: Amazon S3; Status

2017-08-31 16:02:54 1133 2

原创 spark 写 ElasticSearch 提升性能解决方案

ES 官网提供了一套Spark写ES接口 参见 ： https://www.elastic.co/guide/en/elasticsearch/hadoop/current/spark.html在工作实践中使用 Spark Streaming 写 ES 发现性能太差了，经研究发现，这套接口基于es底层http的restful接口而实现， 我另辟蹊径，采用TCP通信方式，写ES，性能获得了极大提

2017-08-30 10:18:18 6466 8

原创 通过maven-shade-plugin 解决Elasticsearch与spark的jar包冲突问题

项目需求，通过spark写入ES，用官方自带的restful 接口，存在性能问题，改用TCP方式写入，但是遇到和spark环境jar冲突，冲突为guava jar包。刚开始通过修改spark 环境变量使得 guava jar版本包统一，但是只能运行spark local 模式下。后来采用网上技术文章maven-shade-plugin，才得以彻底解决。网上有很多现成的maven-shade-plu

2017-08-29 16:27:04 1046

Spring Boot in Action
A developer-focused guide to writing applications using Spring Boot. You'll learn how to bypass the tedious configuration steps so that you can concentrate on your application's behavior., Spring Boot in Action is a developer-focused guide to writing applications using Spring Boot. In it, you?ll learn how to bypass configuration steps so you can focus on your application?s behavior. Spring expert Craig Walls uses interesting and practical examples to teach you both how to use the default settings effectively and how to override and customize Spring Boot for your unique environment. Along the way, you?ll pick up insights from Craig?s years of Spring development experience.

2017-11-23

深入理解Spark 核心思想与源码分析.pdf
深入理解Spark 核心思想与源码分析 深入理解Spark 核心思想与源码分析 深入理解Spark 核心思想与源码分析

2017-10-18

从PAXOS到ZOOKEEPER 国人写的技术实践书 分布式
从PAXOS到ZOOKEEPER分布一致性原理与实践 上传限60M，所以打成压缩包，内为pdf 从PAXOS到ZOOKEEPER分布一致性原理与实践 上传限60M，所以打成压缩包，内为pdf

2017-09-22

机器学习实战 英文版 Machine Learning in Action 书中所有代码和数据集
完整的源码 数据集 机器学习实战 英文版 Machine Learning in Action 代码和数据集 机器学习实战 英文版 Machine Learning in Action 代码和数据集 机器学习实战 英文版 Machine Learning in Action 代码和数据集

2017-09-13

机器学习实战 英文版 Machine Learning in Action
高清 带书签 机器学习实战 英文版 Machine Learning in Action 机器学习实战 英文版 Machine Learning in Action 机器学习实战 英文版 Machine Learning in Action 机器学习实战 英文版 Machine Learning in Action

2017-09-13

机器学习实战 中文版
机器学习实战 中文版 机器学习实战 中文版 机器学习实战 中文版 机器学习实战 中文版 机器学习实战 中文版 机器学习实战 中文版

2017-09-13

数据库实现英文第二版 Database System Implementation
数据库实现英文第二版 Database System Implementation 数据库实现英文第二版 Database System Implementation 有书签 高清 机械工业出版社

2017-09-11

yammer metrics-2.2.0 源码
yammer metrics-2.2.0 源码 yammer metrics-2.2.0 源码 yammer metrics-2.2.0 源码 yammer metrics-2.2.0 源码

2017-09-06

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除