自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

mtj66的博客，交流WX:SpringBreeze1104

一个开发的进阶历程

  • 博客(4)
  • 资源 (15)
  • 收藏
  • 关注
全部文章> 2017年05月
排序：
按最后发布时间
按访问量
RSS订阅
12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 Neither the HADOOP_CONF_DIR nor the YARN_CONF_DIR environment variable is set. The Flink YARN Client

Neither the HADOOP_CONF_DIR nor the YARN_CONF_DIR environment variable is set. The Flink YARN Client needs one of these to be set to properly load the Hadoop configuration for accessing YARN.Ple

2017-05-25 09:53:09 7044 1

原创 Hbase WAL 机制记录

Write-Ahead-Log（WAL）该机制用于数据的容错和恢复：每个HRegionServer中都有一个HLog对象，HLog是一个实现Write Ahead Log的类，在每次用户操作写入MemStore的同时，也会写一份数据到HLog文件中（HLog文件格式见后续），HLog文件定期会滚动出新的，并删除旧的文件（已持久化到StoreFile中的数据）。当HRegionS

2017-05-22 15:44:44 897

原创 Spark VS Flink

转自 ：http://data-flair.training/blogs/comparison-apache-flink-vs-apache-spark/ Spark is considered as 3G of Big Data, whereas Flink is as 4G of Big Data (在流处理方面我同意这个结论).1. Objective

2017-05-15 15:20:38 750

原创 HadoopMR vs Spark vs Flink 特性对比

看了下flink，然后找到了一篇对比文章，但是这篇文章的作者是偏向于flink的，有些对比，我们就看看，不说话。个人认为spark是批处理的老大，flink是流式处理的老大。至于表处理，spark也是不落下，列式存储parquet以及列式数据集dataFrame，以及执行计划的自动优化使得数据的处理性能，和hive2 Tenz / impala有点一拼，但是掌握spark技术栈，可以应付绝

2017-05-15 14:56:02 2339

逆地理编码离线版-精度到乡镇街道
传入经纬度，解析出地址信息，性能:4ms/条 地址精度到乡镇街道，包含城市等级，精度满足一般的需求，如对精度要求极高请勿下载

2022-07-01

useragent解析逻辑&手机品牌匹配.txt
在对浏览界面进行解析获取用户信息的过程中，想要精准识别用户，对useragent解析&手机品牌匹配是必不可少的环节，本文档提供了解析逻辑，以及提供了最新的手机品牌和useragent对应的文件，帮你丰富用户画像，以及作为模型特征因子。

2021-11-22

windows服务器python程序部署文档.doc
如果在window服务器中部署python程序呢？本文有部署流程指导：从安装到定时任务的创建

2021-11-15

T+0操作方法与技巧.pptx
股市短线交易必学技能

2021-11-15

shakespeare.json&logs;.jsonl.gz&accounts;.zip
官网原始链接失效 该压缩文件已经打包上传，提供大家测试使用 。 shakespeare.json&logs;.jsonl.gz&accounts;.zip

2018-01-10

kafka-manager 1.3.3.15
已经编译好的 kafka-manager 1.3.3.15 具体使用可以参考 https://github.com/yahoo/kafka-manager

2018-01-08

百度网盘 数据仓库工具箱 维度建模权威指南 第3版 全
中文版，提供百度网盘下载。 本书作者：Ralph Kimball博士 主要介绍本书从维度建模的基本知识入手，通过给出零售、库存、采购、订单管理、顾客关系管理、账目、人力资源管理、财经服务、电信与公用事业、交通、教育、卫生护理、电子商务以及保险等方面的实例研究，全面、深入、透彻与具体地介绍了利用维度模型设计与开发数据仓库的综合技术知识。 同时，本书对数据仓库在当前社会与技术背景下的发展前景进行了很有远见的探索。本书先介绍基本知识，然后逐个讨论具体实例内容，最后进行综合总体分析，在内容的结构方面很有特色。本书涉及的行业较多，但这些内容从不同角度体现了数据仓库的各个方面，因而对于完整的学习与掌握数据仓库知识显得十分必要。 仅供学习使用，切勿商业用途。

2017-10-16

数据仓库工具箱 维度建模权威指南 第3版
数据仓库工具箱 维度建模权威指南 第3版 本书主要介绍本书从维度建模的基本知识入手，通过给出零售、库存、采购、订单管理、顾客关系管理、账目、人力资源管理、财经服务、电信与公用事业、交通、教育、卫生护理、电子商务以及保险等方面的实例研究，全面、深入、透彻与具体地介绍了利用维度模型设计与开发数据仓库的综合技术知识。 同时，本书对数据仓库在当前社会与技术背景下的发展前景进行了很有远见的探索。本书先介绍基本知识，然后逐个讨论具体实例内容，最后进行综合总体分析，在内容的结构方面很有特色。本书涉及的行业较多，但这些内容从不同角度体现了数据仓库的各个方面，因而对于完整的学习与掌握数据仓库知识显得十分必要。

2017-10-16

Tensorflow 实战Google深度学习框架
Tensorflow 实战Google深度学习框架，仅供学习使用，切勿用于商业用途。

2017-10-06

IDEA 创建scala工程并打指定的依赖包
该文档主要使用IDEA进行scala工程的创建以及打依赖的jar包，步骤详细。 为了感谢大家的支持,现在把积分调整到1积分,更好的为大家提供帮助.

2017-08-11

高德地图POI类型表
高德地图POI类型表

2017-07-11

常用数据挖掘算法总结及Python实现
数据挖掘算法

2017-06-19

hbase自定义Comparator进行数值比较
hbase 自带的Comparator只能进行字符串的比较，不能进行数值比较，通过自定义代码实现该功能。 具体使用请参考 http://blog.csdn.net/mtj66/article/details/52574739

2016-11-07

百度云存储LBS
百度云存储LBS

2016-10-21

创建单个分区的window虚拟机
此文档通过截图简要的概述了创建window7虚拟机的步骤。

2016-10-17

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除