- 博客(4)
- 收藏
- 关注
RSS订阅原创 No. 15【大数据算法】Bloom Filter 的原理和实现
0x00 前言 Bloom Filter 是由 Burton H. Bloom 在 1970 年提出的二进制向量数据结构，它具有很好的空间和时间效率，被用来检测一个元素是不是集合中的一个成员。 Bloom Filter 最初的论文发表在ACM，名为《Space/Time Trade-offs in Hash Coding with Allowable Errors》，感兴趣可以下载阅读。本篇主
2017-10-09 20:34:22
1076
1
原创 No.14 【大数据算法】BitMap的原理和实现
0x00 前言本篇是大数据算法系列 第一篇《BitMap的原理和实现》，BitMap 的思想的和原理是很多算法的基础，因此我们以BitMap开篇。既然是说大数据算法，我们先尝试给大数据算法一个定义，或者说是限定一下这个系列的范围。 大数据算法：在给定的资源约束下，以大数据为输入，在给定时间约束内可以计算出给定问题加过的算法。 大数据算法会有传统的算法有不一样的地方： 资源有约束 时间有约束 大数
2017-10-09 20:33:48
1033
1
原创 No.10 MapReduce 编程模型极简篇
0x00 前言回想自己最初学 Hadoop 的时候，初衷是写MapReduce程序，但是搭建单机环境折腾一周，搭建分布式环境折腾一周，跑个Demo解决一下Bug又一周过去了。最后都忘了自己是想学 MapReduce 的。感觉自己虽然是搞Hadoop的，但是写MR比自己想的要少很多。初期是花了很多精力在安装以及集群的各种日常维护，熟悉Hive后就经常用Hive来解决问题，然后逐渐地各种任务过度到了Sp
2017-10-09 20:33:31
604
原创 No.9 数据工程师该如何入门？
0x00 前言最近发现身边有不少小伙伴想转行做数据工程师，聊天的过程中发现大家对该如何入门有很多迷茫的地方，周末写篇博客记录一下。哪些人适合继续阅读数据工程师该如何入门？话题有点大，而且每个人的理解都很不一样，因此我们会先限定一下会对这个话题感兴趣的人群： 做了几年其它软件开发，发现大数据方向更有前景 在校的童鞋，毕业后想搞数据开发，但是学校没相关课程 没搞过软件开发，对之前的工作没信心想搞互联网，
2017-10-09 20:33:11
1345
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人