big data
一只爱学习的果丹皮
这个作者很懒,什么都没留下…
展开
-
数据结构: Reversing the first K elements of a Queue
Reversing the first K elements of a QueueGiven an integer k and a queue of integers, we need to reverse the order of the first k elements of the queue, leaving the other elements in the same relative...原创 2019-04-10 10:21:44 · 134 阅读 · 0 评论 -
海量数据处理之分库分表
海量数据处理之分库分表查询慢,分库分表副作用,如何解决。关系型数据库如: Mysql, sqlserver. 为了快速检索,采用B树或者其他索引技术。表中数据越多,索引树的范围越大,磁盘读取越多,性能越低。读写分离,主数据库用于写入,读数据库(多个)用于对外提供查询,通过数据复制的方式将主数据库的数据同步到读库。该框架提升了数据库的读写能力,但对于主数据库的写入能力依然没法扩展。...原创 2019-04-10 11:38:10 · 361 阅读 · 0 评论 -
HDFS 原理、架构与特性
https://my.oschina.net/leejun2005/blog/151872HDFS架构•NameNode•DataNode•Sencondary NameNodeNamenode 的目录结构:${ dfs.name.dir}/current /VERSION/edits/fsimage/fstimedfs.name.dir 是 hdfs-site.xml 里配...原创 2019-04-22 12:45:13 · 173 阅读 · 0 评论 -
收藏
https://blog.fundebug.com/2018/08/27/code-interview-data-structure/scala: https://www.cnblogs.com/fxjwind/p/3338829.htmljava read and save json https://howtodoinjava.com/json/json-simple-read-write-...原创 2019-04-17 17:03:02 · 155 阅读 · 0 评论 -
Maxwell's daemon mysql binlog
https://github.com/zendesk/maxwellThis is Maxwell’s daemon, an application that reads MySQL binlogs and writes row updates as JSON to Kafka, Kinesis, or other streaming platforms.mysql> insert in...原创 2019-06-27 11:00:56 · 175 阅读 · 0 评论