2017年01月_Aegeaner

12月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 MySQL Group Commit 笔记

Binlog开启为何和Group Commit不兼容？MySQL/MariaDB使用XA/2阶段提交保证事务持久性。提交事务的三个阶段：准备阶段，事务在引擎中持久化，但仍可以回滚；如果准备阶段成功，事务在binlog中持久化；提交阶段，引擎提交事务，无法再回滚。开启binlog之前，group commit的实现： trx->flush_log_later = TRUE; i

2017-01-22 22:32:05 1262

原创 MySQL协议分析（结合PyMySQL）

MySQL协议分析（结合PyMySQL）MySQL Packets当MySQL客户端或者服务端发送数据时，它会首先把数据分割成(2^24-1)bytes的包，然后给每个包加上packet header。类型名称描述 int<3> payload_length 负载长度，除了header的4字节 int<1> sequence_id 序列ID string

2017-01-03 20:06:43 3570

转载 Yelp的实时流技术：利用MySQLStreamer将数据库变更发送给Kafka

本文翻译自：Streaming MySQL tables in real-time to Kafka 这是关于Yelp的实时流数据基础设施系列文章的第二篇。这个系列会深度讲解我们如何用“确保只有一次”的方式把MySQL数据库中的改动实时地以流的方式传输出去，我们如何自动跟踪表模式变化，如何处理和转换流，以及最终如何把这些数据存储到Redshift或Salesforce之类的数据仓库中去。

2017-01-03 11:34:29 1834

The Architecture of Open Source Applications

讲开源软件架构的书。 Contents Introduction Amy Brown and Greg Wilson ix 1. Asterisk Russell Bryant 1 2. Audacity James Crook 15 3. The Bourne-Again Shell Chet Ramey 29 4. Berkeley DB Margo Seltzer and Keith Bostic 45 5. CMake Bill Hoffman and Kenneth Martin 67 6. Eclipse Kim Moir 77 7. Graphite Chris Davis 101 8. The Hadoop Distributed File System Robert Chansler, Hairong Kuang, Sanjay Radia, Konstantin Shvachko, and Suresh Srinivas 111 9. Continuous Integration C. Titus Brown and Rosangela Canino-Koning 125 10. Jitsi Emil Ivov 139 11. LLVM Chris Lattner 155 12. Mercurial Dirkjan Ochtman 171 13. The NoSQL Ecosystem Adam Marcus 185 14. Python Packaging Tarek Ziadé 205 15. Riak and Erlang/OTP Francesco Cesarini, Andy Gross, and Justin Sheehy 229 16. Selenium WebDriver Simon Stewart 245 17. Sendmail Eric Allman 271 18. SnowFlock Roy Bryant and Andrés Lagar-Cavilla 291 19. SocialCalc Audrey Tang 303 20. Telepathy Danielle Madeley 325 21. Thousand Parsec Alan Laudicina and Aaron Mavrinac 345 22. Violet Cay Horstmann 361 23. VisTrails Juliana Freire, David Koop, Emanuele Santos, Carlos Scheidegger, Claudio Silva, and Huy T. Vo 377 24. VTK Berk Geveci and Will Schroeder 395 25. Battle For Wesnoth Richard Shimooka and David White 411 Bibliography Making Software

2011-09-17