这篇博客总结了高可用和可扩展性网站架构的一些关键点，包括集群与分片的区别、数据库设计、负载均衡、缓存策略、分布式一致性、避免JOIN操作以及应对数据丢失的策略。同时，提到了Facebook、Twitter等网站早期的技术选择，如HBase、Cassandra、Memcache和Redis，并讨论了Python在后端和客户端的应用。文中还探讨了如何处理滥用、防止垃圾邮件和提高IO效率的方法。
大部分文章似乎有点老了，不知道现在FB、Tumblr、Pinterest、Twitter这些网站的架构是什么样子的了。
1、clustering vs sharding？自动/手动（需要去除join，添加cache，NoSQL似乎不如MySQL成熟？但HBase/Cassandra似乎又还可以）
2、技术为业务服务，架构为应用服务，so创新在于发现真正的有价值的问题（需求）
3、应用特定的数据库？物化“数据项”，无锁事务，append-only存储；为大规模scale设计：普通FS -> ceph/...（分布式对象数据库）
4、LB：缩短用户与“内容”之间的路径
5、howto protect data？howto USE them？
6、User table（存储用户信息的表）is not sharded.
7、shard with 大容量规划（means ‘hash big’）<-- add timestamp to hash key？
8、Mapping（分片/存储）& reverse-mapping（query）
9、cache：memcache/redis（支持的数据结构更丰富点）——不知道现在memcached功能是否完善了？
10、Scripting：sharding过滤器方案，迁移数据（not so good）
11、Pyres：Python over redis？（Res
最低0.47元/天 解锁文章
扫一扫
550
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
