Twitter架构图(cache篇)
浏览:4858次 出处信息
根据网上公开资料整理的Twitter架构,主要是cache方面,加了作者自己的补充,跟实际的架构未必完全一致。
一些数据:
- Cache分Page cache, fragment cache, row cache, vector Cache, cache命中率见图。
- Fragment cache存放了API各种请求格式的数据,包括XML, JSON, RSS, ATOM。
- 发表Tweets是先放入Kestrel, 再异步处理,Kestrel用的也是memcached协议。
- API requests: 550 r/s。
- POST tweets: 峰值:平时 80tweets/s, 奥巴马就任时达到 350tweets/s。
- Aggregator模块需要访问memcached multi get 数百个/s。
- Ruby on Rails前面还用了Varnish作前端反向代理。
参考资料:
- QCon London 2009: Upgrading Twitter without service disruptions
- Improving Running Components at Twitter (PDF slide)
建议继续学习:
- Twitter/微博客的学习摘要 (阅读:9845)
- Buffer和cache的区别是什么? (阅读:6906)
- 别得瑟了,你很可悲! (阅读:6674)
- 谈冷热数据 (阅读:5939)
- Linux操作系统中内存buffer和cache的区别 (阅读:5375)
- 学习:一个并发的Cache (阅读:5129)
- 关于Linux的文件系统cache (阅读:4929)
- 详解MyISAM Key Cache(前篇) (阅读:4138)
- 7个示例科普CPU Cache (阅读:4305)
- [squid] 过期时间在 60 秒内 squid 不 Cache 的问题 (阅读:4125)
QQ技术交流群:445447336,欢迎加入!
扫一扫订阅我的微信号:IT技术博客大学习
扫一扫订阅我的微信号:IT技术博客大学习
<< 前一篇:某分布式应用实践一致性哈希的一些问题
后一篇:Friendfeed的MySQL key/value存储 >>
文章信息
- 作者:Tim 来源: Tim[后端技术]
- 标签: cache Twitter
- 发布时间:2009-11-08 11:19:19
建议继续学习
近3天十大热文
-
[85] memory prefetch浅析
-
[53] 基本排序算法的PHP实现
-
[50] 深入浅出cassandra 4 数据一致性问
-
[40] 转载:cassandra读写性能原理分析
-
[38] javascript插入样式
-
[37] JS中如何判断字符串类型的数字
-
[37] MySQL半同步存在的问题
-
[36] Inline Form Labels
-
[35] 字符引用和空白字符
-
[32] 获取Dom元素的X/Y坐标