Twitter架构图(cache篇)
浏览:4740次 出处信息
根据网上公开资料整理的Twitter架构,主要是cache方面,加了作者自己的补充,跟实际的架构未必完全一致。
一些数据:
- Cache分Page cache, fragment cache, row cache, vector Cache, cache命中率见图。
- Fragment cache存放了API各种请求格式的数据,包括XML, JSON, RSS, ATOM。
- 发表Tweets是先放入Kestrel, 再异步处理,Kestrel用的也是memcached协议。
- API requests: 550 r/s。
- POST tweets: 峰值:平时 80tweets/s, 奥巴马就任时达到 350tweets/s。
- Aggregator模块需要访问memcached multi get 数百个/s。
- Ruby on Rails前面还用了Varnish作前端反向代理。
参考资料:
- QCon London 2009: Upgrading Twitter without service disruptions
- Improving Running Components at Twitter (PDF slide)
建议继续学习:
- Twitter/微博客的学习摘要 (阅读:8134)
- Buffer和cache的区别是什么? (阅读:6837)
- 别得瑟了,你很可悲! (阅读:6443)
- 谈冷热数据 (阅读:5756)
- Linux操作系统中内存buffer和cache的区别 (阅读:5315)
- 学习:一个并发的Cache (阅读:4985)
- 关于Linux的文件系统cache (阅读:4791)
- 详解MyISAM Key Cache(前篇) (阅读:4072)
- 7个示例科普CPU Cache (阅读:4137)
- [squid] 过期时间在 60 秒内 squid 不 Cache 的问题 (阅读:3977)
QQ技术交流群:445447336,欢迎加入!
扫一扫订阅我的微信号:IT技术博客大学习
扫一扫订阅我的微信号:IT技术博客大学习
<< 前一篇:某分布式应用实践一致性哈希的一些问题
后一篇:Friendfeed的MySQL key/value存储 >>
文章信息
- 作者:Tim 来源: Tim[后端技术]
- 标签: cache Twitter
- 发布时间:2009-11-08 11:19:19
建议继续学习
近3天十大热文
- [55] Oracle MTS模式下 进程地址与会话信
- [55] IOS安全–浅谈关于IOS加固的几种方法
- [54] 如何拿下简短的域名
- [53] android 开发入门
- [52] 图书馆的世界纪录
- [52] Go Reflect 性能
- [49] 读书笔记-壹百度:百度十年千倍的29条法则
- [47] 【社会化设计】自我(self)部分――欢迎区
- [38] 程序员技术练级攻略
- [32] 视觉调整-设计师 vs. 逻辑