Twitter架构图(cache篇)
浏览:4796次 出处信息
根据网上公开资料整理的Twitter架构,主要是cache方面,加了作者自己的补充,跟实际的架构未必完全一致。
一些数据:
- Cache分Page cache, fragment cache, row cache, vector Cache, cache命中率见图。
- Fragment cache存放了API各种请求格式的数据,包括XML, JSON, RSS, ATOM。
- 发表Tweets是先放入Kestrel, 再异步处理,Kestrel用的也是memcached协议。
- API requests: 550 r/s。
- POST tweets: 峰值:平时 80tweets/s, 奥巴马就任时达到 350tweets/s。
- Aggregator模块需要访问memcached multi get 数百个/s。
- Ruby on Rails前面还用了Varnish作前端反向代理。
参考资料:
- QCon London 2009: Upgrading Twitter without service disruptions
- Improving Running Components at Twitter (PDF slide)
建议继续学习:
- Twitter/微博客的学习摘要 (阅读:8613)
- Buffer和cache的区别是什么? (阅读:6849)
- 别得瑟了,你很可悲! (阅读:6532)
- 谈冷热数据 (阅读:5850)
- Linux操作系统中内存buffer和cache的区别 (阅读:5328)
- 学习:一个并发的Cache (阅读:5042)
- 关于Linux的文件系统cache (阅读:4847)
- 详解MyISAM Key Cache(前篇) (阅读:4087)
- 7个示例科普CPU Cache (阅读:4208)
- [squid] 过期时间在 60 秒内 squid 不 Cache 的问题 (阅读:4026)
QQ技术交流群:445447336,欢迎加入!
扫一扫订阅我的微信号:IT技术博客大学习
扫一扫订阅我的微信号:IT技术博客大学习
<< 前一篇:某分布式应用实践一致性哈希的一些问题
后一篇:Friendfeed的MySQL key/value存储 >>
文章信息
- 作者:Tim 来源: Tim[后端技术]
- 标签: cache Twitter
- 发布时间:2009-11-08 11:19:19
建议继续学习
近3天十大热文
- [70] IOS安全–浅谈关于IOS加固的几种方法
- [67] Twitter/微博客的学习摘要
- [64] 如何拿下简短的域名
- [61] find命令的一点注意事项
- [61] android 开发入门
- [60] Go Reflect 性能
- [58] 流程管理与用户研究
- [57] 图书馆的世界纪录
- [56] 读书笔记-壹百度:百度十年千倍的29条法则
- [56] Oracle MTS模式下 进程地址与会话信