Twitter架构图(cache篇)
浏览:5787次 出处信息
根据网上公开资料整理的Twitter架构,主要是cache方面,加了作者自己的补充,跟实际的架构未必完全一致。

一些数据:
- Cache分Page cache, fragment cache, row cache, vector Cache, cache命中率见图。
- Fragment cache存放了API各种请求格式的数据,包括XML, JSON, RSS, ATOM。
- 发表Tweets是先放入Kestrel, 再异步处理,Kestrel用的也是memcached协议。
- API requests: 550 r/s。
- POST tweets: 峰值:平时 80tweets/s, 奥巴马就任时达到 350tweets/s。
- Aggregator模块需要访问memcached multi get 数百个/s。
- Ruby on Rails前面还用了Varnish作前端反向代理。
参考资料:
- QCon London 2009: Upgrading Twitter without service disruptions
- Improving Running Components at Twitter (PDF slide)
建议继续学习:
- Twitter/微博客的学习摘要 (阅读:11797)
- Buffer和cache的区别是什么? (阅读:7636)
- 别得瑟了,你很可悲! (阅读:7593)
- 谈冷热数据 (阅读:6668)
- Linux操作系统中内存buffer和cache的区别 (阅读:6162)
- 学习:一个并发的Cache (阅读:5687)
- 关于Linux的文件系统cache (阅读:5646)
- 7个示例科普CPU Cache (阅读:4970)
- 详解MyISAM Key Cache(前篇) (阅读:4670)
- [squid] 过期时间在 60 秒内 squid 不 Cache 的问题 (阅读:4676)
QQ技术交流群:445447336,欢迎加入!
扫一扫订阅我的微信号:IT技术博客大学习
扫一扫订阅我的微信号:IT技术博客大学习
<< 前一篇:某分布式应用实践一致性哈希的一些问题
后一篇:Friendfeed的MySQL key/value存储 >>
文章信息
- 作者:Tim 来源: Tim[后端技术]
- 标签: cache Twitter
- 发布时间:2009-11-08 11:19:19
建议继续学习
近3天十大热文
-
[339] WordPress插件开发 -- 在插件使用 -
[152] 解决 nginx 反向代理网页首尾出现神秘字 -
[95] IOS安全–浅谈关于IOS加固的几种方法 -
[52] Hacker News 排名算法工作原理 -
[51] cookie窃取和session劫持 -
[47] 到底什么是MVC? -
[47] 程序员技术练级攻略 -
[47] 整理了一份招PHP高级工程师的面试题 -
[46] Shell的那些事儿 -
[46] 中间件和稳定性平台
