Facebook Haystack图片存储架构
这篇讲的是Facebook在2010年OSDI会议上公开的图片存储系统Haystack。它解决的核心问题是：当图片数量达到千亿级别时，传统存储系统（如为小文件优化的NAS）会因海量元数据寻址和磁盘IO导致严重性能瓶颈，难以支撑用户流畅的图片上传与浏览体验。 作者从Facebook的实际困境出发，介绍了Haystack的核心设计。其巧妙之处在于，系统将大量小图片聚合到一个大文件中，并大幅简化元数据（仅保留必要的偏移量和长度），从而将一次图片读取操作从多次随机磁盘寻址，转变为一次顺序读取。这种架构显著减少了存储设备的寻道压力，提升了缓存效率。 论文中的实验数据表明，Haystack相比传统方案，能将缓存未命中时的磁盘操作次数减少100倍以上，这直接支撑了Facebook图片服务的高速增长。整个系统设计印证了作者的观点：面对超大规模数据，有效的工程化架构往往比复杂的技术堆砌更为重要。