https://www.chenk.top/zh/tags/hdfs/Recent content in HDFS on Chen Kai BlogHugozh-CNThu, 30 Mar 2023 09:00:00 +0000https://www.chenk.top/zh/cloud-computing/storage-systems/Thu, 30 Mar 2023 09:00:00 +0000https://www.chenk.top/zh/cloud-computing/storage-systems/<p>Netflix 存储 PB 级视频，Instagram 提供数十亿张照片，量化基金几分钟内回放一年的行情数据——这些都依赖于 <em>分布式存储系统</em>。从开发者的视角看，存储简单得近乎透明（<code>PUT key</code>、<code>GET key</code>），但只要跨过单机的边界，你就接管了一整摞折磨了学术界几十年的难题：如何在磁盘故障时保障数据不丢失、如何实现线性扩展、如何提供上层应用不易误用的一致性模型，同时将每 GB 存储成本压缩至几分钱。</p>