Facebook准备使用'冷藏'来处理大量数据

Facebook正在重新思考存储数据的方式，以应对社交网络用户每月上传的7PB新照片。根据该公司基础设施工程副总裁的说法，随着照片数量的增长，Facebook需要找到更便宜，耗电更少的方式来存储它们。

用户每天上传约3亿张照片，更多是在特殊场合上传，周三，Facebook的Jay Parikh在阿姆斯特丹举行的欧洲结构会议上说。 “万圣节是我们今年最大的照片上传日，我们将在一天之内上传大约1到20亿张照片，”他说，“像万圣节前拍摄的照片很快就会失去兴趣，几天或几周后没有人看到他们，但“我们与用户的合同是，我们不能在数据不被访问时删除数据，我们必须保留数据，”他说。 Parikh表示，这导致了将照片放入“冷库”的想法。[

] [进一步阅读：最佳电视流媒体服务]

为此，Facebook计划建设一个新的数据中心，不同类型的存储，服务器硬件和网络设备的耗电量和成本要低于现有数据中心 - 所有这些都不会改变服务器的响应时间，“他表示。”但是，Facebook如何提高冷存储效率？当数据中心的成本和功耗降低时，通常会以牺牲访问速度为代价。

例如，在磁带上存储数据会降低功耗，但会严重降低数据访问速度。

亚马逊网络服务一条具有冰川云存储服务的中间道路，它可以替代磁带。该服务针对不经常访问的数据进行了优化，并且可以接受几个小时的检索时间。

根据Parikh的说法，Facebook的速度太慢了。 “我不可能有一张五年或十年前可以访问的照片，并且我会向用户展示一条标语，上面写着：'嘿，你为什么不在24小时内再试一次？它仍然是相对实时的，“他说，”

低功耗需求

图片提供：数据中心俄勒冈州知识Facebook数据中心

今天使用的大多数数据中心都经过优化，可以使用大量处理需要强大计算能力的任务的能力。 Parikh说，Facebook正在考虑的“冷藏”技术在另一个极端。 “你需要大量的空间，但你不需要太多的电力，”他说，并补充说，需要重新思考关于数据中心的一切问题，以解决Facebook面临的规模问题。

在高水平，Facebook正在开发一款软件，该软件可以确定在基础设施中如何以及如何在基础设施中存储一段内容的时间，Parikh说。 “这意味着数据的副本将随着时间的推移而变化，并利用我们将针对内容时代进行优化的不同部分基础设施。”他表示，软件层中的一些发明将允许Facebook仍然能够快速响应，但以更经济的方式存储数据，他表示。冷库将在未来一两年成为Facebook基础设施的一部分。 Facebook计划通过开放计算项目（Open Compute Project）披露和分享它认为与之相关的部分，这是Facebook启动的一项计划，旨在将开源软件协作模型应用于数据中心硬件世界。