数据层解决方案

TaiESM 气候团队在不久的将来需要近 10PB 的数据存储来维持更高的建模数据需求。现有的存储可用性比率和有限的服务器空间无法再满足他们的应用和工作负载要求。数据交换的频率提高以及数据收集的改进意味着该团队需要始终有效的可用性、速度和改进的数据保护。

在追求 TaiESM 的第二阶段时，环境变迁研究中心需要更多的数据存储容量，以满足更强大的数据分析和更高分辨率的可视化要求，同时应对由数据增长和数据分散导致的复杂的结构化数据激增。

现有的存储设备空间、性能和可用性比率无法再满足该团队的应用和工作负载需求。为了使存储设备能够满足未来需要并对其进行扩展，使其能够存储更多研究数据和分析报告，存储设备需要立即扩展。

研究中心的数据增长已经远远超过一家普通研究机构的容量。气候变迁研究中心的当前研究数据容量预计已经达到 3PB。该中心预计在未来四年，气候数据量将至少再增长 10PB。气候团队每天模拟至少 2-4 TB 的数据，他们的需求是无缝气候数据交换，而不是孤立的数据。

同时，他们迫切需要改进建模的分辨率。当前版本的 TaiESM 提供的分辨率达不到研究的理想水平。为了准确模拟地形和天气条件（如台风），该团队希望将水平分辨率提高至少四倍。将分辨率提高四倍意味着数据量至少增长到 16 倍。

而要在气候研究实验室中更逼真地重现天气条件，该团队的需求变得更具挑战性。一个主要障碍要是随着温度从陆地到海洋的变化模拟天气条件的长期平均值。技术的进步提高了存储驱动器的容量和计算精度，使得可以使用更多的网格或地球分区，从而改进了模型预测。处理更多数据会带来更多资源机会，但处理也会产生更多数据。

为了追求高达 25 千米的视觉分辨率，该团队每天产生 32TB 到 64TB 的数据。中央研究院的气候团队必须不断调整和校准模块设置，并比较每种不同模块设置产生的数据，而这会进一步产生数据。有效可靠的数据存储对于该团队至关重要。硬盘故障曾经是他们的一大痛点，每个月需要花费大量成本更换 4 到 10 个故障硬盘。