数值天气预报遇见存储难题
数值天气预报是基于数学物理方法客观定量计算未来天气演变的科学。上世纪50年代，数值天气预报的首次成功起报，是天气预报领域的里程碑事件。历经半个多世纪的蓬勃发展，大气科学学科理论和高效数值计算方法不断完善，随着庞大的“海-陆-空-天”四位一体气象观测系统建立，大量观测数据同化驱动，并在强大算力加持下，数值天气预报掀起了一场静悄悄的革命，天气预报的有效性已提高到5-7天。
近年来全球变暖背景下，我国极端灾害性天气事件频发，对数值天气预报的精准度有了更高的要求。海量数据是数值天气预报的准确率不断提升的“基石”，我国参与的某些国际模式比较计划中，模拟数据集动辄数十PB的数据量。气象大数据不仅要在高并发情况下高速存储，同时还需要在毫秒级的时间内提供数据产品服务，气象数据存储系统面临着更高的性能挑战。
IO500获奖证书
刷新世界纪录146%，IO500冠军为气象存储带来“曙光”
气象数据存储系统不仅要保障最大算力的发挥，还需考虑后期扩容及运维等问题。据测算，预报精度提升3倍，计算资源就将提升27倍。对存储和计算资源进行扩展已成气象业务系统常规需求，存储系统既要无缝扩展又保证性能不降低。
近日，被公认针对存储领域最具权威的国际榜单IO500公布，这给气象数据存储系统带来了专业的参考指标，也为气象行业的存储布局带来了新的“曙光”。
据了解，IO500的10节点榜单将基准性能测试限制为10个客户端节点，包含带宽和元数据性能测试两大部分，共计十二项苛刻的场景测试，可以准确反应存储系统为实际程序提供的I/O性能，全面展现存储技术的水平，被视为衡量数据应用效率的核心指标。因此，历届冠军都是业内具有多年存储核心技术自研积累和技术创新能力的国内外一流厂商、高校和科研机构。
曙光ParaStor以优异的成绩脱颖而出，斩获冠军！曙光ParaStor将世界纪录提高146%，这背后是其极致的数据读写性能，以及对复杂应用的适配支撑能力。
IO500的完整榜单链接：https://io500.org/list/sc22/ten，或点击文末左下角阅读原文。
揭开曙光ParaStor分布式存储系统的庐山真面目
随着气象数据种类、数量日益繁多、范围尺度越来越大、时空分辨率越来越高，传统的气象数据存储传输处理方式在实时大数据存储、实时处理、响应时间等方面提出了很大的挑战。与此同时，高分气象卫星发射和高时空分辨率数值模式的发展，气象及相关行业数据日增量已达到数十TB的存储需求。
曙光自研的分布式存储系统ParaStor，拥有高性能、高可靠、海量共享等特点，满足了气象应用的容量需求和性能需求，保障高端计算平台在数值天气预报中发挥更大算力。此外，曙光ParaStor采用全冗余架构，提供从部件到整机的全面保护，各个层面保证数据安全性及系统稳健性，满足数值天气预报对存储系统可靠性的要求。同时，性能随容量线性增长，无需停止线上业务，便可实现PB级的在线动态扩容。扩展完成后，已有数据存储节点上的数据可根据策略自动迁移到新的数据存储节点上，实现容量和负载的全局均衡。
数值天气预报大规模并行计算会在短时间内产生大量的数据，并需要对数据进行有效的管理。曙光ParaStor分布式统一存储根据气象数据的周期性访问特性，基于策略的分级存储功能，数据可以在节点内/节点间进行分级存储，可对历史数据按期进行归档，降低存储使用成本，让海量气象数据生命周期管理更简单。
曙光ParaStor分布式存储系统正是凭借各项指标的优势深度参与了中国气象业务平台搭建，为精准预报构建更强大的数据存储基础，为数值预报业务提供存储支撑平台，为海量气象数据搭建高效、稳定、安全的存储资源池，曙光ParaStor分布式存储系统用行业领先的成绩硬核支撑气象数值预报，曙光存储性能第一的殊荣也是实至名归！
曙光ParaStor分布式存储系统助力中国气象事业
在近日，国务院印发《气象高质量发展纲要（2022—2035年）》，提出要加快推进气象现代化建设，努力构建科技领先、监测精密、预报精准、服务精细、人民满意的现代气象体系，充分发挥气象防灾减灾第一道防线作用。
“让数据跑的更快，让气象服务更精细、更精准、更及时”一直是曙光的使命。曙光协助国家气象信息中心建立的新一代分布式存储系统集群，部署存储系统容量数十PB，大幅提升原有决策支撑系统的分析处理能力。在2018年“玛丽亚”、“安比”、“山竹”等台风预报中，曙光ParaStor分布式存储系统支撑了上海合作组织青岛峰会、上海进口博览会的数值预报产品保障服务工作。
气候模式系统的研发与升级是当前气象界关注的焦点。由国家气候中心承担的次季节至季节气候预测（S2S）项目，旨在通过新的气候模式系统将预报尺度有效预测技巧由原来的两周延伸到60天左右，进而实现“无缝隙”气候预测。采用曙光自研ParaStor分布式存储产品，其高性能、高可靠等特点，也满足了S2S的应用各项需求，大幅度提升了S2S业务预报能力。
