孙婧
- 作品数：36 被引量：89H指数：7
- 供职机构：国家气象信息中心更多>>
- 发文基金：公益性行业(气象)科研专项公益性行业科研专项国家自然科学基金更多>>
- 相关领域：自动化与计算机技术天文地球文化科学更多>>
- 通用气象数据格式转换工具METPAD设计与实现被引量：4
- 2022年
- 气象数据是现代天气预报和气候预测业务的重要基础支撑,种类众多格式复杂,针对气象数据应用研究中缺乏便捷通用的格式转换处理工具的问题,设计开发了一种通用气象数据格式转换工具,采用Python开发算法工厂并调用第三方气象数据处理库集成实现气象数据的解读分析和格式转换,支持多种主要气象数据的处理,面向应用场景,提供命令行和可视化应用终端。该工具已在北京高性能计算机应用中心网站发布,并在数值预报模式中试支撑环境中部署应用。
- 赵春燕王彬孙婧孙婧
- 关键词：气象数据NETCDFHDF数据分析
- 气象算力统一管理与服务的设计与初步实现
- 2025年
- 【应用背景】随着气象信息化高速发展,气象算力呈现异构多元化、规模庞大、多地部署及应用需求持续多样化增长等特点,导致资源统筹集约难、管理分散低效、使用复杂度高、负载不均衡等问题。【目的】为解决传统单一算力系统直接登录使用的局限性,本文设计并实现了气象算力统一管理服务平台,旨在提供算力资源的综合应用支撑,持续高效地满足数值预报业务及研发需求。【方法】气象算力统一管理的整体设计思路遵循层次化理念,围绕应用和服务需求,构建资源层、管理层和服务层三大核心组成部分,实现融合气象统一身份认证的多维鉴权及权限自动匹配的资源访问控制,提供新的基于WEB的算力统一访问、基于REST API的调度适配和作业分发运行等核心功能。【结果】国家气象信息中心首次建设气象算力统一管理服务平台,在中国气象局数值预报中心等核心业务单位开展试点应用,初步实现气象算力统筹管理和融合应用服务,提升了资源利用效率与管理效能。【结论】研究和建设成果为气象预报预测业务及研究提供了全新的资源使用方式,强化了气象领域的算力服务和支撑能力,具有重要的实践意义和应用价值。
- 沈瑜孙婧刘金霞赵春燕姚旺常飚梁雪
- 关键词：统一身份认证资源访问控制
- 气象大模型计算资源评估技术方法
- 2025年
- 【目的】近年来,气象大模型在天气预报领域内展现出超越传统数值方法的潜力。然而,其规模化训练和部署面临严峻的计算资源挑战。现有资源评估方法主要针对自然语言处理(NLP)领域的大模型,难以适应气象任务的动态计算需求(如时空多维特性)以及气象模型架构的独特性,导致资源利用率低下和算力成本高昂。为此,本研究旨在构建一个的气象大模型计算资源评估框架,通过量化模型的参数量、计算量、显存占用与通信开销,为硬件配置与资源分配提供理论依据,以降低计算成本,并确保气象大模型的高效稳定研发运行。【方法】提出多粒度计算资源联合评估框架(Multi-Granularity Computing Resource Joint Evaluation Framework,MGCRJEF),这个框架通过分模块建立参数量计算模型、时空感知FLOPs评估模型、显存占用模型及分布式通信分析模型,并结合气象数据的时空异质性特征,全面评估气象大模型对硬件资源的核心需求。【结果】以基于Swin-Transformer架构的盘古气象大模型(Pangu-Weather)为案例进行分析。该框架揭示了该模型的资源需求特点,例如在高分辨率输入时显存占用增加,在多节点训练中通信开销成为性能瓶颈,这些发现为资源优化提供了实践指导。此外,该框架计算的资源需求与实际的资源消耗基本一致,验证了该框架的合理性和有效性。【结论】MGCRJEF框架为气象大模型的资源需求评估提供了标准化方法,支持智算硬件环境下的资源规划,为气象领域的模型部署和硬件优化提供了理论依据和实践参考。
- 石宜衡王琦祎孙婧赵春燕邓帅吴鹏姚旺
- 关键词：资源优化
- 一种基于气象超算的人工智能大模型训练过程异构资源指标时序可视化方法及系统
- 本发明公开一种基于气象超算的人工智能大模型训练过程异构资源指标时序可视化方法及系统，包括如下步骤：步骤P1、超算架构智算资源指标采集，生成标准文本格式的日志文件；步骤P2、日志解析和入库存储，存储到分布式检索与分析引擎中...
- 赵春燕常飚李娟孙婧王琦祎石宜衡辛昱杭韩同欣沈瑜牛恺泽姚旺邓帅张新诺刘成林吴鹏李江涛
- IBM高性能计算机系统一次重大故障分析
- 2006年9月21日，IBM高性能计算机系统的HPS网络发生故障，导致了科研分区不能使用，但没有影响我们的业务模式系统。本文主要介绍了这次故障现象和解决办法，分析了故障发生的原因，并通过对故障的分析总结，探讨了我们目前存...
- 孙婧宗翔
- 文献传递
- 数值预报中试系统设计与关键技术实现被引量：2
- 2023年
- 气象数值预报模式是数值天气预报业务的重要基础,模式的研发改进需要在高性能计算环境中不断地开展模拟试验来检验评估预报效果。针对气象科学家手工编排批处理脚本开展数值模拟试验方式中存在的不便捷、耗时长、不可见、底层细节复杂、试验分析比对困难等问题,采用C/S架构,基于Python和工作流技术,设计实现了可视化界面交互“建模-计算-监控-分析-管理-共享”全流程集成应用的数值预报中试系统。应用结果表明,系统提升了模式研发试验效率和高性能计算机系统的易用性,在数值天气预报模式研发中试中发挥重要支撑作用,扩展性良好。
- 赵春燕周斌胡江凯胡江凯孙婧赵滨
- 关键词：数值预报模式中试工作流交互界面
- 中国气象局高性能计算机发展历程被引量：2
- 2018年
- 孙婧李娟沈瑜张新诺顾文静
- 关键词：高性能计算机
- 高性能计算机系统相对持续性能度量模型被引量：3
- 2015年
- 高性能计算机系统的持续性能是反映实际领域应用中高性能计算机系统性能强弱的重要度量标准。简单介绍了高性能计算机系统常用的性能评价方法,结合应用基准程序集,提出了相对持续性能的度量模型。实验基于高性能计算气象应用评测,结果表明应用相对持续性能度量模型可区分不同厂商的高性能计算机系统的性能强弱,为高性能计算机系统的选择提供参考,并在一定程度上反映了气象应用本身的可扩展性。
- 肖华东孙婧魏敏李娟沈瑜
- 关键词：性能评价
- 基于LDM的气象TIGGE系统接收时效研究优化
- 2014年
- 为了解决气象TIGGE系统数据接收效率低下的问题,分析研究了LDM数据传输软件的处理机制,针对业务传输流程,结合数据传输模式规范的特点,设计优化了系统的数据接收处理流程。通过调整对接收数据的处理模式,利用事件触发机制,将数据接收和后续处理紧密结合起来,建立两个环节的通路,减少了中间环节,从而提高了整个TIGGE数据接收时效。在业务系统中运行测试结果表明,基于LDM软件事件触发机制的处理流程极大地提升了系统数据接收时效,取得了很好的业务运行效果。
- 聂元丁孙婧
- 关键词：气象TIGGE事件触发
- 高性能计算机统一资源管理系统的设计与实现被引量：10
- 2014年
- 高性能计算是气象业务及科研应用的重要的基础平台,中国气象局(CMA)近年来相继引进多套高性能计算机系统用以提高气象服务和研发能力。随着用户和应用的增加,如何有效管理高性能系统资源成为一个重要课题。本文详解介绍CMA高性能计算机系统统一资源管理平台的设计和实现,该系统可以对多套异构的高性能计算机系统进行统一的资源精细化统计分析和计费管理,通过该平台,系统管理员动态掌握系统的运行和资源使用情况,并据此调整系统资源分配调度策略,从而更合理高效的利用系统资源,有效提高系统运行效益。
- 沈瑜李娟常飚孙婧
- 关键词：高性能计算机系统CPU利用率计算资源
