深度学习技术在空间天气预报中的应用研究课件.pptx

1、一、空间天气简介一、空间天气简介二、空间天气预报研究二、空间天气预报研究三、深度学习技术在空间天气预报中的三、深度学习技术在空间天气预报中的初步应用初步应用四、未来设想四、未来设想 什么是空间天气？空间空间天气是指太阳表面、日地空间和地球磁场、高层大气中天气是指太阳表面、日地空间和地球磁场、高层大气中能够影响能够影响天地基技术系统性能与可靠性、危及人类健康与生命的天地基技术系统性能与可靠性、危及人类健康与生命的变化变化物质条件物质条件综合状况。综合状况。（NSWP Strategic Plan,June 2010)内涵：能够影响人类活动的变化的物质条件综合状态内涵：能够影响人类活动的变化的物质

2、条件综合状态外延：太阳表面、日地空间、地球磁层和高层大气外延：太阳表面、日地空间、地球磁层和高层大气空间天气的影响 航天器计算机和内存系航天器计算机和内存系统翻转和失效，太阳电统翻转和失效，太阳电池损坏，航天辐射安全池损坏，航天辐射安全威胁等威胁等 无线电干扰、信号闪烁、无线电干扰、信号闪烁、导航系统中断等导航系统中断等 电力故障，通信电缆毁电力故障，通信电缆毁坏坏空间天气预报研究参数分布预报环境条件（高能电子、质子分布、磁层粒子、大气密度、电离层电子密度、地磁场）指数预报事件预报统计模式统计模式物理模式统计模式空间天气预报方法研究p 物理模式：物理模式：以电动力学、磁流体动力学以电动力学、磁

3、流体动力学 (Magneto Hydro Dynamics,MHD)(Magneto Hydro Dynamics,MHD)和运动学理论来描述空间天气事件中能量、动量、质量和磁和运动学理论来描述空间天气事件中能量、动量、质量和磁通量等物理量的传输通量等物理量的传输p 实现手段：实现手段：主要是数值模拟，也称为数值预报主要是数值模拟，也称为数值预报p 从经验模式向物理模式过渡需要：从经验模式向物理模式过渡需要：人们对日地空间事件的发展过程和物理规律有了清楚的了解人们对日地空间事件的发展过程和物理规律有了清楚的了解 空间探测技术的发展为预报提供实时的监测数据空间探测技术的发展为预报提供实时的监测数

4、据物理模式物理模式物理模式p 统计模式（经验模式）：统计模式（经验模式）：依据预报对象与预报因子之间的统计关系而建立的预报方法依据预报对象与预报因子之间的统计关系而建立的预报方法p 主要的统计分析技术：主要的统计分析技术：成熟的数学方法：自成熟的数学方法：自回归、小波分析、时序叠加分析、滤波回归、小波分析、时序叠加分析、滤波技术、模糊分析、物理量场的平均、神经网络技术技术、模糊分析、物理量场的平均、神经网络技术等等 输入输出分析：经验统计方程输入输出分析：经验统计方程p 模式创新的途径：模式创新的途径：主要受观测积累和数学研究进展的约束主要受观测积累和数学研究进展的约束 预报因子更新预报因子更

5、新 分析技术更新分析技术更新统计模式p 混合模式（半经验模式）：统计关系和物理基础的有机结合，如 Wang-Sheeley的太阳风膨胀模式、Tsyganenko的地磁场模式p 二者对比：统计模式：统计模式：灵活，更快、更准确地预测训练区域的预测对象 但训练区域之外的预测是不确定的，缺乏可拓展性 物理模式：物理模式：能够提供一系列变量的预测 预测结果大多不能满足业务预报对预测精度的要求p 物理知识引导经验模式的发展；物理模式依赖于经验近似来描述一些物理过程混合模式混合模式混合模式p 统计模式（经验模式）：统计模式（经验模式）：依据预报对象与预报因子之间的统计关系而建立的预报方法依据预报对象与预报

6、因子之间的统计关系而建立的预报方法p 主要的统计分析技术：主要的统计分析技术：成熟的数学方法：自成熟的数学方法：自回归、小波分析、时序叠加分析、滤波回归、小波分析、时序叠加分析、滤波技术、模糊分析、物理量场的平均、神经网络技术技术、模糊分析、物理量场的平均、神经网络技术等等 输入输出分析：经验统计方程输入输出分析：经验统计方程p 模式创新的途径：模式创新的途径：主要受观测积累和数学研究进展的约束主要受观测积累和数学研究进展的约束 预报因子更新预报因子更新 分析技术更新分析技术更新统计模式空间天气预报研究分析技术分析技术观测数据观测数据物理模式、统计模式、混合模式统计模式空间天气监测太阳多光谱观

7、测：太阳多光谱观测：DSCOVR：2015；STEREO A/B：2006；SDO：2010，SOHO：1996；行星际磁场和太阳风：行星际磁场和太阳风：ACE：1997近地空间磁场和粒子：近地空间磁场和粒子：GOES系列：系列：1975卫星卫星观测观测计算和存储条件系统配置简要存储系统存储能力大于350TB高速运算系统计算节点IBM BladeCenter HS22 刀片服务器 118个IBM IBM BladeCenter E 7U 刀片机箱 8个管理服务器IBM S System X3650 2U服务器1个数据库服务器IBM S System X3950 M2 4U服务器1个IBM S

8、System X3650 2U服务器1个核心交换设备Cisco Catalyst 3750 千兆交换机5个存储系统IBM FC SAN DS4700机柜42U标准机柜4个人工神经网络通过模仿生物大脑神经元之间传递和处理信息的模式，利用数据学习过程，建立具有自适应性的模型，能够处理复杂的非线性问题。2006年，Hinton等（2006）改进了训练算法和传输函数，发展得到深度神经网络。Deep Neural Network，DNN：深度神经网络Recurrent Neural Network，RNN：递归神经网络GRN，LSTM，Bi-RNN，.Convolutional Neural Netwo

9、rk，CNN：卷积神经网络BPBP网络网络RNNRNNLSTMLSTM网络网络深度学习人工智能机器学习深度学习深度学习对预报研究的促进作用卷积神经网络卷积神经网络递归神经网络递归神经网络图像数据图像数据太阳活动观测数据时间序列时间序列数据数据行星际太阳风、磁场变化数据以及近地空间环境磁场和粒子探测数据等一、空间天气简介一、空间天气简介二、空间天气预报研究二、空间天气预报研究三、深度学习技术在空间天气预报中的三、深度学习技术在空间天气预报中的初步应用初步应用四、未来设想四、未来设想空间天气预报研究分析技术分析技术观测数据观测数据基于LSTM的高能电子暴预报研究线性滤波法多元非线性拟合径向扩散人工

10、智能REFM基于AE和Dst指数的预报模型低能电子模型地磁脉动预报模型径向扩散模型全连接神经网络模型支持向量机模型地磁暴预报模型基于LSTM的高能电子暴预报研究高能电子暴预报模型线性滤波法多元非线性拟合径向扩散人工智能线性预测滤波REFM基于AE和Dst指数的预报模型低能电子模型地磁脉动预报模型径向扩散模型全连接神经网络模型多层反馈型神经网络结构RBF的神经网络结模型支持向量机模型 数据采集：1995.05.012017.04.30数据收集清单序号数据名称分类分辨率时段单位来源1相对论电子通量数据F5 min1995.05.01-2017.04.30cm(-2)s(-1)sr(-1)GOES系

11、列卫星(大于2Mev)2太阳风参数V1 hour1998.02.05-2017.01.21(ACE)1995.01.01-2017.04.30(WIND)km/sACE、WIND飞船（space physics data facility）NN/cm3TK3Dst指数D1 hour1957.01.01-2017.04.30nT京都大学地磁数据中心4AE指数E1 hour1957.07.01-2017.04.30nT5Kp指数K3 hour1932.01.01-2017.04.306Ap指数AnT7磁层顶日下点距离R1 min1995.01.01 2017.05.07 国家空间科学中心基于LST

12、M的高能电子暴预报研究l训练集：19982007，测试集：2008-2010年l输入：前五日的电子日积分通量，及其与地磁指数、太阳风参数、磁层顶日下点距离等的组合；输出：未来24小时的电子日积分通量l 各模型预测结果进行对比分析基于LSTM的高能电子暴预报研究Models2008200920102008-2010rPERMSErPERMSErPERMSErPERMSEFA0.9140.8160.3868710.9480.8970.3136570.9590.9170.3269350.9680.9330.344007FDA0.9110.8010.4030010.9450.8900.3232070.

13、9540.9060.3470360.9650.9270.359350FVA0.9240.8250.3774150.9410.8860.3299260.9580.9110.337830.9680.9310.349036FAE0.9080.8090.3951190.9380.8740.3459950.9490.8970.3640750.9630.9230.368979FDE0.9220.8490.3513150.9420.8750.3440880.9560.9090.3414440.9670.9320.345646FVE0.8910.7810.4221350.8860.5920.6230920.9

14、230.8280.4693620.9440.8520.512026FVDE0.8350.6110.5632580.8850.7690.4689730.8940.7850.5250700.9270.8470.520583 调试改进模型增加隐含层数ModelsPE2008200920102008-2010FVA-1h0.8430.8960.9220.939FVA-1h-20.8460.9110.9220.941FVA-1h-30.8490.9020.9250.941FVDE-1h0.7870.8690.9100.922FVDE-1h-20.8170.8900.9140.931FVDE-1h-30.

15、8150.8970.9070.930基于LSTM的高能电子暴预报研究l 几几个主要模型在个主要模型在0808年和年和1010年高能电年高能电子事件发生时对应的预测值子事件发生时对应的预测值，统计统计事件事件第一天预测出的次数第一天预测出的次数，计算计算报报准率。准率。l 在在0808年的对比中，高能电子事件共年的对比中，高能电子事件共计发生计发生2727次，次，FA-1hFA-1h、FDEFDE及及FDE-1hFDE-1h三种模型表现良好，预测出事件第三种模型表现良好，预测出事件第一天的次数分别为一天的次数分别为1313、1515、1313，预，预测准确率分别为测准确率分别为48%48%、56

16、%56%和和48%48%l 在在1010年的对比中，高能电子事件共年的对比中，高能电子事件共计发生计发生1010次，次，FA-1hFA-1h表现良好，表现良好，FVA-1hFVA-1h、FDEFDE、FKRFKR和和FARFAR四种四种种种模模型型表现表现持平持平，预测出事件第一天的预测出事件第一天的次数分别为次数分别为7 7、6 6，预测准确率分别预测准确率分别为为70%70%、6060%预测结果分析统计事件第一天报准率基于LSTM的高能电子暴预报研究 预测结果分析拐点处预测效果分析基于LSTM的高能电子暴预报研究 预测结果分析拐点处预测效果分析基于LSTM的高能电子暴预报研究 小结基于LS

17、TM的高能电子暴预报研究电离层是601000km高度，部分或完全电离状态的大气，其基本参数有总电子含量TEC、F2层临界频率、F2层电子密度和F2层峰值高度等。电离层暴是扰动太阳风到达地球磁层，使电离层发生全球性的剧烈的扰动，强烈偏离静日背景值。电离层总电子含量TEC直接决定了卫星信号传输过程的时延误差。太阳风扰动极区加热粒子沉降穿透电场抬升电离层热层暴环流O/N2变化负暴正暴改变复合率下沉电离层太阳辐射增强耀斑增加电离率电离层TEC预报模型电离层总电子含量：TEC（欧洲定轨中心，1小时、52.5分辨率）太阳活动指数：F10.7（NOAA国家地球物理数据中心，1天分辨率）地磁活动指数：ap（日

18、本京都地磁数据中心，1小时分辨率）太阳风速度：Vx（ACE卫星，1小时分辨率）行星际磁场南向分量：Bz（ACE卫星，1小时分辨率）数据范围：1999年2015年测试集：2001年，2015年；训练集：余下年份使用深度学习递归神经网络（RNN）方法，加入太阳风作为网络的输入参量，建立北京地区电离层TEC的经验预报模型。研究目的研究目的数据和方法数据和方法单站TEC预报模型RNN模型：五层RNN模型，即输入层、三层隐含层和输出层；激活函数为线性函数；优化器为RMSprop算法；目标函数为均方差。使用同样的数据集，训练三层BP神经网络模型Chen et al.2005，作为对比组。输入：5天*输出：

19、24小时*TECSample set 1Sample set 2Sample set 3TEC,F10.7,apTEC,F10.7,Vsw,Bz TEC,F10.7,ap,Vsw,Bz6333个6011个6011个单站TEC预报模型最优模型参数最优模型参数TEC相对前滑13天中值的偏差：三分类混淆矩阵：%100中值中值TECTECTECTEC predTure positive stormnegetive stormpeacepositive stormTrue P StormFalse P1False P2negetive stormFalse N1True N StormFalse N2p

20、eaceFalse Peace1False Peace2True Peace电离层暴判断阈值|TEC|20%，并持续3小时以上。Kouris et al.2008N2 False+N1 False+StormN TrueStormN True=rate-hitN P2 False+P1 False+Storm PTrueStorm PTrue=rate-hit PSample set 1Sample set 2Sample set 3173164164130119119单站TEC预报模型确定隐含层神经元数：RNN 30,20,20，BP14,14,14最优模型参数最优模型参数不同参数的模型的正

21、、负暴报准率相关性单站TEC预报模型北京电离层TEC的预报误差RMSE平均误差平均误差均方根误差：，/TECUn-RMSE2predobsTECTECSample set 1Sample set 2Sample set 3RNN3.403.663.46BP4.133.943.85单站TEC预报模型电离层暴预报结果电离层暴预报结果混淆矩阵：TrueStorm rate=TS/(TS+FP),报准率FalseStorm rate=FS/(FS+TP)，虚警率Ture predstormpeacestormTrueStormFalsePeacepeaceFalseStormTruePeaceFawc

22、ett et al.2006RNN(红)和BP(蓝)网络的报准率、虚警率及AUC值单站TEC预报模型电离层暴预测结果电离层暴预测结果RNN预测值BP预测值实测值单站TEC预报模型l增加太阳风参数作为预报因子提升了模型对电离层暴的报准率lRNN和BP模型均能有效的预测电离层TEC的日变化趋势，RNN模型误差明显低于传统BP神经网络小结小结单站TEC预报模型多元线性回归法 建立F10.7和地磁指数等与电离层参数之间的经验关系式，如STORM模型。神经网络法 Chen et al.2005 BP网络-F10.7、foF2，提前24h预报foF2；Nakamura et al.2007 BP网络-F1

23、0.7、太阳黑子数、DOY、K指数，提前24h 预报foF2；Huang et al.2014 RBF网络-F10.7、DOY、LT、Dst、TEC，提前30min预报TEC，模型误差RMSE5 TECU；Nishioka et al.2016 BP网络-F10.7、Mg、DOY、K指数、TEC，提前24h预报TEC，平静电离层模型和扰动电离层模型平均误差分别为2 TECU、4.7 TECU。数据同化法 现报和短期预报电离层区域TEC预报模型电离层总电子含量：TEC（欧洲定轨中心，1小时、52.5分辨率）太阳风速度：Vsw（ACE卫星，1小时分辨率）行星际磁场南向分量：Bz（ACE卫星，1小时

24、分辨率）太阳活动指数：F10.7（NOAA国家地球物理数据中心，1天分辨率）地磁活动指数：ap（日本京都地磁数据中心，1小时分辨率）数据范围：1999年2015年测试集：2001年，2015年；训练集：余下年份在RNN单站模型的基础上，试图直接使用区域TEC数据作为输入和输出，建立中国局部区域地区的TEC经验预报模型。电离层区域TEC预报模型输入：5天*输出：24小时*TECSample set 1Sample set 2TEC,F10.7,ap TEC,F10.7,vp,Bz网格区域模型：TEC输入为35N45N，110E120E范围的55格点数据；五层RNN模型。Station123456

25、78910Lat（N）52.5 45.0 40.0 35.0 35.0 30.0 30.0 25.0 25.0 17.5Lon（E）12585115110105120115120100110多点区域模型李美玲 等，2015：增加一个地理经纬度数据的输入层，选取10个经纬度格点的TEC数据进行训练，作为对比。电离层区域TEC预报模型网格模型的预测结果网格模型的预测结果-20150318-20150318相对误差相对误差apVSW,BZ电离层区域TEC预报模型网格区域模型110E上五个纬度格点的RMSE网格模型与多点模型的比较网格模型与多点模型的比较多点区域模型在110E附近五个纬度格点的RMSE

26、电离层区域TEC预报模型RMSElongitude（E）100105110115120latitude（N）45.03.303.443.333.553.5942.53.233.263.413.323.8440.03.513.423.453.593.593.5437.53.723.643.673.723.7435.04.424.294.294.374.31RMSElongitude（E）100105110115120latitude（N）45.03.223.233.293.333.5242.53.223.193.243.293.4540.03.323.273.303.353.353.4437.5

27、3.643.573.623.623.7535.04.274.254.274.274.27ap网格模型RMSEVsw，BZ网格模型RMSE*RNN北京单站模型的RMSE为3.40 TECU和3.66 TECU 区域模型与单站模型的比较区域模型与单站模型的比较电离层区域TEC预报模型l增加行星际太阳风参数可提升区域模型预报效果l建立的网格区域模型和多点区域模型均能有效的预测电离层 TEC，网格区域模型性能明显优于多点区域模型l区域模型对中高纬地区预测效果较好，误差在 3.5 TECU 左右电离层区域TEC预报模型未来设想未来设想经验预报仍占据重要的地位主观性预报，经验来源于对典型太阳风暴过程及相关信息的积累和综合和已经掌握的规律基于机器学习的人工智能预报实现无人预报机器预报人工经验预报