Verification and Evaluation of Three Numerical Models for Area Rainfall Forecast in Qiandongnan Prefecture
In this paper, the spatial grid data outputted by ECMWF, GRAPES_GFS, and NCEP_GFS numerical models are precisely matched to the locations of each observation station using bilinear interpolation. The forecasting performance of surface rainfall for the Wuyang, Qingshui, and Duliu river basins from July to September 2022 is then evaluated using metrics such as mean absolute error, mean relative error, TS score, false negative rate, false positive rate, and accuracy. The results are as follows: 1) As the forecast time extends, the effectiveness of surface rainfall predictions from each numerical model gradually diminishes. The NCEP_GFS model exhibits the least stability. While it performs well for 24-hour forecasts in some basins, the decline in performance becomes more pronounced at 48 and 72 hours. Both the ECMWF and GRAPESGFS models demonstrate greater stability. 2) Considering all inspection results, the ECMWF model’s forecasting performance generally surpasses that of the other two models. For specific basins and forecast time periods, the GRAPESGFS model should be consulted for 72-hour forecasts in the Wuyang River basin, while the NCEPGFS model shows stronger performance for 24-hour forecasts in the Qingshui and Duliu river basins. 3) The omission rate for all three numerical models significantly exceeds the false alarm rate, necessitating attention to mitigating false positives in surface rainfall forecasts. The numerical models perform best in the Duliu River Basin and worst in the Wuyang River Basin, highlighting the need for manual correction.
Areal Rainfall
黔东南苗族侗族自治州(以下简称黔东南州)坐落在贵州省东南部,该地区处于云贵高原至湘桂丘陵盆地的过渡地带,地形地貌特征为北、西、南三面较高,东部较低。区域内拥有大小河流总计983条,其中流域面积超过50平方千米的河流达225条,主要以清水江、㵲阳河、都柳江三大河流为主干,它们犹如树枝般遍布全州各地。苗岭以北的清水江、舞阳河属于长江水系,流域总面积达到21,535平方千米;而苗岭以南的都柳江则归属于珠江水系,流域面积为8802平方千米。面雨量,即特定区域内或流域内的平均降雨量,能够较为准确地反映出整个区域的降雨状况,这一参数在洪水预测及水库调度等方面具有极高的重要性,是各级政府部门制定防汛抗洪策略、水库运行调度等关键决策的重要依据
目前,针对黔东南州面雨量预报评估较少,而强降雨对该地区的影响极为严重,已成为黔东南州亟待应对的主要气象灾害问题之一。因此,通过对面雨量数值预报的有效评估,以此提高预报准确率,从而减轻气象灾害带来的负面影响和经济损失,确保人民群众的生命财产安全。
在本次研究中,黔东南州被划分为三个主要流域区域,以便更好地分析和比较不同地区的气象特征和预报效果:1) 北部㵲阳河流域(黄平、施秉、镇远、三穗、岑巩);2) 中部清水江流域(麻江、丹寨、雷山、凯里、台江、剑河、天柱、锦屏);3) 南部都柳江流域(榕江、从江、黎平)。
本文使用的资料时段2022年7~9月,站点实况资料为黔东南州15个国家基本气象站、1个国家基准气候站及448个气象观测站逐日(20:00~20:00,北京时,下同)降雨资料。各检验产品为ECMWF、GRAPES_GFS、NCEP_GFS 3种数值模式20时起报的24~72小时降水预报产品。在对预报产品进行评价时,运用了双线性插值方法将数值模式输出的空间格点数据精确匹配到各个观测站点位置,从而进行各项检验指标的计算。这样的做法旨在客观评估各数值模式对黔东南州面雨量预报的性能优劣。
因黔东南州站点分布较为密集,本文采用算术平均法计算面雨量
(1) 平均绝对误差( )
(1)
式中: 和 分别为面雨量预报值和实况值,本文仅统计实况有雨且预报也有雨时的误差。
(2) TS评分、漏报率(PO)、空报率(FAR)和正确率(PC)
(2)
(3)
(4)
(5)
式中:NA、NB和NC分别为降水预报正确、空报和漏报的天数,ND为无降水预报正确的天数。
综上所述,从平均绝对误差检验结果来看,ECMWF模式在黔东南州面雨量预报性能显著,其次为GRAPES_GFS模式。
图1. 三种数值模式在黔东南州未来72小时面雨量预报平均绝对误差。(a) 㵲阳河,(b) 清水江,(c) 都柳江
在㵲阳河流域,24、48 h为ECMWF模式最高,72 h GRAPES_GFS模式最高;清水江和都柳江流域,24 h NCEP_GFS模式最高,48、72 h ECMWF模式最高。NCEP_GFS模式虽在部分流域初始时段预报效果较好,但48、72 h其评分下降趋势更为显著,稳定性较差。三种数值模式在㵲阳河流域所有时效的TS评分均低于50%,在清水江和都柳江流域最高接近70%。从TS评分来看,ECMWF模式在三个流域表现均较好。
图2. 三种数值模式在黔东南州未来72小时面雨量预报TS评分。(a) 㵲阳河,(b) 清水江,(c) 都柳江
㵲阳河流域,在24、48 h预报中,ECMWF模式的漏报率、空报率最低,72 h预报GRAPES_GFS模式的漏报率、空报率最低。
清水江流域,在24~72 h预报中,ECMWF模式漏报率均最低;空报率方面,24 h预报NCEP_GFS模式最低,48 h预报ECMWF模式和GRAPES_GFS模式最低,72 h预报ECMWF模式最低。
都柳江流域,在24~72 h预报中,ECMWF模式漏报率均最低;空报率方面,24 h预报NCEP_GFS模式最低,48 h预报GRAPES_GFS模式最低,72 h预报ECMWF模式最低。
整体来看,三种数值模式所有预报时效的漏报率均高于空报率,因此在面雨量预报中需注意消空处理。从流域来看,三种数值模式在㵲阳河流域的漏报率、空报率要远高于清水江、都柳江流域。
图3. 三种数值模式在黔东南州未来72小时面雨量预报漏报率。(a) 㵲阳河,(b) 清水江,(c) 都柳江
图4. 三种数值模式在黔东南州未来168小时面雨量预报空报率。(a) 㵲阳河,(b) 清水江,(c) 都柳江
综上所述,对于面雨量的晴雨预报,除清水江、都柳江流域的24 h预报以NCEP_GFS模式最有参考价值,其余均以ECMWF模式最具参考价值。
图5. 三种数值模式在黔东南州未来72小时面雨量预报正确率。(a) 㵲阳河,(b) 清水江,(c) 都柳江
本文通过平均绝对误差、平均相对误差、TS评分、漏报率、空报率、正确率等检验方法对黔东南州㵲阳河、清水江、都柳江三个流域2022年7~9月的面雨量预报效果进行了检验,得到如下几点结论:
(1) 随着预报时效的延长,各数值模式的面雨量预报效果逐步降低。其中NCEP_GFS模式稳定性最差,虽在部分流域24 h预报效果较好,但48、72 h其预报效果下降趋势更为显著。ECMWF模式和GRAPES_GFS模式稳定性较好。
(2) 综合所有检验结果来看,ECMWF模式的预报效果总体优于另外两种模式。分流域分预报时效来看,㵲阳河流域中的72 h预报可以参考GRAPES_GFS模式,清水江、都柳江流域中NCEP_GFS模式的24 h预报表现较好。
(3) 三种数值模式所有预报时效的漏报率均远高于空报率,因此在面雨量预报中需注意消空处理;各数值模式在都柳江流域的预报效果最好,在㵲阳河流域的预报效果较差,需注意进行人工订正。