Recurrent production issues at the Canadian Meteorological Centre / Problèmes récurrents de production au Centre Météorologique Canadien
by Alexandre Leroux
/[ le français suit ]//
/
Dear MSC Datamart users,
Please take note of the following message that explains the current
issues with some of the MSC Datamart content.
/"For more than a week now CMC has been experiencing recurrent delays
with the production of many post-processed products, for all models
suites. Production of the weather models per se on the supercomputer is
timely. However, the input/output of model data in the production of
post-processed data is greatly disturbed, resulting in delays in the
production of SCRIBE matrices, GRIB files (GRIB1, GRIB2) and production
of maps and images, just to name those. The issue is especially felt
during production peak period, but the severity of the issue varies from
day to day. A major troubleshooting effort is underway. Some plausible
causes have been ruled out and the investigation continues.////
///
/Please be assured that the efforts of
S//////hared//////S//////ervices//////and//////Environment
Canada//////staff at the CMC are entirely focused on maintaining
production and minimizing delays until the root cause of the issue is
found and fixed. Measures are being taken to stabilize the production
system//////and//////to reduce fluctuations in production timings
(possibly still involving delays, but to a lesser degree). In the event
that these measures do not produce the expected result, there is a
chance that we may use further mitigation strategies. This may include
delaying post-processing on the Regional Ensemble Prediction System
(REPS), limiting the production of lower-priority images and maps, and
delaying or cancelling the production of post-processing on parallel or
experimental model runs."/
Sincere regards
================
Chers usagers du datamart du SMC,
Veuillez prendre note du message suivant qui explique les problèmes
actuels associés à une partie du contenu du datamart du SMC.
/"Depuis plus d'une semaine maintenant//le CMC//éprouve//des
problèmes//récurrents//avec la production de//plusieurs//produits en
post-traitement, pour toutes les suites de modèles. //La production des
modèles météorologiques comme tel sur//la//super//informatique//est
relativement peu affectée et ponctuelle//,// par contre la capacité à
traiter les intrants/extrants des//données de//modèles//pour la
production de données en post-traitement//est grandement perturbée,
résultant en des retards dans la production des matrices SCRIBE, des
fichiers au format GRIB1 et GRIB2, et la production de cartes et
d'images, pour ne nommer que ce//ux-//la.//Les enjeux sont
particulièrement importants durant les pics de production, mais la
sévérité varie d'une période//à l'autre, d'une journée à l'autre. Un
effort majeur est en cours pour identifier les sources exactes de ces
problèmes. Des causes possibles ont été écartées et l//e travail
d'investigation se poursuit.///
/Sachez que tous les efforts sont faits//par les équipes de
Servi//c//e//s Partagés Canada et d'Environnement Canada au CMC//pour
maintenir la production et limiter les retards//, jusqu'à ce que les
causes à l'origine de ces problèmes soient identifiées, et les solutions
apportées. Des mesures sont prises//pour diminuer l'ampleur des
fluctuations//dans//la
production,//et//pour//la//stabiliser//(impliquant toujours des délais
possibles, mais moindres).//Dans l'éventualité que ces mesures ne
produiraient pas les résultats attendus, des mesures//de
mitigation//supplémentaires pourraient//être//utilisées//. Celles-ci
pourraient//inclure retarder//les tâches de//post-traitement sur
le//S//ystème régional de prévisions d'ensemble (SRPE), de limiter la
production d'images//et de cartes//ayant moindre priorité, et de
retarder ou d'annuler //la production//de données de post-traitement sur
des syst//èmes//de modèles en//passes//parallèle ou expérimenta//les//." /
Cordialement
--
Alexandre Leroux, M.Sc., ing.
National coordinator, Open Data Access (I) /
Coordonnateur national, Accès aux données ouvertes (I)
Data, Performance and Standards Section /
Section des Données, performance et standards
Environment Canada / Environnement Canada
alexandre.leroux(a)ec.gc.ca - (514) 421-5024
10 years, 9 months