(English follows)
Chers usagers du Datamart du SMC,
A compter de juin 2025 (date exacte à confirmer), les
fichiers des données citypage_weather, de prévision météorologique par ville, seront mis à jour pour introduire une dimension temporelle afin de rendre ces fichiers uniques. Cette approche permettra
d’éviter d’éventuelles corruptions qui peuvent survenir lors de l’accès automatique (ex :
AMQP), à ces fichiers actuellement écrasés lorsque les données sont plusieurs fois rafraichies dans l’heure.
Compte tenu de l’augmentation du nombre de fichiers par province et territoire, une nouvelle hiérarchie de répertoires par heure UTC, respectant nos standards, sera mise en place afin de limiter le nombre de fichiers dans
un seul répertoire.
Par exemple, plutôt que le fichier « s0000635_f.xml » pour la prévision officielle à Montréal soit écrasé plusieurs fois dans l’heure dans ce répertoire :
https://dd.meteo.gc.ca/citypage_weather/xml/QC/s0000635_f.xml
De nouveaux fichiers uniques seront générés :
Avec :
Ces fichiers seront alors hébergés dans le répertoire correspondant à l’heure HH (UTC) :
https://dd.meteo.gc.ca/citypage_weather/QC/{HH}
Afin d’aider nos usagers dans cette autre migration d’envergure,
ces nouveaux fichiers seront disponibles dans cette nouvelle hiérarchie de répertoires dès le 10 décembre 2024 et resteront disponibles en parallèle aux fichiers actuels pendant les 6 prochains mois.
Ensuite, seuls ces nouveaux fichiers par date seront disponibles.
Veuillez noter que le contenu des fichiers ne sera pas modifié, seuls les noms de fichiers seront ainsi mis à jour.
La
documentation sera bien entendu ajustée en conséquence.
N’hésitez pas à me contacter pour toute question ou supplément d’information.
Je vous souhaite une très belle semaine.
Cordialement,
Sandrine
============================
Dear MSC Datamart users,
As of June 2025 (exact date to be confirmed), citypage_weather data files will be updated to introduce a time dimension to make these files unique. This approach
will avoid any possible corruptions that may occur during automatic data access (e.g.
AMQP) to these files, which are currently overwritten when the data is refreshed several times within the hour.
Given the increase in the number of files per province and territory, a new hierarchy of directories per UTC time will be implemented to limit the number of files in a single directory.
For example, rather than the file “s0000635_e.xml” for the official forecast in Montreal being overwritten several times during the hour in this directory :
https://dd.meteo.gc.ca/citypage_weather/xml/QC/s0000635_f.xml
New, unique files will be issued:
With :
These files will then be hosted in the corresponding directory for HH (UTC) time:
https://dd.weather.gc.ca/citypage_weather/QC/{HH}
To support our users in this further major migration, these new files will be available in this new directory hierarchy from December 10, 2024, and will remain available alongside the current files for the next 6 months.
Afterwards, only these new files by date will be available.
Please note that the content of the files will not be modified, only the file names.
Documentation will of course be adjusted accordingly.
Please do not hesitate to contact me should you have any questions or require further information.
I wish you a wonderful week.
All the best,
Sandrine
--------
Veuillez noter que je serai absente du 20 décembre au 07 janvier, seuls les courriels urgents seront traités pendant cette période.
Merci de votre compréhension et bons temps des fêtes! / Please note that I'll be away from December 20 to January 07, so only urgent e-mails will be answered during this period. Thank you for your understanding and happy holidays!
Sandrine Edouard
Responsable d'unité, Intendance des données et accès aux données ouvertes du SMC
Direction des Opérations du Centre canadien de prévision météorologique et environnementale
Environnement et Changement climatique Canada, Gouvernement du Canada
dps-client@ec.gc.ca
/ Tél (M365) : 1-438-801 0700
Liste de diffusion dd_info :
https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info
Unit Manager, Data Stewardship and MSC Open Data Access
Canadian Centre for Meteorological and Environmental Prediction Operations
Environment and Climate Change Canada, Government of Canada
dps-client@ec.gc.ca /
Phone (M365): 1-438-801 0700
dd_info mailing list:
https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info