6:34 p.m.
(English follows)
Chers usagers du Datamart du SMC,
En décembre dernier, un changement important dans la structure de répertoires du Datamart
du SMC<https://dd.meteo.gc.ca/> a été mis en place. La structure de répertoires
statiques a été remplacée par une structure dynamique par date à la racine, où les
répertoires sont automatiquement créés dès que les données sont générées
opérationnellement et disponibles pour être hébergées sur le serveur HTTPS. De la sorte,
tous les jeux de données ont la même période de rétention de plusieurs semaines (environ
30 jours), et la gestion de nos infrastructures et de nos services de données s'en
trouve améliorée.
Tel
qu’annoncé<https://comm.collab.science.gc.ca/mailman3/hyperkitty/list/dd_info@comm.collab.science.gc.ca/message/OV2WNBMJ3TM3CXJSCFWJXINT53VGP47U/>
en mai dernier, les liens dynamiques qui ont été installés afin d’aider nos usagers dans
cette migration seront retirés le 7 octobre 2025.
Aussi, et pour limiter l’impact de ce changement important, le répertoire
/today<https://dd.meteo.gc.ca/today/> actuel qui pointe vers la structure sans date
et qui donne accès à tous les jeux de données (temps réel, climat, listes de stations,
etc.) va demeurer disponible. Ainsi, en utilisant l’URL : https://dd.meteo.gc.ca/today/
l’usager va retrouver exactement la structure du Datamart du SMC telle qu’elle existait
avant la migration dynamique.
La même structure sera aussi appliquée au serveur HPFX
Collab<https://hpfx.collab.science.gc.ca/>.
J’en profite pour rappeler à tous les usagers du service
AMQP<https://eccc-msc.github.io/open-data/msc-datamart/amqp_fr/>, recommandé
fortement pour accéder aux données du Datamart du SMC, qu’un ajustement au fichier de
configuration demeure nécessaire. En raison de la modification de la structure des
répertoires, le sujet/sous-sujet (topic/subtopic) des messages AMQP publiés sur
dd.meteo.gc.ca change également. Les utilisateurs de Sarracenia doivent dorénavant ajouter
le préfixe *.WXO-DD. à leurs sous-sujets (subtopic).
Par exemple, le sous-sujet (subtopic) : « bulletins.alphanumeric.# » doit être modifié en
sous-sujet (subtopic) : « *.WXO-DD.bulletins.alphanumeric.#. »
Finalement, notez que le serveur DD-Alpha<http://dd.alpha.meteo.gc.ca/>, le site Web
d'essai de données du Datamart du SMC, n’est pas impacté par ce changement.
Je vous invite fortement à migrer dès maintenant vers cette nouvelle architecture. Merci
de me contacter pour toute question, il me fera plaisir de vous aider.
Je vous souhaite un beau week-end. 😊
Sandrine
=====================
Dear MSC Datamart users,
Last December, a significant change in the directory structure of the MSC
Datamart<https://dd.weather.gc.ca/> was implemented. The static directory structure
has been replaced by a dynamic structure organized by date at the root, where directories
are automatically created as soon as data is generated operationally and available to be
hosted on the HTTPS server. This ensures that all datasets have the same retention period
of several weeks (approximately 30 days), improving the management of our infrastructure
and data services.
As previously
announced<https://comm.collab.science.gc.ca/mailman3/hyperkitty/list/dd_info@comm.collab.science.gc.ca/message/OV2WNBMJ3TM3CXJSCFWJXINT53VGP47U/>
in May 2025, the dynamic links that were installed to help our users with this migration
will be removed on October 7th, 2025.
Also, to limit the impact of this significant change, the current
/today<https://dd.weather.gc.ca/today/> directory, which points to the undated
structure and provides access to all datasets (real-time, climate, station lists, etc.),
will remain available. Thus, by using the URL: https://dd.weather.gc.ca/today/ , users
will find exactly the same structure as the MSC Datamart before the dynamic migration.
The same structure will also be applied to the HPFX
Collab<https://hpfx.collab.science.gc.ca/> server.
I would like to take this opportunity to remind all users of the AMQP
service<https://eccc-msc.github.io/open-data/msc-datamart/amqp_en/>, which is
strongly recommended for accessing MSC Datamart data, that an adjustment to the
configuration file is still necessary. Due to the change in the directory structure, the
topic/subtopic of AMQP messages published on dd.weather.gc.ca is also changing. Sarracenia
users must now add the prefix *.WXO-DD. to their subtopics (subtopic).
For example, the subtopic: “bulletins.alphanumeric.#” must be changed to the subtopic:
“*.WXO-DD.bulletins.alphanumeric.#.”
Finally, please note that the DD-Alpha<https://dd.alpha.weather.gc.ca/> server, the
MSC Datamart testing data repository, is not affected by this change.
I strongly encourage you to migrate to this new architecture as soon as possible. Please
contact me if you have any questions. I will be happy to help.
I wish you a great weekend. 😊
Sandrine
--------
Sandrine Edouard
Responsable d'unité, Intendance des données et accès aux données ouvertes du SMC
Direction des Opérations du Centre canadien de prévision météorologique et
environnementale
Environnement et Changement climatique Canada, Gouvernement du Canada
ec.dps-client.ec@canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) :
1-438-801 0700
Liste de diffusion dd_info :
https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info
Votre avis nous
intéresse<https://eccc.sondage-survey.ca/f/s.aspx?s=42af4a30-525a-4514-8905-21c027aeea35&lang=FR>
Unit Manager, Data Stewardship and MSC Open Data Access
Canadian Centre for Meteorological and Environmental Prediction Operations
Environment and Climate Change Canada, Government of Canada
ec.dps-client.ec@canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365):
1-438-801 0700
dd_info mailing list: https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info
Your opinion matters to
us<https://eccc.sondage-survey.ca/f/s.aspx?s=42af4a30-525a-4514-8905-21c027aeea35&lang=EN&r=c4aea3c3-3fb4-4afa-bb3e-97f5774991ee>
[cid:image001.png@01DB65AC.5F2AEAB0]
