dd_info July 2025

dd_info@comm.collab.science.gc.ca

1 participants
4 discussions

[NOUVEAU] : Ajout de données d'observation de partenaire, en format SWOB // [NEW] : Addition of observation data from partner, in SWOB format

by Announcement list for the MSC-Datamart. Liste d'information pour le Datamart du SMC

(English follows) Chers usagers des données ouvertes du SMC, Dans le cadre d'une approche de surveillance fondée sur des principes axés sur la collaboration, l'initiative pour une surveillance collaborative du SMC est heureuse d'annoncer la signature d'un protocole d'entente sur l'échange de données avec le ministère de l'Agriculture et des Forêts du gouvernement de l'Alberta (AB Forestry). Ce partenaire exploite plus de 200 postes de gardes forestiers, stations automatiques et postes de guet dans toute la province. Le réseau transmet, deux fois par jour, les données d'une observation d'une heure. Les stations communiquent des données sur la température, l'humidité, les vents, les précipitations, l'état du ciel et les incendies. Cet accord d'échange de données est le fruit de collaboration et d'efforts entre ECCC et le Gouvernement de l'Alberta pour rendre ces données disponibles à l'interne et au public. Ces nouvelles données d'observation en format XML<https://eccc-msc.github.io/open-data/msc-data/obs_station/readme_obs_insi...> , dont les stations rapportent seulement 2 fois par jour, à 17UTC et 20UTC, sont disponibles à l'adresse : https://dd.meteo.gc.ca/today/observations/swob-ml/partners/ab-firewx/ La liste des stations de ces partenaires est disponible ici: https://dd.meteo.gc.ca/today/observations/doc/swob-xml_partner_station_li... Le guide des produits a également été mis à jour pour refléter ces changements: https://collaboration.cmc.ec.gc.ca/cmc/cmos/public_doc/msc-data/obs_stati... Ces données sont également disponibles sur les services web GeoMet du SMC<https://api.weather.gc.ca/collections/swob-realtime> via le standard OGC API. Comme d'habitude, je demeure disponible pour toute question ou demande d'information supplémentaire. Je vous souhaite une belle semaine. Sandrine ================================ Dear MSC open data users, As part of a principles-based, multi-participant, collaborative approach to monitoring, the MSC's Collaborative Monitoring initiative is pleased to announce new data available as a result of data exchange arrangements with the Government of Alberta's Ministry of Forestry and Parks (AB Forestry). This partner operates over 200 ranger, automatic, and lookout stations across the province. The network transmits data twice a day containing a one-hour observation. Stations report temperature, humidity, wind, precipitation, sky conditions, and fire related data. These data exchange arrangement is a result of collaboration and effort between ECCC and AB Forestry to make data available for ECCC and public use. These new SWOB observation data<https://eccc-msc.github.io/open-data/msc-data/obs_station/readme_obs_insi...> in XML format are available at the address (only report twice a day, once at 17Z and then again at 20Z) : https://dd.weather.gc.ca/today/observations/swob-ml/partners/ab-firewx/ The list of these partners stations can be found here: https://dd.weather.gc.ca/today/observations/doc/swob-xml_partner_station_... The Product Guide reflects these changes: https://collaboration.cmc.ec.gc.ca/cmc/cmos/public_doc/msc-data/obs_stati... This data is also available on GeoMet-OGC-API<https://api.weather.gc.ca/collections/swob-realtime> in the OGC API features standard. As always, I remain available for any questions or requests for additional information. I wish you a great week. Sandrine --------- Sandrine Edouard Responsable d'unité, Intendance des données et accès aux données ouvertes du SMC Direction des Opérations du Centre canadien de prévision météorologique et environnementale Environnement et Changement climatique Canada, Gouvernement du Canada dps-client(a)ec.gc.ca<mailto:dps-client@ec.gc.ca> / Tél (M365) : 1-438-801 0700 Liste de diffusion dd_info : https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info Votre avis nous intéresse<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> Unit Manager, Data Stewardship and MSC Open Data Access Canadian Centre for Meteorological and Environmental Prediction Operations Environment and Climate Change Canada, Government of Canada dps-client(a)ec.gc.ca<mailto:dps-client@ec.gc.ca> / Phone (M365): 1-438-801 0700 dd_info mailing list: https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info Your opinion matters to us<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> [cid:image001.png@01DB7E34.702650C0]

1 week, 6 days

1
0
0 / 0

[NOUVEAU] : Données statistiquement post-traitées PROGNOS - SHRPD // [NEW] : Statistically post-processed PROGNOS data - HRDPS

by Announcement list for the MSC-Datamart. Liste d'information pour le Datamart du SMC

(English follows) Chers usagers du Datamart du SMC, Il me fait plaisir de vous annoncer l'ajout de nouvelles données statistiquement post-traitées pour le Système à haute résolution de prévision déterministe (SHRPD) sur le Datamart du SMC. Ces données sont générées par le système PROGNOS, un progiciel développé par ECCC, et bénéficient d'une réduction des biais systématiques et de la variance de l'erreur des prévisions brutes, dont le but est d'offrir des prévisions horaires de meilleure qualité. Ce nouveau système traite un grand nombre de stations canadiennes et supporte plusieurs réseaux d'observation, il facilite l'adaptation aux innovations fréquentes des systèmes de prévision numérique du temps ainsi que l'intégration de nouveaux algorithmes d'intelligence artificielle. Pour le moment, seule la température de l'air à 1.5 mètres au-dessus de la surface de la Terre est post-traitée statistiquement. Ces données en format GeoJSON sont disponibles à l'adresse : https://dd.meteo.gc.ca/today/model_hrdps/stat-post-processing Une documentation détaillée de ces données est disponible ici : https://eccc-msc.github.io/open-data/msc-data/nwp_hrdps/readme_hrdps-stat... N'hésitez pas à me contacter pour toute question ou davantage d'information. Cordialement, Sandrine ================================ Dear MSC Datamart users, I am pleased to announce the addition of new statistically post-processed data for the High Resolution Deterministic Prediction System (HRDPS) on the MSC Datamart. These data are generated by the PROGNOS system, a software package developed by ECCC, and benefit from a reduction in systematic bias and in error variance of the raw forecast, thus providing better quality hourly forecasts. This new system processes many Canadian stations and supports several observation networks. It facilitates adaptation to frequent innovations in numerical weather prediction systems and allows for the integration of new artificial intelligence algorithms. Currently, only the air temperature at 1.5 meters above the Earth's surface is statistically post-processed. These data in GeoJSON format are available at the following address: https://dd.weather.gc.ca/today/model_hrdps/stat-post-processing Detailed documentation of these data is available here: https://eccc-msc.github.io/open-data/msc-data/nwp_hrdps/readme_hrdps-stat... Please do not hesitate to contact me should you have any questions or require further information. All the best. Sandrine -------- Sandrine Edouard Coordonnatrice nationale, Accès aux données ouvertes Direction des Opérations du Centre canadien de prévision météorologique et environnementale Environnement et Changement climatique Canada, Gouvernement du Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) : 1-438-801 0700 Liste de diffusion dd_info : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info Votre avis nous intéresse<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> National coordinator, Open Data Access Canadian Centre for Meteorological and Environmental Prediction Operations Environment and Climate Change Canada, Government of Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365): 1-438-801 0700 dd_info mailing list : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info Your opinion matters to us<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> [cid:image001.png@01DBFA18.50F42BE0]

2 weeks, 3 days

1
0
0 / 0

[NOUVEAU] : Données statistiquement post-traitées PROGNOS - SRPD et SGPD // [NEW] : Statistically post-processed PROGNOS data - RDPS and GDPS

by Announcement list for the MSC-Datamart. Liste d'information pour le Datamart du SMC

(English follows) Chers usagers du Datamart du SMC, Il me fait plaisir de vous annoncer l'ajout de nouvelles données statistiquement post-traitées pour le Système régional de prévision déterministe (SRPD) et le Système global de prévision déterministe (SGPD) sur le Datamart du SMC. Ces données sont générées par le système PROGNOS, une version modernisée du système UMOS (Updatable Model Output Statistics) , progiciel développé par ECCC dont le but est d'offrir des prévisions de meilleure qualité. Ce nouveau système traite 3 fois plus de stations canadiennes et supporte plus de réseaux d'observation, il offre un plus grand nombre de prévisions (aux heures plutôt qu'aux 3 heures), il facilite l'adaptation aux innovations fréquentes des systèmes de prévision numérique du temps ainsi que l'intégration de nouveaux algorithmes d'intelligence artificielle. Finalement, la qualité des prévisions est meilleure ou comparable à celle de UMOS. Tout comme UMOS, les variables du temps et de l'environnement post-traitées statistiquement pour le SRPD incluent les températures de l'air et du point de rosée à 1.5 mètres au-dessus de la surface de la Terre ainsi que la vitesse et la direction du vent à 10 mètres au-dessus de la surface de la Terre ou au niveau de l'anémomètre dans le cas d'une bouée. Seule la température de l'air à 1.5 mètres au-dessus de la surface de la Terre est post-traitée statistiquement pour le SGPD. Ces données en format GeoJSON sont disponibles aux adresses : * SRPD : https://dd.meteo.gc.ca/model_rdps/stat-post-processing * SGPD : https://dd.meteo.gc.ca/model_gem_global/stat-post-processing Une documentation détaillée de ces données est respectivement disponible aux adresses suivantes : * SRPD : https://eccc-msc.github.io/open-data/msc-data/nwp_rdps/readme_rdps-statpo... * SGPD : https://eccc-msc.github.io/open-data/msc-data/nwp_gdps/readme_gdps-statpo... Veuillez noter que le système PROGNOS va remplacer le système UMOS en octobre 2025. D'ici là, les données posts-traitées UMOS vont demeurer disponibles afin de faciliter la migration de nos usagers vers ces nouvelles données post-traitées PROGNOS. Plusieurs rappels et la date précise de ce changement seront communiqués dans les prochaines semaines. N'hésitez pas à me contacter pour toute question ou davantage d'information. Bonne journée. Cordialement. Sandrine ================================ Dear MSC Datamart users, I am pleased to announce the addition of new statistically post-processed data for the Regional Deterministic Prediction System (RDPS) and the Global Deterministic Prediction System (GDPS) on the MSC Datamart. This data is generated by the PROGNOS system, a modernized version of the UMOS (Updatable Model Output Statistics) system, a software package developed by ECCC to provide better quality forecasts. This new system processes three times as many Canadian stations and supports more observation networks. It offers a greater number of forecasts (hourly rather than every three hours), facilitates adaptation to frequent innovations in numerical weather prediction systems, and allows for the integration of new artificial intelligence algorithms. Finally, the quality of the forecasts is better than or comparable to that of UMOS. As UMOS, the weather and environmental variables statistically post-processed for the RDPS include air and dew point temperatures at 1.5 meters above the Earth's surface, and wind speed and direction at 10 meters above the Earth's surface or at the anemometer level in the case of a buoy. Only the air temperature at 1.5 meters above the Earth's surface is statistically post-processed for the GDPS. These data in GeoJSON format are available at the following addresses: * RDPS: https://dd.weather.gc.ca/model_rdps/stat-post-processing * GDPS: https://dd.weather.gc.ca/model_gem_global/stat-post-processing Detailed documentation of these data is available at the following addresses: * RDPS: https://eccc-msc.github.io/open-data/msc-data/nwp_rdps/readme_rdps-statpo... * GDPS: https://eccc-msc.github.io/open-data/msc-data/nwp_gdps/readme_gdps-statpo... Please note that the PROGNOS system will replace the UMOS system in October 2025. Until then, UMOS post-processed data will remain available to facilitate the migration of our users to the new PROGNOS post-processed data. Several reminders and the exact date of this change will be communicated in the coming weeks. Please do not hesitate to contact me should you have any questions or require further information. Have a nice day. Best regards. Sandrine -------- Sandrine Edouard Coordonnatrice nationale, Accès aux données ouvertes Direction des Opérations du Centre canadien de prévision météorologique et environnementale Environnement et Changement climatique Canada, Gouvernement du Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) : 1-438-801 0700 Liste de diffusion dd_info : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info Votre avis nous intéresse<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> National coordinator, Open Data Access Canadian Centre for Meteorological and Environmental Prediction Operations Environment and Climate Change Canada, Government of Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365): 1-438-801 0700 dd_info mailing list : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info Your opinion matters to us<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...> [cid:image001.png@01D9C158.1C0FA350]

2 weeks, 4 days

1
0
0 / 0

[RAPPEL IMPORTANT] Mise à jour de l'arborescence du Datamart du SMC // [IMPORTANT REMINDER] MSC Datamart tree structure update

by Announcement list for the MSC-Datamart. Liste d'information pour le Datamart du SMC

(English follows) Chers usagers du Datamart du SMC, En décembre dernier, un changement important dans la structure de répertoires du Datamart du SMC<https://dd.meteo.gc.ca/> a été mis en place. La structure de répertoires statiques a été remplacée par une structure dynamique par date à la racine, où les répertoires sont automatiquement créés dès que les données sont générées opérationnellement et disponibles pour être hébergées sur le serveur HTTPS. De la sorte, tous les jeux de données ont la même période de rétention de plusieurs semaines (environ 30 jours), et la gestion de nos infrastructures et de nos services de données s'en trouve améliorée. Tel qu'annoncé<https://comm.collab.science.gc.ca/mailman3/hyperkitty/list/dd_info@comm.c...> en mai dernier, les liens dynamiques qui ont été installés afin d'aider nos usagers dans cette migration seront retirés le 23 septembre 2025. Aussi, et pour limiter l'impact de ce changement important, le répertoire /today<https://dd.meteo.gc.ca/today/> actuel qui pointe vers la structure sans date et qui donne accès à tous les jeux de données (temps réel, climat, listes de stations, etc.) va demeurer disponible. Ainsi, en utilisant l'URL : https://dd.meteo.gc.ca/today/ l'usager va retrouver exactement la structure du Datamart du SMC telle qu'elle existait avant la migration dynamique. La même structure sera aussi appliquée au serveur HPFX Collab<https://hpfx.collab.science.gc.ca/>. J'en profite pour rappeler à tous les usagers du service AMQP<https://eccc-msc.github.io/open-data/msc-datamart/amqp_fr/>, recommandé fortement pour accéder aux données du Datamart du SMC, qu'un ajustement au fichier de configuration demeure nécessaire. En raison de la modification de la structure des répertoires, le sujet/sous-sujet (topic/subtopic) des messages AMQP publiés sur dd.meteo.gc.ca change également. Les utilisateurs de Sarracenia doivent dorénavant ajouter le préfixe *.WXO-DD. à leurs sous-sujets (subtopic). Par exemple, le sous-sujet (subtopic) : « bulletins.alphanumeric.# » doit être modifié en sous-sujet (subtopic) : « *.WXO-DD.bulletins.alphanumeric.#. » Finalement, notez que le serveur DD-Alpha<http://dd.alpha.meteo.gc.ca/>, le site Web d'essai de données du Datamart du SMC, n'est pas impacté par ce changement. Je vous invite fortement à migrer dès maintenant vers cette nouvelle architecture. Merci de me contacter pour toute question, il me fera plaisir de vous aider. Cordialement, Sandrine ===================== Dear MSC Datamart users, Last December, a significant change in the directory structure of the MSC Datamart<https://dd.weather.gc.ca/> was implemented. The static directory structure has been replaced by a dynamic structure organized by date at the root, where directories are automatically created as soon as data is generated operationally and available to be hosted on the HTTPS server. This ensures that all datasets have the same retention period of several weeks (approximately 30 days), improving the management of our infrastructure and data services. As previously announced<https://comm.collab.science.gc.ca/mailman3/hyperkitty/list/dd_info@comm.c...> in May 2025, the dynamic links that were installed to help our users with this migration will be removed on September 23th, 2025. Also, to limit the impact of this significant change, the current /today<https://dd.weather.gc.ca/today/> directory, which points to the undated structure and provides access to all datasets (real-time, climate, station lists, etc.), will remain available. Thus, by using the URL: https://dd.weather.gc.ca/today/ , users will find exactly the same structure as the MSC Datamart before the dynamic migration. The same structure will also be applied to the HPFX Collab<https://hpfx.collab.science.gc.ca/> server. I would like to take this opportunity to remind all users of the AMQP service<https://eccc-msc.github.io/open-data/msc-datamart/amqp_en/>, which is strongly recommended for accessing MSC Datamart data, that an adjustment to the configuration file is still necessary. Due to the change in the directory structure, the topic/subtopic of AMQP messages published on dd.weather.gc.ca is also changing. Sarracenia users must now add the prefix *.WXO-DD. to their subtopics (subtopic). For example, the subtopic: "bulletins.alphanumeric.#" must be changed to the subtopic: "*.WXO-DD.bulletins.alphanumeric.#." Finally, please note that the DD-Alpha<https://dd.alpha.weather.gc.ca/> server, the MSC Datamart testing data repository, is not affected by this change. I strongly encourage you to migrate to this new architecture as soon as possible. Please contact me if you have any questions. I will be happy to help. Best regards, Sandrine -------- Sandrine Edouard Responsable d'unité, Intendance des données et accès aux données ouvertes du SMC Direction des Opérations du Centre canadien de prévision météorologique et environnementale Environnement et Changement climatique Canada, Gouvernement du Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) : 1-438-801 0700 Liste de diffusion dd_info : https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info Votre avis nous intéresse<https://eccc.sondage-survey.ca/f/s.aspx?s=42af4a30-525a-4514-8905-21c027a...> Unit Manager, Data Stewardship and MSC Open Data Access Canadian Centre for Meteorological and Environmental Prediction Operations Environment and Climate Change Canada, Government of Canada ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365): 1-438-801 0700 dd_info mailing list: https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info Your opinion matters to us<https://eccc.sondage-survey.ca/f/s.aspx?s=42af4a30-525a-4514-8905-21c027a...> [cid:image001.png@01DB65AC.5F2AEAB0]

1 month, 1 week

1
0
0 / 0

← Newer
1
Older →

2025

2024

2023

2022

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

dd_info July 2025