Release of MSC GeoMet 2.26: new datasets, bilingual API interface, bug fixes and major performance improvements ! / Déploiement de GeoMet du SMC 2.26 : nouvelles données, interface bilingue, correction de bugs et améliorations majeures des performances
by geomet-info＠comm.collab.science.gc.ca
[ le français suit ]
Dear MSC GeoMet users,
We are pleased to announce the release of MSC GeoMet 2.26 data API and web services, which includes updates to the GeoMet-OGC-API services<https://eccc-msc.github.io/open-data/msc-geomet/readme_en/#access>. This release brings new major features, collections, improvements and fixes as well as a bilingual web interface. Please find below the significant changes to MSC GeoMet since version 2.24 released in July 2023.
New datasets and new features:
* New data collections now available in GeoMet-OGC-API:
* MetNotes (metnotes) available in OGC API - Features
* Air Quality Health Index - Stations (aqhi-stations<https://api.weather.gc.ca/collections/aqhi-stations?lang=en>) available in OGC API - Features
* MSC Datasets Footprints (datasets-footprints<https://api.weather.gc.ca/collections/datasets-footprints?lang=en>) available in OGC API - Features
* The GeoMet-OGC-API web interface has been updated to support both French and English
Enhancements:
* Regional Deterministic Precipitation Analysis (RDPA), Canadian Seasonal to Inter-annual Prediction System (CanSIPS) and the Canadian Gridded Data (CANGRD) collections now output valid CovJSON when requested via OGC-API - Coverage
* UTC datetime information is now available for the climate-hourly collection items
* Improved datetime filtering to accept datetime formated as YYYY-MM-DDThh:mm:ssZ on all feature collections
* Updated Hydrometric archive data (HYDAT) to the latest annual, monthly and daily water level and flow data based on the 2023-07-19 release
* Updated the raster drill capability and description (OGC - API Processes)
* Updated abstract for the Hourly Climate Observations (climate-hourly) collection
* Updated abstract for the CanSIPS (weather:cansips:250km:forecast:members) collection
* Updated JSON and JSON-LD links to buttons in the GeoMet-OGC-API interface
Breaking changes:
* The 'startposition' query parameter becomes 'offset' in this GeoMet-OGC-API release to accommodate changes to the OGC API - Features standard specification
* The 'range-subset' query parameter becomes 'properties' in this GeoMet-OGC-API release to accommodate changes to the OGC API - Coverages standard specification
* Archives for some collections will be reinitialized for GeoMet-OGC-API in this release (MSC GeoMet 2.26) and then rebuilt gradually. Here are the current collections impacted:
* bulletins-realtime: 140 days
* hydrometric-realtime: 30 days
* swob-realtime: 30 days
Bug fixes:
* Added missing weather fields for the hourly climate collection
* Fixed failing OGC API - Coverage requests without subsets for CanSIPS data
* Fixed missing hydrometric stations in the hydrometric-realtime collection
* Fixed CanGRD collections extent on the collection landing page
* Fixed the SpatioTemporal Asset Catalog (STAC) map extent when displaying the item page
* Fixed error when opening the STAC SwaggerUI getStacCatalog
* Fixed malformed OpenStreetMap attribution link on the various GeoMet-OGC-API maps
Upcoming breaking changes:
* [New] Real-time hydrometric data (hydrometric-realtime) feature property DATETIME to be updated in the next GeoMet-OGC-API release to be ISO-8601 compliant
* [New] For OGC API - Features request, in the next release, the datetime parameter will require datetime values to be in provided in UTC
* [New] Upcoming changes to 'feature ID' values in GeoMet-Weather GetFeatureInfo JSON responses
Known issues:
* [New] GeoMet-Weather and GeoMet-Climate WCS GetCoverage request outputs have no defined projection
* [New] Global Deterministic Wave Prediction System (GDWPS) projection issue around the dateline crossing in EPSG:3857 in WMS
* [New] Some ocean current styles have fixed upper limit and higher current values might not be displayed in WMS
* [New] STAC maps are broken for the French web interface
* Two Canadian Land Data Assimilation System in the National Surface and River Prediction System (CaLDAS-NSRPS) layers ('CaLDAS-NSRPS_2.5km_SnowDepth' and 'CaLDAS-NSRPS_2.5km_SnowWaterEquiv') don't support WMS requests with the 'TIME' parameter
* Surface Weather Observations (SWOB) data cannot be exported to the CSV format and cannot be filtered by keyword from the OGC API - Features service
* Non-global wind arrows layers are not displayed correctly when using the EPSG:3857 projection
* Contour layers may not be displayed properly in WMS when crossing the international date line for the Global Deterministic Prediction System (GDPS)
* Web Coverage Service (WCS) requests will not work properly for the following datasets: the Regional Air Quality Deterministic Prediction System (RAQDPS), Regional Air Quality Deterministic Prediction System - FireWork (RAQDPS-FW), Regional Deterministic Air Quality Analysis (RDAQA) and CaLDAS-NSRPS
* Data for the RDPA retrieved with the OGC API - Coverages standard are provided has missing metadata, such as the temporal timestamp
* Requests with the Styled Layer Descriptor (SLD) standard fail when the 'Layer' and 'se:Name' parameters are the same
* WCS queries do not work if sent as an HTTP POST request
Access and public documentation:
* MSC GeoMet documentation available on https://eccc-msc.github.io/open-data/msc-geomet/readme_en/ and includes:
* Access links, usage overview, tutorials with live code examples, use cases with Python, and detailed technical documentation
* This documentation is updated on a regular basis and means for users to share feedback are provided
* GeoMet-Weather and GeoMet-Climate layers can be visualized in the MSC AniMet tool: https://eccc-msc.github.io/msc-animet/
GeoMet-Info announcement list:
* Updates and changes are announced on the GeoMet-Info list: https://comm.collab.science.gc.ca/mailman3/postorius/lists/geomet-info
Sincere regards,
The MSC GeoMet team
________________________________
Chers utilisateurs des services web GeoMet du SMC,
Nous sommes heureux d'annoncer la disponibilité des API et services web GeoMet du SMC version 2.26, contenant des mises à jour aux services GeoMet-OGC-API<https://eccc-msc.github.io/open-data/msc-geomet/readme_fr/#access>. Cette version apporte de nouvelles fonctionnalités importantes, des collections, des améliorations et des correctifs, ainsi qu'une interface web bilingue. Voici les principaux changements aux services GeoMet du SMC depuis la version 2.24 lancée en juillet 2023.
Nouveaux jeux de données et fonctionnalités :
* De nouvelles collections de données sont maintenant disponibles dans GeoMet-OGC-API:
* MetNotes (metnotes) disponibles dans OGC API-Features
* Cote Air Santé - Stations (aqhi-stations<https://api.weather.gc.ca/collections/aqhi-stations?lang=fr>) disponibles dans OGC API - Features
* Empreintes des jeux de données du SMC (datasets-footprints<https://api.weather.gc.ca/collections/datasets-footprints?lang=fr>) disponibles dans OGC API - Features
* L'interface web GeoMet-OGC-API a été mise à jour pour supporter le français et l'anglais
Améliorations :
* Les collections d'Analyse régionale déterministe de précipitation (ARDP), du Système de prévision interannuelle et saisonnière canadien (SPISCan) et des données climatiques historiques sur grille canadienne (CANGRD) produisent maintenant des CovJSON valides lorsqu'elles sont demandées en OGC API - Coverage
* La date et heure UTC est désormais disponible pour les items de la collection climate-hourly
* Amélioration du filtrage temporel pour accepter les dates au format YYYY-MM-DDThh:mm:ssZ pour toutes les collections Features.
* Mise à jour des données d'archives hydrométriques (HYDAT) avec les dernières données annuelles, mensuelles et quotidiennes des niveaux et débits d'eau, basées sur la version 2023-07-19
* Mise à jour de la capacité et la description du "raster drill" (OGC API - Processes)
* Mise à jour du résumé pour la collection Observations climatiques horaires (climate-hourly)
* Mise à jour du résumé pour la collection SPISCan (weather:cansips:250km:forecast:members)
* Amélioration des boutons de l'interface GeoMet-OGC-API pour les liens JSON et JSON-LD
Bris de compatibilité :
* Le paramètre de requête "startposition" devient "offset" dans cette version de GeoMet-OGC-API pour tenir compte des changements apportés à la spécification du standard d'OGC API - Features.
* Le paramètre de requête "range-subset" devient "properties" dans cette version de GeoMet-OGC-API pour tenir compte des changements apportés à la spécification du standard OGC API - Coverages.
* Les archives de certaines collections seront réinitialisées pour GeoMet-OGC-API dans cette version (MSC GeoMet 2.26) et seront ensuite reconstruites progressivement. Voici les collections actuellement impactées :
* bulletins-realtime: 140 jours
* hydrometric-realtime: 30 jours
* swob-realtime: 30 jours
Corrections de problèmes :
* Ajout de champs météorologiques manquants pour la collection Observations climatiques horaires
* Correction des requêtes défaillantes OGC API - Coverage sans sous-ensembles pour les données SPISCan
* Correction des stations hydrométriques manquantes dans la collection Données hydrométriques en temps réel
* Correction de l'étendue des collections CanGRD sur la page principale de la collection
* Correction de l'étendue de la carte du "SpatioTemporal Asset Catalog" (STAC) lors de l'affichage de la page des items
* Correction d'une erreur lors de l'ouverture de l'interface SwaggerUI getStacCatalog du STAC
* Correction d'un lien d'attribution OpenStreetMap malformé sur les différentes cartes GeoMet-OGC-API
Bris de compatibilité à venir :
* [Nouveau] La propriété "DATETIME" des données hydrométriques en temps réel (hydrometric-realtime) sera mise à jour dans la prochaine version de GeoMet-OGC-API pour être conforme à la norme ISO-8601.
* [Nouveau] Pour les requêtes OGC API - Features, dans la prochaine version, le paramètre datetime ne supportera que la date UTC.
* [Nouveau] Changements à venir pour les valeurs de "feature ID" dans les réponses JSON de GeoMet-Weather GetFeatureInfo.
Problèmes connus :
* [Nouveau] Les sorties des requêtes WCS GetCoverage de GeoMet-Météo et GeoMet-Climat n'ont pas de projection définie
* [Nouveau] Problème de projection du Système global de prévision déterministe de vague (SGPDV) autour du changement de la ligne de date dans EPSG:3857 en WMS
* [Nouveau] Certains styles de courant océanique ont une limite supérieure fixe et donc les valeurs de courant plus élevées pourraient ne pas être affichées en WMS
* [Nouveau] Les cartes sont brisées pour la version française de l'interface web de STAC
* Deux couches du Système canadien d'assimilation de données de surface dans le Système national de prévision de surface et de rivières (SCanADS-SNPSR) ("CaLDAS-NSRPS_2.5km_SnowDepth" et "CaLDAS-NSRPS_2.5km_SnowWaterEquiv") ne supportent pas les requêtes WMS avec le paramètre "TIME"
* Les données d'observations météorologiques à la surface (SWOB) ne peuvent pas être exportées au format CSV et ne peuvent pas être filtrées par mot-clé à partir du service OGC API - Features
* Les couches de flèches de vent non globales ne sont pas affichées correctement lors de l'utilisation de la projection EPSG:3857
* Les couches de contour peuvent ne pas être affichées correctement en WMS lorsque l'on franchit la ligne de date internationale pour le GDPS.
* Les requêtes Web Coverage Service (WCS) ne fonctionneront pas correctement pour les jeux de données suivants : le Système régional de prévision déterministe de la qualité de l'air (SRPDQA), le Système régional de prévision déterministe de la qualité de l'air - FireWork (SRPDQA-FW), l'Analyse régionale déterministe de qualité de l'air (ARDQA) et SCanADS-SNPSR
* Les données pour l'ARPD récupérées avec OGC API - Coverages sont fournies avec des métadonnées manquantes, telles que l'horodatage.
* Les requêtes avec le standard "Styled Layer Descriptor" (SLD) échouent lorsque les paramètres "Layer" et "se:Name" sont identiques.
* Les requêtes WCS ne fonctionnent pas si elles sont envoyées sous forme de requête HTTP POST.
Accès et documentation publique :
* La documentation de GeoMet du SMC est disponible sur https://eccc-msc.github.io/open-data/msc-geomet/readme_fr/ et comprend :
* Liens d'accès, aperçu de l'utilisation, tutoriels avec des exemples de code, cas d'utilisation avec Python, ainsi que la documentation technique détaillée
* Cette documentation est régulièrement mise à jour et des moyens sont fournis aux utilisateurs pour partager leurs impressions
* Les couches de GeoMet-Météo et GeoMet-Climat peuvent être visualisées dans l'outil AniMet du SMC : https://eccc-msc.github.io/msc-animet/
Liste d'annonces GeoMet-Info :
* Les changements sont annoncés sur la liste GeoMet-Info : https://comm.collab.science.gc.ca/mailman3/postorius/lists/geomet-info
Cordialement,
L'équipe GeoMet du SMC
--
Meteorological Service of Canada / Service météorologique du Canada
Environment and Climate Change Canada / Environnement et Changement climatique Canada
ec.dps-client.ec(a)canada.ca
1 year, 4 months
- 1
- 0
Suivi: problème de données manquantes // Follow-up: Missing data issue
by geomet-info＠comm.collab.science.gc.ca
(English follows)
Chers usagers des données ouvertes du SMC,
Ceci est un suivi relié au problème de dissémination des 4 et 5 septembre derniers qui ont entrainé des pertes de données (*) dans nos services. Je tiens à vous informer que les données SWOB ainsi que les bulletins manquants ont tous été retransmis et sont maintenant disponibles sur le Datamart du SMC (**) et via nos services web géospatiaux (***).
Aussi, les données du SRPD et du SHRPD (passes de 18Z du 4 septembre et 00Z du 5 septembre) ainsi que celles du SGPD (passe de 00Z du 5 septembre) ont également été retransmises sur HPFX (****) qui conserve plusieurs semaines d'archives.
Nous sommes vraiment désolés de ces désagréments reliés à la migration de nos serveurs vers un nouveau centre de données.
Je vous souhaite un excellent week-end.
Cordialement,
Sandrine
(*) https://eccc-msc.github.io/open-data/msc-data/readme_fr/
(**) https://eccc-msc.github.io/open-data/msc-datamart/readme_fr/
(***) https://eccc-msc.github.io/open-data/msc-geomet/readme_fr/
(****) https://eccc-msc.github.io/open-data/msc-datamart/readme_fr/#acces
========================
Dear MSC open data users,
This is a follow-up to the dissemination problem of September 4 and 5, which resulted in data losses (*) in our services. I would like to inform you that the SWOB data and the missing bulletins have all been retransmitted and are now available on the MSC Datamart (**) and via our geospatial web services (***).
Also, data from RDPS and HRDPS (runs of 18Z on September 4 and 00Z on September 5) and from GDPS (run of 00Z on September 5) have also been retransmitted to HPFX (****), which holds several weeks of archives.
We apologize for any inconvenience caused by the migration of our servers to a new data center.
I wish you an excellent weekend.
Best regards,
Sandrine
(*) https://eccc-msc.github.io/open-data/msc-data/readme_en/
(**) https://eccc-msc.github.io/open-data/msc-datamart/readme_en/
(***) https://eccc-msc.github.io/open-data/msc-geomet/readme_en/
(****) https://eccc-msc.github.io/open-data/msc-datamart/readme_en/#access
--------
Sandrine Edouard
Coordonnatrice nationale, Accès aux données ouvertes
Direction des Opérations du Centre canadien de prévision météorologique et environnementale
Environnement et Changement climatique Canada, Gouvernement du Canada
ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) : 1-438-801 0700
Liste de diffusion dd_info : https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info.comm.c...
Votre avis nous intéresse<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...>
National coordinator, Open Data Access
Canadian Centre for Meteorological and Environmental Prediction Operations
Environment and Climate Change Canada, Government of Canada
ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365): 1-438-801 0700
dd_info mailing list: https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info.comm.c...
Your opinion matters to us<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...>
[cid:image001.png@01D9E29D.A6768BB0]
1 year, 4 months
- 1
- 0
Migration des listes de diffusion dd_info et GeoMet-Info // Migration of the GeoMet-Info & dd_info mailing lists
by Edouard,Sandrine (ECCC)
(English follows)
Chers usagers des données ouvertes du SMC,
Comme vous l'avez peut-être déjà remarqué, les listes de diffusion « dd_info » et GeoMet-Info » viennent d'être migrées vers un nouveau service de listes d'information.
Afin d'assurer une transition harmonieuse, tous les usagers abonnés à ces listes ont été automatiquement ajoutés aux nouvelles listes respectives. Vous allez donc continuer à recevoir des annonces concernant nos services comme par le passé.
Par contre, il faut créer un compte dans le nouveau service de listes afin d'avoir accès aux archives. Ceci est bien important car nous faisons souvent référence à d'anciennes annonces, dans le but de communiquer au mieux avec nos usagers.
* dd_info : https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info.comm.c...
* GeoMet-Info: https://comm.collab.science.gc.ca/mailman3/postorius/lists/geomet-info.co...
Comme vous pourrez le constater, les nouvelles listes sont dotées d'une interface web améliorée qui permet aux usagers de gérer facilement leurs abonnements et de rechercher aisément dans les archives. Toutes les communications des anciennes listes sont archivées et mises à votre disposition.
Enfin, les nouvelles listes de diffusion sont configurées afin d'éviter que nos annonces ne se retrouvent dans votre boîte de pourriels. Toutefois, si vous n'avez pas reçu de nos nouvelles d'ici les prochaines semaines, veuillez nous contacter à l'adresse suivante : dps-client(a)ec.gc.ca<mailto:dps-client@ec.gc.ca> .
Merci de votre collaboration et de votre compréhension. Tous commentaires sont les bienvenus.
Au plaisir.
Sandrine
============================
Dear MSC Open Data users,
As you may have already noticed, the "dd_info" and "GeoMet-Info" mailing lists have just been migrated to a new information list service.
To ensure a smooth transition, all users subscribed to these lists have been automatically added to the new lists. You will therefore continue to receive announcements about our services as before.
However, you will need to create an account in the new list service in order to access the archives. This is very important, as we often refer to old announcements, in order to better communicate with our users.
* dd_info: https://comm.collab.science.gc.ca/mailman3/postorius/lists/dd_info.comm.c...
* GeoMet-Info: https://comm.collab.science.gc.ca/mailman3/postorius/lists/geomet-info.co...
As you will see, the new lists feature an improved web interface that allows users to easily manage their subscriptions and search the archives. All communications from the old lists are archived and made available to you.
Finally, the new mailing lists are configured to prevent our announcements from ending up in your spam box. However, if you haven't received any news from us in the next few weeks, please contact us at dps-client(a)ec.gc.ca<mailto:dps-client@ec.gc.ca> .
Thank you for your cooperation and understanding. All comments are welcome.
All the best.
Sandrine
--------
Sandrine Edouard
Coordonnatrice nationale, Accès aux données ouvertes
Direction des Opérations du Centre canadien de prévision météorologique et environnementale
Environnement et Changement climatique Canada, Gouvernement du Canada
ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Tél (M365) : 1-438-801 0700
Liste de diffusion dd_info : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info
Votre avis nous intéresse<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...>
National coordinator, Open Data Access
Canadian Centre for Meteorological and Environmental Prediction Operations
Environment and Climate Change Canada, Government of Canada
ec.dps-client.ec(a)canada.ca<mailto:ec.dps-client.ec@canada.ca> / Phone (M365): 1-438-801 0700
dd_info mailing list : https://lists.ec.gc.ca/cgi-bin/mailman/listinfo/dd_info
Your opinion matters to us<https://forms.office.com/Pages/ResponsePage.aspx?id=018MdItudkGcyUVNvk5ix...>
[cid:image001.png@01D9DFF6.A2FC68A0]
1 year, 4 months
- 1
- 0
- ← Newer
- 1
- Older →