(Le français suit) Dear SA Bulletins users, This is an important notice to users of Canadian SA format hourly observation bulletins. Please note that in Spring 2013 the MSC has plans to cease production of SA hourly format observations. This will be preceded by a transition period beginning September 27th, 2012, during which a new and improved observation data product, SWOB Met-ML, will be introduced. Please see the section "Roll-Out Milestones", below, for details of events during the transition period. An email will be sent to this mailing list as soon as the exact date of SA decommissioning will be determined. *** Context *** The SA format has a long history; adopted in North America in the 1950s, it continued to be used in Canada long after it was replaced for its intended use, aviation weather, by the METAR format in the mid-1990s. Over these years the SA format has become increasingly unwieldy due to software maintenance costs and its inability to meet current and future requirements for flexibility and standard compliance. The MSC aims to provide a high-quality, general-purpose observation data format that can faithfully convey data elements produced by sophisticated weather observation platforms. This data should be provided in a form that can be easily viewed by humans or ingested by numerous automated systems in the world at large, in accordance with contemporary industry data management standards. With these considerations in mind, the MSC is introducing a Surface Weather Observation Meteorological Markup Language (SWOB Met-ML). Observation data encoded in SWOB Met-ML will become available on the MSC Datamart on September 27th, 2012. This will mark the beginning of a transition period to Spring 2013, at which time the SA bulletins will be permanently retired. It might also be noted, for clarity, that this data is meant to complement, not compete with, current and future observation data provided in ICAO's METAR and WMO's SYNOP formats. *** Affected Bulletins *** The SA and METAR alike are conveyed in SACN bulletins. While METAR bulletin headers and bulletin contents will remain unchanged, the following SA bulletins containing SA format observations will be discontinued at the end of the transition period. SACN50 SACN54 SACN58 SACN59 SACN60 SACN63 SACN66 SACN70 SACN74 SACN78 SACN82 SACN85 SACN86 SACN87 SACN88 SACN89 SACN90 SACN91 SACN92 SACN93 SACN94 SACN95 SACN96 SACN97 SACN98 *** Documentation *** The SWOB Met-ML specification and user guide may be found in attachment of this email. After September 27th, they will also be found at this location: http://dd.weatheroffice.gc.ca/observations/doc/ Details on the location and file names of SWOB data on the datamart may be found at: http://dd.weatheroffice.gc.ca/observations/doc/README_SWOB.txt *** Roll-Out Milestones *** September 27th, 2012 * SWOB Met-ML products appear on MSC Datamart * Transition period to SA retirement begins * Extended vetting period begins for SWOB Met-ML Release Candidate December 28th, 2012 * Extended vetting period ends * Work begins to integrate last-minute client requests, if any January 21st, 2013 * SWOB Met-ML product becomes official Spring 2013 * Transition period ends * SA production ceases *** Benefits of SWOB and Significant Differences from SA *** SWOB Met-ML provides easy-to-read, hourly surface weather data in a standardized yet easily extensible XML format. The XML implementation follows the Observations and Measurements standard (O&M) and Geography Markup Language (GML) of the Open Geospatial Consortium (OGC). Like all observation formats from the same era, SA differs from more modern formats by the fact that data elements are found in a fixed position within the message. Thus each format change requires a corresponding software change. Repeated extensions or additions of new data would force users to maintain complex and evolving parsers. The SWOB products are generated, in real-time, by MSC's Data Management System. The SWOB Met-ML catalog of stations includes hundreds of stations that were not available in SA format. Compared with the hourly SA or METAR, this product provides a larger set of weather elements originating from MSC and partner weather stations. It provides the same elements as an SA such as station ID, date time, sky condition, present weather, pressure, temperature, wind, humidity, and precipitation. Moreover, for certain elements, the SWOB may also provide values of 2-minute, 10-minute and hourly averages, as well as maximum and minimum. Quality assurance summary flags are attached to elements as qualifiers to provide data reliability information right from the message. The SWOB product generator ingests data from 6 different datasets to make one integrated product where the element names, units and codes are all consistent with each other. The names shown in the XML are "short labels" that encapsulate all critical element-defining metadata into one short phrase that is less than 30 characters long. The units used in the SWOB products are metric units that differ from the SA format units. Certain data elements are represented by code figures whose meaning can be obtained by referring to a DMS standard code table. The code table names are reported in the SWOB products along with the code values. *** User input *** SWOB Met-ML was peer-reviewed to arrive at the current layout, format and content. This version is considered to be a release candidate. An additional vetting period is included in the roll-out plan to allow input from clients or client groups that have not yet seen the product. Additional elements can be added at the request of users. Suggestions for alterations to the layout or format will also be entertained. Requests will be evaluated bearing in mind the availability of data elements, the intent of this product and the availability of other products that may better serve specific groups. Please send your comments and suggestion to this email address: dd_info(a)lists.ec.gc.ca Best regards, Miguel Tremblay National coordinator, commercial data services Canadian meteorological centre (CMC) Environment Canada http://www.ec.gc.ca/ 2121 Trans-Canada N. Suite 230 Dorval, Québec Fax: 514-421-4679 CANADA H9P 1J3 Phone: 514-421-4729 Email: miguel.tremblay(a)ec.gc.ca ============================== Cher utilisateur des bulletins SA, La présente est un avis important aux usagers des bulletins canadiens d'observations météorologiques horaires en format SA. Veuillez noter qu'à partir du printemps 2013, le SMC cessera la production d'observations météorologiques horaires en format SA. Ceci sera précédé par une période de transition qui commencera le 27 septembre 2012, pendant laquelle on procédera au déploiement d'un nouveau produit de données d'observations, le SWOB Met-ML. Veuillez voir la section "Étapes du déploiement", ci-dessous, pour plus de détails sur le calendrier. Un courriel sera envoyé sur cette liste de diffusion dès que la date précise d'arrêt de production sera déterminée. *** Contexte *** Le format SA possède une longue histoire; adopté en Amérique du Nord dans les années 1950, il continua d'être utilisé au Canada bien longtemps après qu'il eût été remplacé dans sa vocation première, la météorologie aéronautique, par le format METAR en 1996. Au fil des années, le soutien du format SA devint une tâche de plus en plus difficile en raison des coûts d'entretien informatique et de son incapacité à rencontrer les besoins actuels et futurs de flexibilité et de conformité aux standards. Le SMC vise à offrir un format de données d'observations d'usage général et de grande qualité, ayant la capacité de transmettre fidèlement les éléments de données produits par des plateformes sophistiquées d'observation météorologique. Ces donnés devraient être rendues disponibles sous une forme facilement lisible par des humains ou ingérable par de nombreux systèmes automatisés dans le monde entier, en conformité avec les standards contemporains de l'industrie ayant trait à la gestion des données. Ayant à l'esprit ces considérations, le SMC introduit un langage de balisage des observations météorologiques de surface (SWOB Met-ML). Les données d'observations encodées en SWOB Met-ML deviendront disponibles sur le datamart du CMC le 27 septembre 2012. Ceci marquera le début d'une période de transition jusqu'au printemps 2013, auquel moment la production des bulletins SA cessera de façon permanente. On notera, afin d'éviter tout malentendu, que ces données sont destinées à complémenter, et non à concurrencer, les données fournies actuellement et dans le futur dans les formats METAR (OACI) et SYNOP (OMM). *** Bulletins affectés *** Les SA, comme les METAR, sont véhiculés par des bulletins SACN. Les entêtes des bulletins METAR et leur contenu ne feront l'objet d'aucun changement. Cependant, les bulletins SACN suivants, qui contiennent des observations en format SA, cesseront d'être produits à la fin de la période de transition: SACN50 SACN54 SACN58 SACN59 SACN60 SACN63 SACN66 SACN70 SACN74 SACN78 SACN82 SACN85 SACN86 SACN87 SACN88 SACN89 SACN90 SACN91 SACN92 SACN93 SACN94 SACN95 SACN96 SACN97 SACN98 *** Documentation *** On trouvera les spécifications du SWOB Met-ML ainsi qu'un guide de l'usager en pièce jointe de ce courriel. À partir du 27 septembre 2012, ces documents pourront aussi être trouvés à l'emplacement suivant: http://dd.meteo.gc.ca/observations/doc/ On trouvera Les détails sur l'emplacement et les noms de fichiers des données SWOB sur le datamart dans le document suivant: http://dd.meteo.gc.ca/observations/doc/README_SWOB.txt *** Étapes du déploiement *** 27 septembre 2012 * Les produits SWOB Met-ML apparaissent sur le datamart du SMC * Commencement de la période de transition menant au retrait des SA * La prolongation de la période de vérification du candidat SWOB Met-ML commence 28 décembre 2012 * Fin de la période prolongée de vérification * Commencement du travail afin d'intégrer les demandes de dernière minute, si nécessaire 21 janvier 2013 * Les produits SWOB Met-ML deviennent officiels Printemps 2013 * Fin de la période de transition * Fin de la production des SA *** Bénéfices du SWOB et différence significatives avec le SA *** Le SWOB Met-ML offre des données météorologiques horaires faciles à lire, dans un format XML normalisé et extensible. La mise en oeuvre du XML se conforme au standard "Observations and Measurements" (Observations et mesures) et au "Geography Markup Language" (langage de balisage géographique) du Open Geospatial Consortium. Comme tous les formats de son époque, le SA se distingue des formats plus modernes par le fait que chaque élément d'information se trouve à une position fixe dans le message. Ainsi, chaque changement au format exige un changement correspondant aux logiciels. Des extensions ou des additions répétées de nouvaux éléments de données forceraient les usagers à maintenir des parseurs complexes et évolutifs. Les produits de la gamme SWOB sont générés en temps réel par le Système de gestion des données (SGD) du SMC. Le catalogue de stations disponibles en SWOB comprend des centaines de stations qui n'étaient pas disponibles en SA. Par comparaison avec les SA ou METAR horaires, ce produit offre un plus grand jeu d'éléments du temps en provenance du SMC et des stations de ses partenaires. Il offre les mêmes éléments qu'un SA, tels que l'identificateur de station, la date et l'heure, l'état du ciel, le temps actuel, la pression, la température, le vent, l'humidité et la précipitation. De plus, pour certains éléments, le SWOB peut aussi donner des valeurs moyennes aux 2 minutes, 10 minutes, ou horaires, ou aussi les maximums et minimums. Des marqueurs d'assurance de la qualité sont rattachés aux éléments mesurés, ce qui permet d'offrir des informations sur la fiabilité des données à l'intérieur même du message. Le générateur de produits SWOB ingère des données de 6 différents jeux de données pour faire un produit intégré, au sein duquel les noms d'éléments, les unités, et les valeurs codées sont toutes mutuellement compatibles. Les noms apparaissant dans le contenu XML sont des "étiquettes courtes" qui encapsulent toutes les méta-données critiques qui définissent les éléments en une seule courte phrase de moins de 30 caractères. Les unités utilisés dans les produits SWOB sont des unités métriques qui diffèrent des unités utilisées dans le SA. Certains éléments sont représentés par des valeurs codées dont la signification peut être obtenue en référant à des tables d'encodage standardisées par le SGD. Les noms des tables d'encodage sont rapportés dans les produits SWOB avec les valeurs encodées. *** Commentaires des utilisateurs *** Le SWOB Met-ML a fait l'objet d'un processus de validation interne avant d'arriver à la disposition, au format et au contenu actuels. La version actuelle est considérée comme étant un candidat pour la version officielle. Une période de validation externe est incluse dans le plan de déploiement afin de permettre aux clients ou groupes de clients qui n'ont pas encore eu la possibilité de se prononcer de le faire. Des éléments additionnels pourraient être ajoutés, selon les requêtes des utilisateurs. Des suggestions de changements dans la disposition ou le format seront aussi considérés. Les demandes seront évaluées en tenant compte de la disponibilité des données, de l'intention derrière ce produit et de la disponibilité d'autres produits qui pourraient mieux servir des groupes spécifiques. Veuillez acheminer vos requêtes et commentaires à l'adresse: dd_info(a)lists.ec.gc.ca Cordialement, Miguel Tremblay Coordonnateur national des services commerciaux de données Centre météorologique canadien (CMC) Environnement Canada http://www.ec.gc.ca/ 2121 Trans-Canada N. Suite 230 Dorval, Québec CANADA H9P 1J3 Téléphone: 514-421-4729 Courriel: miguel.tremblay(a)ec.gc.ca