opendataby / govdata

0 stars 0 forks source link

Обзор форматов и процессов разработки стандартов ОД #2

Open gsk990 opened 5 years ago

gsk990 commented 5 years ago

Яра, давай тут представим как в блог посте для общественности перечислить ссылки на то, как стандарты разрабатываются в разных странах?

gsk990 commented 5 years ago

Вот такие ссылки из собранных Ярой результатов я думаю можно использовать для поста -

Независимые организации Methodologies and Best Practices for Open Data Publication http://ceur-ws.org/Vol-1343/paper5.pdf

Всемирный банк общая стр по открытым данным. http://opendatatoolkit.worldbank.org/en/

Тех.поддержка, гранты на финансирование. http://opendatatoolkit.worldbank.org/en/technical-assistance.html

Ниже приводится проект инструмента «Оценка готовности к использованию открытых данных», подготовленный Рабочей группой Всемирного банка по открытым государственным данным. Настоящий инструмент нацелен на оказание содействия в определении мер, которые необходимо предпринять для начала реализации инициативы по использованию открытых данных. http://opendatatoolkit.worldbank.org/docs/odra/odra_v2-ru.pdf

ODI Documenting the development of open standards for data Porism, OpenNorth, Open Data Services and the W3C Each of the partners have published their own outputs, which will definitely be of interest if you’d like to understand more about standards development: OpenNorth have produced a report and short podcast documenting the process of creating three open standards (Open511, Popolo and Represent). The W3C have surveyed a community of users interested in standards for data on the web, to understand their expectations and to help reflect on the W3C’s role in supporting those efforts Porism have created an open guide to data standards that reflects their approach to working on standards for UK local government Open Data Services have been published a toolkit for policy focused standardsand a report that reflects on their experiences of standards development

ODI Exploring the development and impact of open standards for data report (чем полезна стандартизация) https://docs.google.com/document/d/1Sab5YMVj4PVqLjZD35hX8FTnMeeP6gLGG0xszuRMIaM/edit

Open standards for data: adoption, approaches and impact https://theodi.org/article/open-standards-for-data-adoption-approaches-and-impact/

Гид https://standards.theodi.org/

Open Civic Data Standards https://azavea.gitbooks.io/open-data-standards/content/standards/existing-standards.html https://legacy.gitbook.com/book/azavea/open-data-standards/details W3C Describing Linked Datasets with the VoID Vocabulary VoID is an RDF Schema vocabulary for expressing metadata about RDF datasets. It is intended as a bridge between the publishers and users of RDF data, with applications ranging from data discovery to cataloging and archiving of datasets. This document is a detailed guide to the VoID vocabulary. It describes how VoID can be used to express general metadata based on Dublin Core, access metadata, structural metadata, and links between datasets. It also provides deployment advice and discusses the discovery of VoID descriptions. https://www.w3.org/TR/void/

Требования к данным EU DCAT Application Profile for data portals in Europe https://joinup.ec.europa.eu/solution/dcat-application-profile-data-portals-europe/about

UK https://guidance.data.gov.uk/publish_and_manage_data/ Open standards for government https://www.gov.uk/government/collections/open-standards-for-government-data-and-technology

Методические рекомендации по публикации данных в РФ, Украине и Казахстане: Россия: федеральный портал: https://data.gov.ru/metodicheskie-rekomendacii-po-publikacii-otkrytyh-dannyh-versiya-30 Московский портал: https://data.mos.ru/about/DownloadFile/15542 Казахстан: Требования к формату данных (могут публиковать как гос органы так и частные лица и организации) https://data.egov.kz/pages/format

gsk990 commented 5 years ago

СТРУКТУРА НАШЕГО БЛОГ ПОСТА:

1) описать как выглядит процесс (Яра и Глеб): кто занимается процессом стандартизации какие этапы ссылки на стандарты

2) взять из документа с оценкой экономических данных пример одной страны 3) чего достигли в результате 4) Опен Дата Институт - рекомендации для организаций, публикующих ОД - что из этого может быть полезно нашему Мин Связи?: http://standards.theodi.org/guide/data-users/ (Паша?)

gsk990 commented 5 years ago

следующий звонок в среду 18-00

gsk990 commented 5 years ago

и предлагаю разделить блог пост на несколько частей, кстати. Яра, как бы ты предложила сделать разделение на какие-то небольшие части, чтобы можно было попробовать подготовить первую часть за 2 недели, например? иначе это может просто огромное количество времени и сил у нас занять :) Можем на страничку А4 (250 слов) сделать подсуммирование, например просто?

gsk990 commented 5 years ago

Предложение про тему первого блог-поста:

10 ссылок про стандарты открытых данных: как публиковать данные чтобы их можно было понять и использовать.

yaramk commented 5 years ago

The World Bank’s Open Government Data Working Group developed an Open Data Readiness Assessment (ODRA) methodological tool that can be used to conduct an action-oriented assessment of the readiness of a government or individual agency to evaluate, design and implement an Open Data initiative. As part of the Open Government Data Toolkit, this tool is freely available for others to adapt and use. http://opendatatoolkit.worldbank.org/en/odra.html

gsk990 commented 5 years ago

Спасибо, Яра - интересно, можно ли применить данный опросник к белорусским организациям и/или министерствам для эксперимента. и сравнить с Таджикистаном или Угандой, например :)

gsk990 commented 5 years ago

Рекомендации от Всемирного банка про стандарты данных (по казахскому ассессменту): Рекомендуется не разрабатывать собственные стандарты метаданных. Лучше принять или адаптировать к национальным условиям техническую спецификацию ISO 19139, основанные на абстрактной спецификации ISO 19115. Kazakhstan (2014, self assessment): Russian | English http://opendatatoolkit.worldbank.org/docs/odra/odra_kazakhstan-ru.docx

Этот стандарт, 19115 и 19139, описывает географические метаданные - https://support.esri.com/en/technical-article/000004448 ISO 19139 is an XML encoding of ISO 19115 with additions from ISO 19119 to cover metadata for services that provide geospatial data. Whilst it is true that ISO 19115 (and thus also ISO 19139) allows a party to define a very comprehensive set of metadata, it is also true that these ISO standards allow you to define a very minimal set of metadata, based on the core metadata required by the ISO 19115 standard.

To put that another way, to be conformant to ISO 19115/ISO 19139 requires a minimal set of metadata, that is:

Mandatory (M): The metadata entity or metadata element shall be documented

Conditional (C): The metadata entity or metadata element shall be documented if another entity or element has been documented, or if a condition is or isn’t met elsewhere.

Dataset title (M) A unique title (within your metadata records) for your data.

Dataset reference date (M) Geographic location of the dataset (by four coordinates or by geographic identifier) (C) If the metadata applies to a data set which is spatially referenced (such as a WMS) this is required.

Dataset language (M) Language(s) used within the dataset. Required even if the resource does not include any textual information; defaults to the Metadata language.

Dataset character set (C) Full name of the character encoding used for the data set. You must supply this character set if you are not using the ISO/IEC 10646-1 character set and if your character set is not defined by the document encoding.

Dataset topic category (M) Main theme(s) of the data set described using the most appropriate term defined in the standard; such as: ‘geoscientificInformation’, ‘economy’ , or ‘imageryBaseMapsEarthCover’

Metadata language (C) Language used to document the metadata. You must supply the metadata language if it is not defined by the document encoding.

Abstract defining the dataset (M) Brief narrative summary of the content of the resource.

Metadata character set (C) Full name of the character encoding used for the metadata set. You must supply this character set in your metadata if you are not using the ISO/IEC 10646-1 character set AND if your character set is not defined by the document encoding. Note as most XML and HTML pages provide a character set as part of their own metadata, it is likely that you will not need to explicitly state this for your own layer metadata

Metadata point of contact (M) Party responsible for the metadata information

Metadata date stamp (M) So really what you probably need to do is to go through which metadata you need to supply for you own benefit (the benefit of your organization) and map it to the metadata defined by ISO 19115 and then to the relevant elements and attributes of ISO 19139. You may wish to put extra constraints on the content of an ISO 19139 instance document such that it is conformant to your standard, for example to restrict possible terms to a subset of terms allowed by the standard, and in such cases you can define those rules using Schematron