En ny generasjon standarder for bygging av geografisk infrastruktur Produktspesifikasjoner - kvalitet

Transkript

1 En ny generasjon standarder for bygging av geografisk infrastruktur Produktspesifikasjoner - kvalitet Morten Borrebæk, Jostein Amlien, Kartverket 13-juni-2018

2 Produktspesifikasjoner - kvalitet Innhold Kvalitets rolle i en produktspesifikasjon Kvalitetsmodellen Implementasjon Relevante standarder Internasjonalt: ISO Data quality (NS-EN ISO Datakvalitet) ISO/TS Data quality Part 2: XML schema implementation Nasjonalt: SOSI Produktspesifikasjoner Krav og godkjenning Geodatakvalitet Veileder for utarbeidelse av SOSI produktspesifikasjoner

3 Utarbeide produktspesifikasjon Hvor i løypa befinner vi oss? Business Process Lage produktspesifikasjon Kartverket Matrikkel- og stedsnavnavdeling Ny produktspesifikasjon skal lages Nei Lage UML-modell Lage produktspesifikasjonsdokument Generere realiseringer Teste eksempeldata mot realiseringsresultater Er testres og h produkts UML-modell administrative enheter Produktspesifikasjon SOSI-Kontrollfil PostGIS-DDL-fil GML-applikasjonsskjema

4 Kvalitetskrav i en produktspesifikasjon Frivillig

5 Hvorfor kvalitet? 7.1 Helhetlig informasjonsforvaltning i offentlig sektor «Saksbehandling og digitale tjenester kan forbedres, effektiviseres og automatiseres ved god tilgang til kvalitetssikret informasjon fra egen og andre virksomheter». «Korrekt og oppdatert informasjon er avgjørende for saksbehandling og myndighetsutøvelse» Viderebruk i en datadrevet forvaltning Det er avgjørende at data tilgjengeliggjøres på en måte som gjør det trygt for det offentlige å dele, samtidig som viderebrukerne er klar over dataenes kvalitet. Utviklingstrekk og utfordringer Geografisk informasjon med god kvalitet inngår som en sentral del av kunnskapsgrunnlaget i samfunnets prosesser. Det innebærer også at bruk av geografisk informasjon blir en del av løsningen for håndteringen av vår tids samfunnsutfordringer Forventningene til datainnhold i infrastrukturen øker Sentrale samfunnsprosesser blir stadig mer avhengige av kvalitetssikrede data fra mange kilder

6 Krav til kvalitet i en produktspesifikasjon Beskrivelse av kvalitet Spesifikasjonsomfang class Specification Scopes - quality Krav 1 Spesifikasjon jfr UML modell Krav 2 Kvalitet skal knyttes til et kvalitetmål Krav 3 - Egendefinerte kvalitetsmål skal dokumenteres, slik som: Navn Identifikator Alias Definisjon Element navn Kvalitetsmål Resultattype Verdittype Beskrivelse Kildereferanse kommentar +scopeinformation 0..* 1..* DPS_ScopeInformation {root} + scopeidentification: CharacterString + level: MD_ScopeCode [0..1] + levelname: CharacterString [0..1] + extent: EX_Extent [0..1] + leveldescription: CharacterString [0..*] + coverage: CharacterString [0..*] +qualityscope 1 0..* Specification Data Quality Requirement:: DPS_DataQualityInformation {root} + dataquality: DQ_DataQuality [0..*] «CodeList» Maintenance information:: MD_ScopeCode + attribute + attributetype + collectionhardware + collectionsession + dataset + series + nongeographicdataset + dimensiongroup + feature + featuretype + propertytype + fieldsession + software + service + model + tile

7 Kvalitetsmodell geografiske data ISO Data Quality class Figure 2: Data quality overview DQ_FullInspection Både for angivelse av kvalitetskrav og kvalitet i metadata DQ_SampleBasedInspection DQ_IndirectEvaluation DQ_DataEvaluation DQ_AggregationDerivation DQ_ConformanceResult DQ_QuantitativeResult DQ_DescriptiveResult DQ_MeasureReference DQ_EvaluationMethod DQ_Result +measure evaluationmethod result 1..* DQ_StandaloneQualityReportInformation DQ_Homogeneity DQ_Metaquality +relatedelement +derivedelement 0..* DQ_Element 0..* +elementreport +report 1..* +standalonequalityreport 0..1 DQ_DataQuality DQ_Representativity DQ_Confidence DQ_Completeness DQ_ThematicAccuracy DQ_LogicalConsistency DQ_UsabilityElement DQ_CompletenessCommission DQ_ConceptualConsistency DQ_TemporalQuality DQ_PositionalAccuracy DQ_CompletenessOmission DQ_ThematicClassificationCorrectness DQ_DomainConsistency DQ_AccuracyOfATimeMeasurement DQ_AbsoluteExternalPositionalAccuracy DQ_NonQuantitativeAttributeCorrectness DQ_FormatConsistency DQ_TemporalConsistency DQ_RelativeInternalPositionalAccuracy DQ_QuantitativeAttributeAccuracy DQ_TopologicalConsistency DQ_TemporalValidity DQ_GriddedDataPositionalAccuracy Data produkt spesifikasjon spesifiserer Data produkt Dataset Metadata Implementeres som Beskrives som

8 Kvalitet - fullstendighet class Data quality ov erv iew Fig. 2 repla... DQ_Completeness Fullstendighet DQ_completeness beskrivelse av hvilke enheter som er med i et datasett i forhold til de som burde vært med. DQ_CompletenessCommission Overskytende data DQ_CompletenessCom mission data som ikke skal være i et datasett DQ_CompletenessOmission Manglende data DQ_CompletenessOmis sion data som mangler i et datasett ksempel fra FKB bygning

9 Kvalitet - egenskaper lass Data quality ov erv iew Fig. 2 replacement DQ_ThematicAccuracy Egenskapskvalit et DQ_ThematicAccuracy nøyaktighet av kvantitative egenskaper, riktighet av ikkekvantitative egenskaper og objektenes klassifisering og relasjoner DQ_ThematicClassificationCorrectness Klassifikasjonsriktighet DQ_Correctness Sammenligning mellom anvendt klassifisering og virkelighet DQ_NonQuantitativ eattributecorrectness Ikke-kvantitativ Egenskaps nøyaktighet DQ_NonQuantitativeAt tributecorrectness hvor nær ikke-kvantitative verdier er sanne verdier eller verdier akseptert som sanne DQ_Quantitativ eattributeaccuracy Kvantitativ Egenskaps nøyaktighet DQ_QuantitativeAttrib uteaccuracy hvor nær kvantitative verdier er sanne verdier eller verdier akseptert som sanne Eksempel fra FKB bygning

10 Kvalitet logisk konsistens class Data quality ov erv iew Fig. 2 replacement DQ_LogicalConsistency Logisk konsistens DQ_LogicalConsistency Sammenheng mellom regler som gjelder for produktet og det aktuelle produktet/datasettet Merknad: Produktkravene for geodata inneholder ofte regler som dataene skal oppfylle. Logisk konsistens sier noe om hvor god sammenheng det er mellom reglene som gjelder for produktet og det aktuelle produktet selv. DQ_ConceptualConsistency Konseptuell konsistens DQ_ConceptualConsiste ncy mål på om regler i det konseptuelle skjemaet er oppfylt DQ_DomainConsistency Domenekonsiste ns DQ_DomainConsistency mål på om angitte verdier er i henhold til domeneverdier DQ_FormatConsistency Formatkonsistens DQ_FormatConsistency mål på om data er lagret i riktig struktur DQ_TopologicalConsistency Toplogisk konsistens DQ_Topological Consistency mål på om topologiske sammenhenger er korrekte

11 Kvalitet stedfestingsnøyaktighet ss Data quality ov erv iew Fig. 2 replacement Stedfestings nøyaktighet DQ_PositionalAccuracy hvor godt stedfestingen til et objekt samsvarer med virkeligheten/fasit Merknad: Stedfestingen kan skje matematisk ved koordinater i et kjent referansesystem og indirekte ved stedsnavn/adresse eller avstand til kjent referanse. DQ_PositionalAccuracy Absolutt stedfestings nøyaktighet DQ_AbsoluteExternal PositionalAccuracy hvor nær stedfestet posisjon er sann posisjon eller posisjon akseptert som sann DQ_AbsoluteExternalPositionalAccuracy Nabonøyaktighet DQ_RelativeInternal PositionalAccuracy hvor bra stedfestet posisjon samsvarer med andre stedfestede posisjoner DQ_Relativ einternalpositionalaccuracy Posisjonsnøyaktighet i rasterdata DQ_GriddedDataPositio nal Accuracy hvor bra posisjon i raster samsvarer med sann posisjon eller posisjon akseptert som sann DQ_GriddedDataPositionalAccuracy Stedfestings pålitelighet [Benyttet i Norge for beregninger i grunnlagsnett, ikke del av NS-EN ISO19157:2013] uttrykk for hvor sterkt mulig gjenværende grove feil i materialet for stedfestingen påvirker slutt resultatet. Merknad: Stedfestingspålitelighet bestemmes i egne pålitelighets analyser. Beregnet stedfestings pålitelighet kalles ofte deformasjon.

12 Kvalitet - tidfesting class Data quality ov erv iew Fig. 2 replacement DQ_TemporalQuality Kvalitet på tidfesting DQ_TemporalQuality Kvalitet til egenskaper som definerer tid eller tidsavhengigheter mellom objekter. DQ_AccuracyOfATimeMeasurement DQ_TemporalConsistency DQ_TemporalValidity Tidsnøyaktighe t Domenekonsis tens Formatkonsistens DQ_AccuracyOfATime Meassurement DQ_TemporalConsiste ncy DL_TemporalValidity Hvor nær angitte tidsverdier er sanne verdier eller verdier akseptert som sanne. mål på om tidsangivelser er ordnet riktig mål på om tidsangivelser er gyldige Vet ikke om denne er i bruk.

13 Kvalitet - egnethet Egnethet DQ_Usability Egnethetskvalitet lass Data quality ov erv iew Fig. 2 replacement DQ_UsabilityElement Egnethets element DQ_UsabilityElement det som ikke er dekket av øvrige kategorier og aggregert kvalitet basert på flere Kvalitetselementer AggregertKvalit et Summering av kvalitet fra andre kvalitetselementer. Ikke definert som eget element i NS- EN ISO19157:2013 Ofte som en ren tekstlig beskrivelse «Innenfor tettstedet vil all planlegging skje i stor detalj, og grunnlaget for å definere en avgrensning kan være ulike objekter i store målestokker (for eksempel FKB). Det er derfor ønskelig med god nøyaktighet i avgrensingen av områdene. Nøyaktigheten vil være størst, kanskje rundt 1-2 meter, der områdene har klare grenser, som vei eller vassdrag eller bebyggelse. Hvis grensen går innenfor «grønne» arealer (skog og lignende), blir plasseringen mer skjønnsmessig, kanskje opp mot +/- 25 meter. Dersom geometri er hentet fra andre baser skal kvaliteten på geometrien være med over i datasettet (på avgrensingslinjene). I tillegg angis stedkvalitet/nøyaktighetsklasse på flatene som er en grovere klassifisering av stedets plassering».

14 Kvalitet i GeoNorge (metadata) Vi har påkrevde egenskaper i de grønne objektene i diagrammene under: