NADAG NASJONAL DATABASE FOR GRUNNUNDERSØKELSER Bobo Nordahl, NGU Foto: Statens vegvesen 27 mars 2019 SGU, Uppsala Workshop om nationellt datavärdskap för geoteknisk information
Innhold Tidslinje for NADAG Bakgrunn Nytte kost analyse Ulike deler og dataflyt i NADAG Database Innlevering Nedlastning av data Innsyn til data NADAG mer enn geoteknikk Diverse og oppsummering
Tidslinje for NADAG -- 2011 SOSI standard Geovitenskaplige undersøkelser med delkapittel for Geoteknikk -- 2012 diskusjoner om behov 2011 Stortingsmelding 15 - Om flom og skred 2012 Forprosjekt ved NGU 2013-2016 utvikling av NADAG Opprinnelig planlagt ferdig 2015 Flere forsinkelser og ting tar tid Høst 2016 fullskala tester Desember 2016 lansering av NADAG 2016 - Drift og videre utvikling 2019 Ny web reg-løsning og flere leveranseformater
Bakgrunnen for NADAG Det finnes store mengder data fra grunn-undersøkelser i Norge Mye er samlet inn med offentlige midler Det var vanskelig å finne ut hvor og hva som finnes Flere store aktører ønsket et samarbeid Stortingsmelding 15 Fra 2011 - Om flom og skred "Alle offentlige grunnundersøkelser og rapporter bør blir gjort allment tilgjengelige" Foto: IL Solberg
Bakgrunn Det finnes store mengder data fra grunnundersøkelser i Norge Manglende koordinering og tilgjengeliggjøring av data fører til utfordringer for planlegging av viktig infrastruktur ekstra kostnader for samfunnet
Bakgrunn Bruk av undergrunnen er i stadig vekst Konkurranse om arealbruk går ned i undergrunnen Behov for forvaltning i 3D Foto: IL Solberg Foto: IL Solberg
Bakgrunn Bruk av undergrunnen er i stadig vekst Konkurranse om arealbruk går ned i undergrunnen Behov for forvaltning i 3D og da bør vi vite hva vi har under føttene Foto: IL Solberg Foto: IL Solberg
Skredgrop Bedre beredskap og krisehåndtering ved skred og annen naturfare Viktig å kjenne til grunnforholdene i området rundt en skredhendelse: kan skredet utvide seg i en eller flere retninger? Hva skjer nedstrøms skredet? Hvem skal evakueres?
Skredgrop Bedre beredskap og krisehåndtering ved skred og annen naturfare Viktig å kjenne til grunnforholdene i området rundt en skredhendelse: kan skredet utvide seg i en eller flere retninger? Hva skjer nedstrøms skredet? Hvem skal evakueres? Finnes det boredata i området? Solberg et al. 2012
Bakgrunn Stortingsmelding 15 ".bør " Foreløpig ikke lovpålagt å dele data Store statlige aktører SVV var først å erklære at alle deres data var offentlige. Flere andre tar med i nye kontrakt at dataene skal leveres til NADAG før sluttbetaling skjer. Også noe kommuner vurderer
Bakgrunn - Rettigheter Statlige etater (SVV, NVE, Bane NOR, Statsbygg) publiserer data betalt av det offentlige, uavhengig av tidligere kontrakter.
Bakgrunn - Rettigheter Statlige etater (SVV, NVE, Bane NOR, Statsbygg) publiserer data betalt av det offentlige, uavhengig av tidligere kontrakter. Oppdragsgivere kan i avtaler med konsulenter kreve at data skal gjøres tilgjengelig gjennom NADAG. Forslag til vedlegg til standardkontrakt er laget. Kommuner vurderer å ta med leveringskrav i planbestemmelser Det er sjelden kommunen som er bestiller
Bakgrunn andre aktører Leveranse fra private aktører Ingen private aktører har levert inn eldre data Verdier i å holde på data for bedriftene Flere har dårlige system/oversikt på eldre data Men vi har registret diskusjon om endring i buisnessmodell Flere konsulentbedrifter leverer nye data på vegne av offentlige bestillere 1 aktør har spurt om mulighet til forvalte sine data i NADAG i en lukket del og kun ha metadata i den offentlige delen.
Nytte-kost-analyse Våren 2015: Nytte-kost-analyse Metodeutvikling for nasjonale databaser med NADAG som eksempel
Nytte-kost-analyse Våren 2015: Nytte-kost-analyse Metodeutvikling for nasjonale databaser med NADAG som eksempel Konklusjon: NADAG er et samfunnsøkonomisk meget lønnsomt tiltak (Nytte-kost-forhold: ~7:1)
Nytte-kost-analyse Noen nyttevirkninger: Gjenbruk av informasjon (redusert antall grunnundersøkelser) Redusert tid til å fremskaffe data fra tidligere grunnundersøkelser Redusert planleggingstid Bedre planer og billigere utbyggingsprosjekter Bedre beredskap og krisehåndtering ved skred og annen naturfare
Utviklingen av NADAG Aktører som var med NADAG ble utviklet på NGU i samarbeid med etatene Bane NOR (jernbaneetat), NVE (Norges vassdrags og enegidirektorat) og SVV (Statens vegvesen), Sammen med konsulentene Norkart og Trimble I tillegg har Statsbygg og storkommunene Oslo og Trondheim bidratt med data fra sine arkiv.
Utviklingen av NADAG Ved oppstart fantes en ny standard "SOSI" fra 2011 Basert på fagmiljøet og arbeidet ble lett av NGI Database Produktspesifikasjon UML Generert database for forvaltning Dataleveranse inn 2 hoved leveringsmåter Visning/innsyn Tilgang til data men ikke et "analyseverktøy" Dataleveranse ut Formater
Oversikt på dataflyt i NADAG SVV GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG
Oversikt på dataflyt i NADAG SVV GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG Hoveddatabase med datamodel
Oppbygging av NADAG Datamodellen er basert på SOSI-standarden for geotekniske undersøkelser Som er en del under Geovitenskaplige undersøkelser
Data modell SOSI standard for geotekniske undersøkelser - prinsipp Borehull (GB) i en Geoteknisk undersøkelse (GU) Solberg et al. 2012
Data modell SOSI standard for geotekniske undersøkelser - prinsipp En eller flere ulike undersøkelser/metoder er utført i et borehull Eks: sonderinger, prøver eller ) Solberg et al. 2012
Hoveddeler I NADAG modelen GU GB GBU Basert på SOSI som var ny og tatt frem av fagmiljøet For å lagre Geotekniske måledata "pakket opp" Noen problemer med standarden Hadde en del "gode ønsker" Konskvent brukt dyp istedet for boretlengde Egenskaper som aldri har blitt samlet inn
101 tabeller med 5-30 egenskaper Utviklet til en spesifikk programvare Likheter med SOSI GeoSuiteArchieve SQL database GU Doc GB GBU De lysegrønne boksene er ulike metoder/sonderinger
Mapping fra GeoSuite til NADAG Har vært krevende Brukt FME 2 Komplekse modeller som skal kobles sammen Flere trinn med FME-modeller trengtes
Leveranse av komplette data Oversikt på dataflyt i NADAG SVV GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG
Levering fra GeoSuite Registrering av brukere I GeoSuite Cloud Start eksport til NADAG Direkte i GeoSuite Toolbox Følg checklist Koordinater Koordinatsystem Legg til rapporter Boreprofiler genereres "on the fly" Sendes via "Cloud" til NGU På liknende måte fra vegvesenet
Leveranse av komplette data Oversikt på dataflyt i NADAG SVV GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG Videre flyt for komplette data
Oversikt på dataflyt i NADAG SVV Leveranse av metadata GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG Enkeltleveranser av metadata fra noen aktører
Dataflyt - Leveranse av metadata Levering av metadata til NADAG Opplastingsportal for metadataleveranse Kommer snart i ny versjon som enklere webregistreringsskjema Leveransealternativ: GU + rapporter GU, GB, GBU + rapporter Eldre data fra kommuner, NVE og Bane Nor
Oversikt på dataflyt i NADAG SVV GeoSuite Toolbox Datalevering GeoSuite Cloud GUDB Novapoint Opplastings portal Datalevering Bestilling av data Bestilling Nedlastnings - service Visningsklient PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG
Dataflyt - Nedlastning Nedlastning av data fra NADAG Rapporter (pdf) som er lenket opp Nedlastingsløsning GeoSuite-format
Dataflyt - Nedlastning Nedlastning av data fra NADAG Rapporter (pdf) som er lenket opp Nedlastingsløsning GeoSuite-format Neste versjon nedlastning av data fra NADAG Delt på enkle data (metadata) og komplette data Enkle: Flere GIS formater og SOSI Komplette: GML, GIS Filgeodatabase,.?
Oversikt på dataflyt i NADAG NADAG for publikum SVV GeoSuite Toolbox GUDB Novapoint Opplastings portal Visningsklient Datalevering Datalevering GeoSuite Cloud Bestilling Nedlastnings - service PostGis WMS, WMTS, REST Datavalidering Visnings DB GeoArchive Service SQL Server Oracle Produksjon DB ARCSDE Versioned Andre importer til NADAG
http://geo.ngu.no/kart/nadag Dataflyt NADAG på nett Kunne vise hvor det er gjort undersøkelser og hva for type Viser GU (prosjektområder) Kan ha rapporter tilgjengelige Viser GB og GBU Borehull og metoder Kan ha: Boreprofil, Borelengde, Fjelldyp, Kvikkleirepåvisning Alt kan vises med borefirma eller bestiller Ikke et analyseverktøy Eksempler
http://geo.ngu.no/kart/nadag NADAG på nett -Starter med tetthets-visning -Enkelt innsyn -Avansert innsyn har flere valg
http://geo.ngu.no/kart/nadag NADAG på nett Borehull og prosjektområder
http://geo.ngu.no/kart/nadag NADAG på nett Borehull og prosjektområder Treffliste og Infoark
http://geo.ngu.no/kart/nadag NADAG på nett Borehull og prosjektområder Treffliste og Infoark
http://geo.ngu.no/kart/nadag NADAG på nett Borehull og prosjektområder Ulike filter og standardvisninger
http://geo.ngu.no/kart/nadag NADAG på nett Borehull og løsmassekart Ulike temakart
http://geo.ngu.no/kart/nadag NADAG på nett Flere andre datasett vises sammen med Geoteknikk Brønner (grunnvann og energi) Kvikkleirekartlegging NVE og SVV Rapporter fra SVV som ikke er levert til NADAG Faktaark kan fås fra disse også ved klikk i kartet Geofysikk Kommer i ny versjon snart
Hvorfor så stort fokus på format for GeoSuite? GeoSuite er totalt dominerende på det norske geotekniske markedet Skal NADAG kunne ta mot komplette data og være nyttig i leveranser så må det fokuseres på GeoSuite formatet Samfunnsnytten ble størst om vi første omgang kunne ha fokus på GeoSuite data inn og ut Men vi skal fokusere på flere format nå for leveranse ut, når vi fått en bedre dekning av data. Eks: Brukere på SVV ønsker å få sine egne data tilbake på andre formater!
NADAG - "Annet enn geoteknikk" Brønner Ny registeringsløsning laget i 2018 Smartphone løsninger for bruk i felt av brønnborer Likheter med NADAG-løsninger på datastruktur Lovpålagt registrering men ikke søknadsplikt. Har hatt stor underrapportering. Økt etter ny løsning Bakkegeofysikk Lages på samme måte som NADAG geoteknikk Noen av de samme partnere som ønsker å bidra med data. SVV, Bane Nor og NVE
NADAG - "Annet enn geoteknikk" SOSI standarden for Fagområde Geovitenskaplige undersøkelser har flere deler. NADAG - startet med Geoteknikk Geofysikk arbeides det med nå Brønner er oppdatert Andre kan komme
SOSI og produktspesifikasjon SOSI er Norsk nasjonal standard for geografiske data UML data modell er en del av produktspesifikasjonen og lagres i den Nasjonale SDI portalen Den er der tilgjengelig for alle. F.eks. til å lage egne løsninger Denne modellen har vi benyttet for å etablere vår database. Rutiner for å kunne realisere GML og SOSI-format leveranser Produktspesifikasjoner er nå påkrevd for data i Norges SDI
Hvor mye finnes i databasen? Røde=Komplette data Svarte=Metadata Ligger inne: Data fra Statens vegvesens alle regioner og de jobber med å legge inn mer Data fra konsulenter (kontraktsbundet) InterCity-prosjektet (Bane NOR) Prosjektområder m/rapporter fra Bane NOR Landsdekkende datasett levert fra Statsbygg Datasett fra enkelte kommuner Kommer snart data fra: Flere leveranser fra Statens vegvesen NVE Flere kommuner
Hva inneholder databasen? Per 21januar 2019: 2244 komplette Geotekniske undersøkelser med data. De inneholder 101 000 Borehull (ca 13 000 nye 26/3) Data levert som metadata. De har totalt 216 000 borehull Kvalitet og kompletthet: Komplette data Data fra Statens vegvesens alle regioner De legger etter hvert som de får lagt inn i sin egen database. Fortsatt en hel del som gjenstår Ny data fra konsulenter under kontrakt kommer Mange prosjektområder m/rapporter men uten info om hvor borehull er Datasett levert fra Statsbygg med info om borehull men ikke komplette data Datasett fra 2 storkommuner Variabel kvalitet med 149 000 borehull
NADAG Organisering under utviklingen Styringsgruppe med NGU og 3 andre partnere Prosjekt leder fra NGU Prosjekt gruppe med konsulentbedrift og NGU Samarbeidsgruppe IT og geoteknisk støtte Utfordringer Sen etablering av denne modellen Ulike kulturer og størrelse på prosjekter NGU "pragmatisk" Størst kritikk fra SVV IT
Kostnader for utvikling av NADAG Satt i drift desember 2016 Bidrag til utviklingen de siste årene. SVV, Bane Nor og NVE har bidratt med kr 200 000 hver i flere år under utviklingen. Ca. 1/5 hver av årskostnader og NGU dekker 2/5. Drift krever også sitt. Dekkes helt av NGU
Oppsummering eller noen tanker om NADAG Enklest å ikke ta alt på en gang Geoteknikk hadde stor nytteverdi for samfunnet Det finnes mye geoteknikk Hvor er mengden med data? Format, eiere Styr utviklingen Bra med en styringsgruppe med flere etater Men nyttig å ha det enkelt/løst organisert Viktig med drivkrefter i samarbeid Vise nytteverdi med utvalgte datasett tidlig Koster å utvikle egne løsninger, men selger inn prosjektet Avklaring av finansiering utover første utvikling
Noen flere tanker NGU hadde ikke egne geotekniske data Men ser stort nytteverdi ved bruk av geoteknsik informasjon til flere ulike geologiske prosjekt 3D Løsmasser Dyp til fjell Bynære områder Også nyttig som "mal" for andre prosjekter Nasjonale databaser med flere aktører Registreringsløsninger Kontaktpersoner Inger-Lise Solberg prosjektledere, goeteknikker Bobo Nordahl ansvarlig database og med i hele prosjektet
Foto: IL Solberg Takk for oppmerksomheten