Seksjon for Digitale Forskningstjenester Roy Dragseth Seksjonsleder Avdeling for IT UiT Norges arktiske universitet
SDF Personer Albrigtsen, Ernst-Rolf Andersen, Rolf Bast, Radovan Dragseth, Roy Einar Emanuelsen, Per Ivar Evje, Bjørn Ivar Johansen, Tor Jonsson, Dan Johan Malkin, Elena Tangen, Espen Tartari, Giacomo (50%) Trædal-Henden, Steinar Vollan, Erik Axel Skadsem, Marte = 13,5 stillinger
SDF Tre søyler HPC Lagring Applikasjoner
STALLO 300 Tflop/s 750 compute nodes Ca 250 users 25 Terabyte minne 2100 TB Lagring Ca 250 brukere Delivers 80 000 000 CPUhours to Norwegian research per year
UiT en nasjonal partner Research & Education Network 100G 10G 100G 100G
Ny infrastruktur NTNU og UiT valgt som vert for nye regne- og lagringsanlegg To nasjonale regneanlegg Lagring speilet mellom to lokasjoner Første regneanlegg, A1 ved UiT, operativt tidlig 2017 Andre regneanlegg, B1 ved NTNU, operativt medio 2018 NIRD operativ april 2017. Hjemmeområder lagt på NIRD og speiles mellom sitene B1, NIRD A1, NIRD
NIRD (National Infrastructure for Research Data) Skal erstatte NorStore En site ved A1 og en site ved B1 Initielt 7.5PB pr site Tidsplan Nå: Forhandling pågår 15. sept: Frist for nye oppdaterte tilbud 14. okt: Evaluering og forhandling ferdig 24. okt: Signering 2. jan: Installasjonsstart 17. april: Akseptanseperiode utløper
FRAM (Tidligere kjent som A1) Lenovo/SerIT valgt som leverandør Avtale inngått juni 2016 Installasjon starter oktober 2016 Parametre 940noder/32C/64GB 30800 CPUcores/1.1 Pflop/s 100 gbit IB 1.5 PB/40 GB/s scratch storage Vannkjølte CPUer 40C kjølevann -> gjenvinning av varme
Metasenter og driftsmodell Sigma2 mindre involvert i drift. -> Partnerne må ta mer ansvar for organisering av drift Nasjonale team som er likeverdige uavhengig av geografi F.eks leder for Operasjoner sitter ved UiO
Data-centric architecture 22
New data producer: EISCAT3D Multinational collaboration. Main site with 10 MW radar placed more than 160 km (100 miles) away from nearest data centre. Receivers in three different countries Will need to store between 2-4 PB of data per year Each receiver needs dedicated 100 Gbit/s links to HPC and storage centre
Lagring av forskningsdata Trenger en ny skalerbar plattform, X PB Ambisjon om å ta vare på alle innsamlede data for alltid Automatisk innsamling av data fra instrumenter etc. Fortsatt på planleggingsstadiet UiT styre har vedtatt at vi skal ta vare på alt av forskningsdata
Vitenskapelige applikasjoner Områder som faller utenfor tradisjonell HPC Visualisering over remote desktop Data analytics Windows Linux Webportaler
Tjenestebehov gjennom levetiden for data Innsamling Instrumentnett Open vessel data management Storskala lagringssystem Deling Tilgangskontroll Analyse Big data HPC Statistisk analyse Visualisering Publisering og søk Opendata Fagspesifikke portaler
Integrering av lagring og applikasjoner Data High speed network
Andre viktige tjenester Prosjektadministrasjon Sharepoint Web tjenester WordPress Instrumentnett Sensitive data (TSD ved UiO prioriteres over egen løsning)
Ut i skyen, et regneeksempel Lab for geologi, behov 10 maskiner, 64 GB minne, akselerert grafikk (Nvidia Quadro) Kjøpe inn HW Ca. 450 KNOK ink mva Leie hos AZURE NV6 6 cores, 56 GB ram, 340 GB disk, K80 GPU 5.90 NOK/time 4250 NOK/måned/stk = 510 000 NOK/år for 10 instanser Men hvis 10 studenter bruker maskinene 4 timer/dag 5 dager i uka 10 stud * 5,90 NOK/time * 4 timer * 5 dager * 4 uker * 8 måneder = 37 760 NOK/år
Sky først!(?) Muligheter Store muligheter for mer dynamisk tjenestespekter Besparelser hvis vi kan utnytte elastisiteten Enklere å teste ut nye ting Utfordringer Kostkontroll Kontroll over data Data plassering og flytting Nå er det kun jussen som holder oss tilbake.
Hvilken sky? Kommersiell Amazon Azure Other GEANT-avtalen blir viktig. I sektoren BOTT UH-Sky/UH-IaaS Nasjonal infrastruktur Slipper innkjøp!! Intern Neppe (vi har VMWARE for egne behov)
Hvor skal tjenestene? Må legges der data er lokalisert Kilde: Data Gravity, https://blog.mccrory.me/2010/12/07/data-gravity-in-the-clouds/
Kontakt og info Roy Dragseth Seksjonsleder, SDF roy.dragseth@uit.no 77646256 http://uit.no/ita http://www.sigma2.no http://hpc.uit.no