AstraStore Et nos petimus astra også vi søker (i) stjernene Storage-core, 2013-05-28 Kjetil Kirkebø, storage-core@usit.uio.no
Tema for presentasjonen Hva og hvem er storage-core Utfordringer innenfor lagring Hvilke lagringstjenester tilbyr USIT i dag Vaffelprosjektet Anskaffelseprossen AstraStore
storage-core@usit.uio.no En gruppe som driver rådgivning, oppsett, drift og overvåkning innenfor alle aspekter ved datalagring og backup på UiO. 10 personer fra GD Alle medlemmene har forskjellig stillingsbrøk avsatt til å jobbe med lagring http://www.uio.no/tjenester/it/hosting/storage/
Utfordringer innenfor lagring Raskt voksende lagringsmengder innenfor mange områder Krav til ytelse Mengde, båndbredde, iops (antall operasjoner mot lagring) Dynamikk -> Endringer i ytelsesbehov over tid Data blir kalde, eller varme igjen Uforutsette behov for mere plass (leveransetid ) Driftbarhet / robusthet / kompetanse / tilgjengelighet Pris versus alt annet Sikkerhet / tilgang / konsesjon (TSD) Backup
USIT tilbyr følgende lagringstjenester Hjemmeområder / fellesområder Lagringshotell Databaser Virt-core / VMware, RHEV, Hyper-V Sensitive data Lagring for forskere på UiO Lagring på egne servere (DAS) UNINETT, Norstore, Sigma, CERN Mye annet?
Hvilke løsninger har UiO i dag Tradisjonelle SAN, også mellom bygninger Brocade FC-switcher i edge klasse, 24 32 porter og 2, 4 eller 8Gib båndbredde Blokk HP EVA-8000, 8100 og 6400 Sun StorageTek ST6540 EMC Clarion CX4-120 HP-MSA, Dell MD3000, Nexan, SataBeast/SataBoy iscsi, Dell Equallogic 5000 + diverse NAS, 4 NetApp-clustere (fil) Og det meste er gammelt og er under utfasing!
Vaffel prosjektet VeivAlg For FremtidigE Lagringsløsninger Prosjektets formål er å komme med en anbefaling til teknologivalg slik at USIT kan tilby lagringstjeneste som vil dekke de nærmeste årenes differensierte behov for driftssikkerhet, lagringskapasitet og ytelse Vi hadde også som mål å øke den generelle kompetansen i storage-core
Vaffel konklusjon Vi ønsker færrest mulig løsninger Vi ønsker en konsolidert løsning med 100% oppetid, dvs alt av mgmt i full drift QOS, kontroll på ytelse unngå dos fra egne systemer Skaleringsmuligheter Bredt bruksområde Lite endringskost (hw-utvidelser, sw-endring, utvidelse) Riktig pris til riktig behov Anskaffelseprosess (EØS-anbud)
Forespørselen 4 kategorier Kategeri A: 800 TiB netto blokklagring + 10 FCswitcher (SAN) Kategori B: 500 TiB netto fillagring (NAS) Kategori C: 400 TiB netto, Sensitive data. Kravene er ytelse og funksjonalitet Kategori D: 5,6 PiB netto, forskningsdata Minimum 2PiB disk, resten valgfritt irods krav (https://www.irods.org) Skalering fra 2 4 gangen i levetiden, både mhp. ytelse og mengde
Vi valgte en løsning fra Hitachi Solid konsolidert enterprise løsning QoS (kontroll på ytelse) Skalerer langt, både i mengde og ytelse Mye fleksibilitet, også fleksibel utnyttelse mellom kategorier Moden teknologi med god historikk En solid totalleverandører med høy kompetanse Alt av det vi forbinder med enterprise funksjonalitet AstraStore
Astrastore
Tiering
Fysisk 9 rack + taperobot 4 * HUSVM kontrollere (5u), blokk 256GB cache 32 FC8 porter 32 SAS2 porter 36 hyller for 2,5 disker, plass til 24 disker 36 hyller for 3,5 disker, plass til 48 disker 2 * HNAS 3090, NAS-hoder (fil) 10 * Brocade 6510, 48 ports FC16 switcher SpectraLogic, T-Finity tape bibliotek 7 servere for mgm og tape-gw (win og linux)
Konseptuelt - internt
HNAS, med FC kabling
Hvilke tjenester skal bruke hva Blokk, 800TiB netto lagring Alle VMware clusterne Det meste av Windows clustere Alle RHEV clustere Oracle RAC En del HPC Noe TSD Fil 6,5 PiB netto Hjemmeområder Fellesområder Lagringshotellet Resten
Noen ytelsetall Filoperasjoner krav: 90.000 SpecNFS like iops Oppnådd: 105.000 iops Blokk: Krav: 60.000 SPC1 like iops Oppnådd: 75.000 iops Sitat fra Gunnar: Jeg klarte ikke 1mill transaksjoner pr minutt, kun 963323
Status, 24 mai Blokk er i full produksjon Mangler noe dokumentasjon og rutiner Fil er på vei Norstore har fått 800TiB disk og mye på tape CERN har fått med 1PiB disk og 500TiB på tape Ansattfiltjener, kant.uio.no, er oppe og går, USIT har vært der i 2 uker. (Kun hjemmeområder) Utfordringer NFSv4, AD (Kerberos) Fil acl-er, (win, unix, mixed) Posix grupper i AD
Dokumentasjon, http://www.uio.no/tjenester/it/hosting/storage/
Bestilling https://nettskjema.uio.no/answer/lagring.html USIT er klare for å dele ut hjemmeområder. Fellesområder og lagringshotellet er noen uker frem i tid.
Fra åpningen av AstraStore