Bruksanvisning for Tapedata portal

Transkript

1 Ref.id.: KS&SMS Instruks Side 1 av 9 Bruksanvisning for Tapedata portal Versjon 2.0 1/ INNHOLD Bruksanvisning for Tapedata portal... 1 GENERELT... 2 DISKPLASS OMBORD... 3 BRUK AV SYSTEMET... 4 LOAD/UNLOAD... 4 COPY... 5 FULL TAPE... 6 CLONE... 6 INFO... 6 ADVANCED LOGG PAUSE FORTSETTE VERIFISERE... 7 MANIFEST... 7 TROUBLESHOOT... 7 MERKING OG TRANSPORT... 7 TAPESTASJONENE... 8 KOMMANDOER... 9

2 Ref.id.: KS&SMS Instruks Side 2 av 9 GENERELT Havforskningsinstituttet har anskaffet et nytt arkivsystem for forskningsdata. Systemet benytter IBM TS1150 tape drev med tilhørende tape kassetter med ukomprimert kapasitet på 10TB. På datasenteret består systemet av flere tape roboter samt online diskplass på ulike lokasjoner. Brukerne vil se og ha tilgang til alle forskningsdata selv om de kun ligger på tape. Filserveren \\ces\ som erstatter \\callisto\ er en del av arkivsystemet. Media blir formattert med LTFS (Linear Tape File System) filsystem, noe som gjør det mulig å lese innholdet på tapene som et vanlig filsystem. Teknisk sett er tapen delt i to, der den ene halvdel inneholder indeks av filene, og den andre siden inneholder selve filene med data. På våre forskningsfartøy og de største leiefartøyer er det anskaffet en dedikert server og 2 tapedrev som illustrert på bildet under: Tapedata portalen skal brukes til å kopiere data fra filserverens toktkatalog til tape på en måte som samsvarer med våre kvalitets krav. Før toktet starter må det sjekkes at det medbringes tilstrekkelig ledige/tomme taper som har blitt registrert og formatert på datasenteret før utlevering til fartøy. For de fleste tokt vil det være nok kapasitet med 1 tape, men kapasitetsbehovet vil øke. Når en tape blir fylt opp, skal det lages en klone (kopi), og disse 2 taper skal etterpå tas ut av drevene og lagres forsvarlig, og nye settes inn. Kun den ene av disse tapene skal bringes i land til NMD etter toktet, og den andre skal bli værende på fartøyet som en sikkerhetskopi inntil data er blitt kopiert inn i arkivsystemet på datasenteret. Når dette er utført, vil data fra toktet bli tilgjengelig i denne strukturen på \\ces\cruise_data\<årstall>\tokt

3 Ref.id.: KS&SMS Instruks Side 3 av 9 DISKPLASS OMBORD Det er et krav om at det alltid må være minst 2 kopier av toktdata katalogen på filserver. Dette kravet blir ivaretatt ved den normale prosedyren som er å kopiere til tape en gang i døgnet. Dersom det blir for lite online diskplass på toktet, kan data slettes fra disksystemet etter klonetaper er opprettet.

4 Ref.id.: KS&SMS Instruks Side 4 av 9 BRUK AV SYSTEMET Tilgang til tapene er via en tapedata portal som heter Feil! Hyperkoblingsreferansen er ugyldig. f.eks. Bruk en nettleser for å få tilgang til tapedataportalen. Tape1 er tapestasjonen til venstre, og er den som benyttes til å kopiere data fra server. Tape2 et til høyre, og brukes til å lage kloner (kopier) av kassettene som står i Tape1. LOAD/UNLOAD Når du har satt en tapekassett i drevet, må det «loades», noe du kan utføre ved å klikke på den røde Load/Unload knappen: Øverst til høyre ser du statusinformasjon om de to tapedrevene. Hvis ingen er grønne, betyr det et det ikke står tape i drevet. Hvis den til høyre er grønn, betyr det at det står tape i drevet. Hvis begge er grønne betyr det at tapekassetten i drevet er «loadet».

5 Ref.id.: KS&SMS Instruks Side 5 av 9 COPY Når kassetten i venstre drev er «loadet», kan du starte med å kopiere data, og du trykker på den blå Copy knappen. Du kan kopiere data regelmessig under toktet, gjerne hver dag. Systemet holder rede på hvilke filer du kopierer 1, og vil ikke kopiere filer eller kataloger som er uendret siden forrige kopiering. Du velger rotnivået av katalogstrukturen for aktivt tokt under «Source» og rotnivået under «Destination». I eksempelet under ser du at rotnivået på «Destination» er kalt «Tape1». Det er viktig at du velger riktig nivå under «Destination». Velger du feilaktig destinasjonskatalogen som i eksempelet er kalt «S _PGOSARS_4174» vil alle data bli kopiert inn på nytt. 2 1 I systemet kalles dette for Manifestet. Manifestet er unikt for hvert tokt, og må nullstilles når alle data fra toktet er kopiert til tape. Knappen merket Manifest gir deg informasjon om hvor mange filer som er kopiert, og dersom toktet er ferdig kan du også nullstille manifestet. 2 Systemet vil gi deg en advarsel dersom du ikke står på rotnivået på «Destination», men du får lov til å utføre kopieringen etter å ha kvittert ut advarselen. Du kan ikke slette enkeltfiler eller foldere fra tapen. Ta kontakt med IT seksjonen dersom du får problemer.

6 Ref.id.: KS&SMS Instruks Side 6 av 9 FULL TAPE Dersom tapen går full under kopieringen skal du bytte tape i Tape1 drevet, og fortsette med kopijobben med de samme rotnivåer som før. Ikke slett manifestet, det holder rede på hvilke filer du allerede har kopiert. Dersom i tillegg disken på serveren går full, må du før du setter ny tape inn i Tape1 drevet lage en klone av denne tapen før du kan fortsette med å slette data fra disk samt fortsette kopiering av data til tape. CLONE Kloning av taper foregår ved at systemet leser TAPE1 og skriver samme innholdet til TAPE2. Dette gjøres blokkvis og ikke fil for fil. Kloning er derfor en effektiv og hurtig måte å produsere en kopi av en tape på. Allikevel kan det ta tid, tommelfingerregelen er at en full tape på 10TB netto tar ca. 8 timer å klone, og en som er 50% fylt opp tar ca. 4 timer. Fyllingsgraden finner du ved å velge INFO knappen. Kloning gjøres hovedsakelig når det er liten plass på disken slik at du sikrer 2 kopier av toktdataene, og dersom du har tid ved toktslutt kan det være hensiktsmessig å lage en klonetape før klargjøring av systemet til nytt tokt. Husk at det tar ca. 8 timer å klone en full tape. Det er ikke påkrevd å ta klonetape sålenge toktdata også blir liggende på disk til filserver. Når kloningen er ferdig, tar du klonetapen ut av Tape2 drevet og setter en ny tapekassett inn. INFO Når du velger Info får du informasjon om hvor mye av kapasiteten på tapene som er brukt. Pga. komprimering av data på tapen, er det vanskelig å gi et eksakt mål for hvor mye plass det er igjen på tapen, og hva tid du bør skifte til en ny tape. Dette må baseres på erfaring som du etterhvert får ved bruk av systemet. Dersom du opplever å få feilmelding under kopiering av data pga. at tapen er fylt opp, må du skifte til ny tape og kopiere data en gang til. Systemet holder rede på alle filer i en logg som ligger både på disk og tape, og denne sørger for at kun filer som ikke er kopiert tidligere blir kopiert ved skifte av tape. ADVANCED Når du velger Advanced vil du kunne gjøre følgende: 1. LOGG: Laste ned systemlogg over alle aktiviteter 2. PAUSE: Pause kopieringen, dvs. klargjøre systemet for å kopiere en annen toktkatalog til Tape1 mens pågående tokt er aktivt. Velger du dette, vil systemet ta en midlertidig kopi av manifestet før det nullstilles slik at du kan starte kopiering av en eldre toktkatalog etter å ha byttet ut tapen i Tape1 drevet med en ny. 3. FORTSETTE: Fortsette kopieringen, dvs. klargjøre systemet for å fortsette kopiering av data fra pågående tokt etter pause. Systemet vil da gjøre den midlertidige kopien av manifestet aktivt, og be deg sette inn riktig tapekasett i Tape1 drevet.

7 Ref.id.: KS&SMS Instruks Side 7 av 9 4. VERIFISERE: Kjøre et verifiseringsscript mot filserver for å sjekke at data blir plassert i korrekt i henhold til folderstrukturen. Når verifiseringen er kjørt, vises resultatet. MANIFEST Klikker du på den lilla MANIFEST knappen, får du informasjon om hvor mange filer som er kopiert til tape hittil på toktet. Sålenge du ikke sletter manifestet, er denne informasjonen riktig selv om du benytter flere taper under toktet. Knappen for SLETT MANIFEST skal kun benyttes ved toktslutt. TROUBLESHOOT Velger du Troubleshoot i venstre meny, så vil Tapen du velger bli unloadet, og filsystemet sjekket for feil. MERKING OG TRANSPORT Alle taper som benyttes, er merket med en strekkode-label som er unik. Dette er utført av IT seksjonen. Det er derfor ikke nødvendig å merke tapene. Dersom det allikevel er noe informasjon du ønsker lagt ved, kan du skrive dette på et ark som du legger ved tapene i den gule kofferten som skal benyttes ved transport. Du må aldri feste noe til tapekasettene med klistrelapper eller tilsvarende, da dette kan medføre at kassettene låser seg i tape-roboten på datasenteret. Dersom det er mannskapskifte ombord, er det som regel instrumentansvarlig som tar med kassettene og de skal leveres til IT Helpdesk i Nordnesgt. 50, 8 etg. Dersom de skal sendes, kan DHL benyttes.

8 Ref.id.: KS&SMS Instruks Side 8 av 9 TAPESTASJONENE Begge tapestasjonene har et betjeningspanel og et display som vist på figurene under.

9 Ref.id.: KS&SMS Instruks Side 9 av 9 KOMMANDOER Tapedataportalen skal gjøre det enkelt for brukerne å benytte tape til kopiering av data som skal til NMD. Det som skjer når man utfører en kopiering, er at det utføres datamaskinkommandoer i bakgrunnen. Dersom man i en spesiell situasjon skulle bli nødt til å utføre dette manuelt, evt. med en justering av opsjonene, så lar det seg gjøre ved å logge på tapedataportalen i et terminalvindu, og deretter utføre disse kommandoene: Load tape: sudo /usr/local/itdt/itdt -LP /var/log/itdt -L itdt.log -f /path/to/tape load Unload tape: sudo /usr/local/itdt/itdt -LP /var/log/itdt -L itdt.log -f /path/to/tape unload Mount tape: /usr/local/bin/ltfs -o "quiet,devname=/path/to/tape" /path/to/mountpoint/ Unmount tape: fusermount -u /path/to/mountpoint/...hvor /path/to/tape vanligvis vil være /dev/lin_tape/by-id/tapedrive_xxxxxxxxx (XX... = en eller annen ID) og /path/to/mountpoint/ vanligvis vil være /mnt/ltfsx (X = tapenummer) Tapen må loades før den kan mountes, og mountes før den kan brukes. Tilsvarende må den unmountes før den kan unloades