Videregående shellprogrammering i Linux

Transkript

1 Videregående shellprogrammering i Linux

2 Innhold Variabeldeklarasjoner Manipulering av tekststrenger / variable Tomme (null)strenger og defaultverdier Tabeller / arrays i shellprogrammer Shellfunksjoner og subshell Flere iterative mekanismer Flere mekanismer for seleksjon og gruppering Tidsbestemt kjøring av shellprogrammer Debugging og testing

3 Deklarasjon av variable Vanlige variable lagrer tegnstrenger Opprettes av shellet første gang de refereres til: navn=jan unset kan brukes til å fjerne innholdet i en variabel declare kan opprette variable med bestemte egenskaper: declare i tall declare r Pi=3.14 declare l navn declare u navn declare x navn heltallsvariabel read-only(!) variabel alltid lower-case alltid upper-case eksporteres til subshell

4 Innebygde operasjoner på tegnstrenger ${#Navn} Antall tegn ${Navn:3} Substreng fra 4. tegn ${Navn:2:3} Substreng fra 3. til 5. tegn ${Navn/en/an} Bytt første forekomst av en med an ${Navn//en/an} Bytt alle forekomster av en med an ${Navn//en/} Fjern alle forekomster av en ${Navn/#en/an} Bytt bare hvis en er i starten på streng ${Navn/%en/an} Bytt bare hvis en er i slutten av streng

5 Eksempel:.html >.htm #!/bin/bash for i in *.html do if [ f ${i/%html/htm} ] then echo "${i/%html/htm} already exists" else mv $i ${i/%html/htm} fi done

6 Fjerning av deler av en tegnstreng # Fjern korteste match fra starten av streng ## Fjern lengste match fra starten av streng % Fjern korteste match fra slutten på streng %% Fjern lengste match fra slutten på streng foo="this is a test" ${foo#t*is} is a test ${foo##t*is} ${foo%t*st} ${foo%%t*st} a test this is a

7 Ny utgave av.html >.htm #!/bin/bash for i in *.html do if [ f ${i%l} ] then echo "${i%l} already exists" else mv $i ${i%l} fi done

8 Tomme (null)strenger og defaultverdier Gir mulighet til å bruke en alternativ verdi hvis en variabel er tom (alternativt ikke-tom) Fire operatorer: : Bruk default verdi hvis streng er null := Bruk og sett default verdi hvis null :+ Bruk default verdi hvis streng ikke er null :? Skriv ut (feil)melding hvis streng er null

9 Eksempler fra kommandolinjen navn="" echo n ${navn: Jan}; echo $navn Jan echo ${navn:=jan}; echo $navn JanJan echo ${navn:+christian} Christian Navn="" echo ${navn:+christian} echo ${navn:?"navnet er ikke satt"} bash: navn: Navnet er ikke satt

10 Default verdier for parametre i shellprogrammer #!/bin/bash INFILE=${1: "infile"} OUTFILE=${2: "outfile"} sort $INFILE > $OUTFILE

11 Tabeller / arrays i shell Kan opprettes på flere måter: declare a array1 array2[3]=jan array3=( Jan Christian Robert Beathe ) array4=( [1]=Christian [0]=Jan [2]=Robert ) read a array5 array6=( $(ls) ) base_64=( {a..z} {A..Z} {0..9} ) Bruker {} for å hente ut innholdet i enkeltelementene i en tabell: echo ${array4[2]} echo ${#array4[2]}

12 Gjennomgang av hele tabeller #!/bin/bash declare a array1=( En To Tre Fire Fem ) echo ${array1[*]} # Hele tabellen skrives echo ${array1[@]} # ut på en linje echo ${array1[@]:0:5} echo ${#array1[@]} # Antall elementer # Formaterer utskrift, ett element per linje printf "%s\n" "${array1[@]}"

13 Gjennomgang av tabeller med løkker #!/bin/bash declare a array1=( En To Tre Fire Fem ) for a in ${array1[@]} do echo "$a (${#a} tegn)" done i=0 while [[ i lt ${#array1[@]} ]] do echo "array1[$i] = ${array1[$i]}" i=`expr $i + 1` done

14 Alle filer med file mode 755 i en katalog #!/bin/bash # Legger alle vanlige filer i en array temp=( $(find $1 maxdepth 1 type f) ) # Skriver ut navnet på filer med mode 755 for i in "${temp[@]}" do if ls l $i grep q "\ rwxr\ xr\ x" then # Fjerner path før selve filnavnet echo ${i##*/} fi done

15 Shellfunksjoner En funksjon i shell samler flere Linux kommandoer i en gruppe, slik at de senere kan brukes bare ved å referere til gruppens navn En shellfunksjon kjøres som en vanlig kommando i shellet, men starter ikke noen ny prosess Anvendelsesområder: Lage egne shortcuts for lengre, kompliserte kommandoer (se også alias under man builtins), slike legges ofte i oppstartfilen.bash_profile Gjenbruke kode i shellprogrammer / modularisere shellkode

16 Shellfunksjoner: Syntaks [function] funksjonsnavn () { kommando kommando... } Nøkkelordet function er valgfritt / kan sløyfes Funksjoner kan ta argumenter på kommando-linjen akkurat som shellprogrammer: Referanser til $1 $2 etc. inne i funksjonen er da lokale til funksjonen For å se koden til en funksjon: type funksjonsnavn

17 Eksempler: Shortcuts function lsext() { # Listing of files with given extension EXT=$1 ls l grep "^.*\.$EXT$" } function rpass() { # Create random strong password with # given lenght (default 12) LENGTH=${1: 12} cat /dev/urandom tr cd '[:graph:]' \ head c $LENGTH echo }

18 Eksempel: Gjenbruk av kode function stag () { echo "<$1>" } function etag () { echo "</$1>" } function tagtxt () { stag $1 echo $2 etag $1 } stag HTML stag HEAD tagtxt TITLE "Jan sin\ hjemmeside" etag HEAD stag BODY tagtxt H1 "Get lost" tagtxt P "The internet\ is full, go away" etag BODY etag HTML

19 Subshell Alle eksterne kommandoer som startes fra shellet genererer en ny prosess. Shellet har en del kommandoer som ikke starter en ny prosess, men som er innebygget i shellet og ligger resident i RAM for raskere utføring, se man builtins. Hvis bruker starter et shellprogram fra kommandolinjen, vil dette kjøre i en ny shellprosess et subshell og ikke i det opprinnelige login-shellet (sjekk $BASH_SUBSHELL) Bruk evt. source for å kjøre et program i opprinnelig shell En liste av kommandoer mellom paranteser vil kjøre i et subshell: ( command1; command2; command3;... ) Merk at shellfunksjoner ikke kjører i subshell

20 Overføring av variabelverdier til subshell Vanlige shellvariable eksisterer bare i det shellet der de er opprettet / deklarert Variable som opprettes i et subshell er ikke synlige for forelderprosessen/-shellet Variable fra foreldershellet kan eksporteres til subshell, som en kopi med samme verdi: export variabelnavn declare x variabelnavn Endringer av eksportert variabel gjort i subshellet vil ikke være synlige i foreldershell kjør i stedet shellprogram med source hvis dette er ønskelig

21 Overføring av shellfunksjoner til subshell Bourne Again Shell støtter også overføring av kode i shellfunksjoner til subshell: export f funksjonsnavn Det opprettes en shellvariabel som inneholder hele teksten som er koden til funksjonen Denne variabelen eksporteres slik at den blir synlig for subshellene Eksporterte funksjoner kan sees i listen over alle shellvariable som eksporteres: env eller printenv

22 Eksempel: Shellfunksjoner og subshell add () { echo `expr $1 + $2`; return 0; } export f add cat test_add #!/bin/bash add 4 6 exit 0./test_add 10

23 Flere iterative strukturer Har sett for og while i Bourne shell Andre mekanismer for iterasjon (og rekursjon): until samme syntaks som while, men løkken går så lenge det som testes på er false xargs Utfører en og samme kommando på f.eks. alle filene i en liste med filnavn find Kan utføre kommandoer på alle filer i et helt katalogtre

24 xargs Leser en liste med items (filnavn) fra standard input Utfører en gitt kommando en gang med hvert «item» som argument til kommandoen Eksempel: Lage kopier av alle html-filer i stående katalog: ls *.html xargs I{} cp {} old{} Se man xargs for mer info.

25 find find [opsjoner] katalog [uttrykk] find går gjennom alle filene i hele katalogtreet med rot i katalog uttrykk er en beskrivelse av hva som evt. skal gjøres med filene find har svært mange opsjoner som kan brukes til å endre funksjonalitet og f.eks. bestemme hvilke filer som skal behandles Eksempel: Sette tilgangskode på alle html-filer i hele katalogtreet med rot i stående katalog: find. name \*.html exec chmod 755 {} \;

26 find + xargs = sant Kan lage svært effektive (vær forsiktig...) kommandoer ved å la xargs jobbe på fillistene som genereres av find Fjerne alle filer under /tmp som heter core: find /tmp name core type f print \ xargs /bin/rm f Finne navnet på alle Java-filer i et helt katalogtre som ikke bruker Javas standard I/O-bibliotek: find java name \*.java print xargs\ grep vl "import java\.io\.\*;"

27 Mekanismer for seleksjon og gruppering ; Skilletegn mellom kommandoer på samme linje {} Gruppering av kommandoer () Gruppering av kommandoer i et subshell `` Kommandosubstitusjon && Utfør neste kommando bare hvis forrige OK Utfør neste kommando bare hvis forrige ikke OK && og er egentlig bare «forkortede if-tester»

28 && og : Betinget eksekvering grep q Levon filnavn && echo ": )" if grep q Levon filnavn then echo ": )" fi grep q Levon filnavn echo ": (" if!grep q Levon filnavn then echo ": (" fi

29 Komprimering av kode med && og if [ f $filnavn ] then rm filnavn else echo "No regular file $filnavn found" exit 1 fi [ f $filnavn ] && rm $filnavn { echo "No\ regular file $filnavn found"; exit 1; }

30 Tidsbestemt kjøring av kommandoer og shellprogrammer sleep: Vent en bestemt tid før neste kommando { sleep 2h; sort BIGfile > SORTEDfile } & at: Start utføring av shellscript på et bestemt tidspunkt at 4:30 am tomorrow < shellprogram at now + 3 days < shellprogram at 11:00am Monday < shellprogram at 5:00pm Feb < shellprogram atrm [jobnr] fjerne utførelse fra «ventekøen»

31 Et shellprogram som kjører seg selv en gang i uken #!/bin/bash if who grep q janh then echo "Har ikke du fått sparken ennå?" fi cat $0 at now + 1 week

32 Debugging og testing av shellprogrammer Shellprogrammering krever prøving og feiling Feilmeldinger fra shell er sparsomme og kryptiske Test hver ny linje interaktivt Bruk f.eks. emacs til testing av linjene etterhvert som de skrives Debuggingsopsjoner (se også man bash): bash v program Skriver ut kodelinjene etterhvert som de utføres bash x program Skriver ut kommandoer som utføres og verdien av variable som brukes