Verktøykasse workshop

Transkript

1 GigaCampus Verktøykasse workshop november 2006

2 Velkommen workshop #2 SSID Nova Kurs og konferanse 1. svalbard-vk / nav.unis.no (filter) 2. bjerkaker-vk / nav.hitos.no (revers dns) 3. harstad-vk / nav.hih.no (dns: fjern ull) 4. kalvskinnet-vk / nav.hist.no 5. sogndal-vk / nav.hisf.no (nav ikke cname) 6. instituttv-vk / nav.hiak.no (nav cname mangler) 7. drammen-vk / nav.hibu.no (filter) 8. stavanger-vk / nav.uis.no (nav noe annet) 9. kristiansand-vk / nav.hia.no (filter) 2 access-list 'xxx' permit tcp host host 'kasse' eq 80 access-list 'xxx' permit tcp host host 'kasse' eq 443 access-list 'xxx' permit tcp host host 'kasse' eq 22

3 På plass fra workshop #1 1. alta-vk / nav.hifm.no 2. narvik-vk / nynav.hin.no 3. levanger-vk / nynav.hint.no 4. alesund-vk / nav.hials.no 5. volda-vk / nynav.hivolda.no 6. lillehammer-vk / nav.hil.no 7. elverum-vk / nav.hihm.no 8. aho-vk / nav.aho.no 9. halden-vk / nav.hiof.no 10. teknobyen-vk / nav2.uninett.no 3

4 Agenda Dag1 - tirsdag Om verktøykassene og driftsopplegg, om NAV og de andre verktøyene Oppstart NAV workshop Lunch NAV workshop 4 Dag 2 onsdag Netflow / nfsen Konfigurasjonsarkiv / tftp Konfigurasjon av ntp, syslogg, radius m.m Lunch 1300 > NAV alarmsystem; Arnold

5 GigaCampus Samordnet nettbygging i sektoren 5 En sektor flere læresteder felles løsninger

6 GigaCampus 7 satsingsområder 6

7 UNINETT fagspesifikasjoner (UFS) 11 UFSer laget så langt Relevant her: Anbefalt konfigurasjon for svitsjer i campusnett (UFS105) Cisco kokebok (UFS109) HP kokebok (UFS111) Alcatel kokebok (UFS110) Anbefalt aksesslistemal (UFS106) 7

8 GigaCampus verktøykasse Giga Campus 1. NAV 2. Netflow (nfsen) 3. tftp 4. Loggserver 5. radiustjener 8 20 maskiner i maskiner i 2007

9 Hvorfor verktøykasse? Proaktiv drift Rapporter viktigste feil TYDELIG Fiks viktigste feil FØRST INFORMER almennheten Trafikkplanlegging 9 Without numbers you re nothing... Detekter flaskehalser tidlig Reaktiv etterforskning Abuse-saker hvor var maskinen når?

10 Drift av verktøykassene Standardisert hardware, 1U rackbaserte IBM servere som kjører debian. 250GB disk, 2GB RAM Intel Pentium 4 3,2GHz single core / 2,8GHz dual core Sentralt driftskonsept fra UNINETT basert på cfengine Gir automagisk pakkevedlikehold Gjør det lett å erstatte en havarert server Overvåkning av verktøykassene fra UNINETT driftsenter og UNINETT beredskapsvakt. Kostnader til anskaffelse og drift dekkes av GigaCampusmidler Vi inkluderer også USB-basert mobiltelefon Ericsson K310i 10

11 dok / epostliste / instrukser Brukerdokumentasjon Diskusjonsforum vk@uninett.no 11 UNINETT driftsinstruks for driftsenter/ beredskapsvakt Selvpålagt UNINETT sikkerhetsinstruks Sikring av sensitive data Ansvarlig for drift og sikkerhet Gjeldende lovgivning (ekomloven m.m.) Rutiner for tilgang til målepålene Hvem vil ha tilgang?

12 Om verktøyene... 12

13 Hva er NAV? Et overvåkningssystem... Åpen kildekode GPL Tilgjengelige pakker for Debian, SuSE, CentOS og freebsd Utviklet startet i 1999 på NTNU Videreutvikles nå av GigaCampus / UNINETT i samarbeid med NTNU og andre kodelinjer, postgres database (94 tabeller) 13 NAV wiki sourceforge Brukerforum nav-users@itea.ntnu.no Utviklerliste: nav-dev@itea.ntnu.no

14 14

15 NAVdb en modell av nettverket Seed data (Edit database tool) getdevicedata NAVdb 15 snmp Nettelektronikk seed data rom ip-addresse org kategory snmp community B21 : : hifm : GSW : xxx : yyy C11 : : hifm : SW : xxx : yyy D12 : : hifm : WLAN : xxx : yyy Manuell registering av nøkkelinformasjon (seed data)

16 Autodeteksjon av topologien Fysisk topologi ARP CAM CDP Pr vlan topologi trunker STP Maskinsporing Maskinsperring 16

17 Nettkart 17

18 Network explorer 18

19 IP device center 19 Oppdater nå - knapp

20 Trafikkstatistikk 20 Trafikk alle ruter- og svitsjeporter Ruter/svitsj cpu statistikk Minneforbruk Temperatur Top talkers

21 Rapporter 21

22 IP adresseromsforbruk 22

23 SMS Web status report Alarmsystemet Alert Engine Alert queue Alert history 23 Topology Info Event Engine Event queue Statusovervåker Snmp traps / epost Tjenesteovervåker Terskelovervåker Modulovervåker Snmp trap

24 Varslingsprofil pr NAV-bruker 24

25 Cisco syslog analysator 25

26 Netflowdata supplerer NAV Hvem snakker med hvem? Og hvor mye? Hvem snakker mest? Hvem snakker med mange? Hvilke porter brukes mest? etc, etc... NETFLOW EXPORT Verktøykassa med nfdump og nfsen 26 a-gw b-gw minpc IP: TCP: IP: TCP: 80

27 Konfigurasjonsarkiv for nettutstyr tftp-tjener med revisjonshistorie (RCS) Nattlig epost om endringer siste døgn Sentral kopi av konfigurasjonsarkiv hos UNINETT 27 Opplegg for vedlikehold av aksesslister Opplegg for oppgradering av programvare Vedlikeholdt web-side fra UNINETT om anbefalt programvareversjon for nettelektronikk

28 Autentiseringsløsning for nettutstyr Radiustjener med base over lokalt driftspersonell Brukerbasert pålogning på utstyret Kan se hvem som har gjort hva 28 Releer til uninett slik at vårt driftsenter kan bistå

29 Nye verktøy i 2007 Daily2 klientoveråkning? Scanorama portscanner? Et kjekt verktøy du har laget? eller som du bruker? 29 Med verktøykassa samler vi sektoren om felles gode løsninger for proaktiv IKT drift! Løsningene på verktøykassa er åpen kilde kode. Utvikling støttes av GigaCampus

30 Forberedelsespunkter 30

31 NAV 31 Design Konvensjoner

32 Typisk campusnett trunk (vlan tagging) mellom alle svitsjer og basestasjoner 32 management adressen til svitsjer og basestasjoner på dedikert nett

33 NAV-betegnelser: location, room, netbox location = område, f.eks. et campus room = telematikkrom/serverrom netbox = IP enhet som overvåkes Kan være av ulike kategorier Netbox categories GW: Ruter SW: Svitsj GSW: Ruter og svitsj i ett WLAN: Trådløs base SRV: Server OTHER: Annet 33 location room netbox Montenegro Sørhove Østhove Gamlebygget Stabburet Datarom F31 F32 hil-f31-sw.hil.no hil-oh-3-audefg-ap.hil.no hil-oh-5-tvf-ap.hil.no

34 Eksempler på navnekonvensjon Svitsjer Syntax: <område>-<telematikkromnavn>-sw NTNU: mtfs-272-sw HIL: hil-f31-sw 34 Basestasjoner: NTNU: wlan-<romnr>-<tilsoknende telematikkrom>-ap: wlan ap HIL: <organisasjon>-<område>-<etasje>-<beskr>-ap hil-oh-3-audefg-ap

35 Portnavn på svitsjer Room: 320 (main room) Wiring closet/room: 321 Office A fibre patch Spredenett (cabling) Jack Office B Jack

36 Network types Betydning for nettkart Kan autoavledes (i de fleste tilfeller) Kan angis i ruterport description link elink 36 lan lan core

37 NAV ruter description konvensjon Aksessnett description lan,$org,$usage[,$comment] description lan,hil,adm description lan,sopp,studby 37 Linknett link,$to_router[,$comment] description link,lillehammer-gw

38 NAV database - part 1: Netbox related tables 1 N NAVdb has a total of 89 tables... netboxsnmpoid snmpoid netboxinfo location room org parent org netboxcategory OID database mem netbox cat subcat 38 prefix type vendor service rrd_file module device product serviceproperty rrd_datasource deviceorder for servicemon RRD database Device management

39 NAV database - part 2: Topology 1 N to_netbox arp from router netbox swp_netbox netbox_vtpvlan from switch prefix to_netbox to_netbox cam 39 gwportprefix module to_swport\ gwport to_swport\ swport patch masterindex to_swport\ vlan swportvlan swportblocked cabling cabling system nettype org usage swportallowedvlan room

40 Programpunktene på NAV 40

41 P4) Konf av NAV del 1 Opprett organisations Opprett usage categories Opprett NAV brukere Gi rettigheter 41

42 P5) Endre ruter descriptions interface Vlan 20 description lan,hifm,adm exit interface Vlan20 description lan,hifm,fag exit... 42

43 P6) Konf av NAV del 2 Opprett locations Opprett rooms Bulk inn typer Legg inn netboxer 43 # NAV bulk import format (viktigste felt) # roomid:ip:orgid:catid:ro::rw: # Eks FE1: :hil:SW:passord::skrivepassord: etc tail -f /var/log/nav/getdevicedata.log

44 P8) Spark i gang cricket sudo u navcron /usr/lib/nav/makecricketconfig.pl Cricket stat skal komme inn etter 10 min... 44

45 Nettkart triks Sjekk metanav.ntnu.no NAVConfiguration TrafficMap 45

46 SMS Web status report Alarmsystemet Alert Engine Alert queue Alert history Event identifiers 1. deviceid 2. netboxid 3. eventtypeid 4. subid 5. state 46 Event Engine Topology Info Alertmsg.conf Event queue pping Trap parser servicemon modulemon thresholdmon Snmp trap

47 1 My alert profiles 2 My subscriptions Profile: On vacation Profile: On 24hr duty Active profile: At work Profile: At work. Time period: mon friday 8AM 4PM All up/down alerts => send SMS to 91897xxx All alerts except up/down => send to john@univ.no mon - friday 8AM 4PM mon - friday 4PM 8AM sat sunday 8AM 8AM Profile: At work. Time period: mon friday 4PM 8AM Routers up/down => send SMS to 91897xxx Critical and emergency alert => send to john@univ.no 47 4 Filters 3 Filter groups all routers : category IN ( GSW GW ) boxstate events : event type = boxstate trolla-gw : sysname starts with trolla-gw Routers up/down = ( all routers AND boxstate events ) trolla-gw Critical and emergency alert = critical + emergency Syntax Filter = <variable> <selection criteria> < value> Selection criteria: =, IN, regexp, starts with... Syntax: filter group = ( (<filter 1> <operator> <filter 2>) ) <operator> <filter n> Operators: + - AND

48 P10) Sjekk varsling Sett opp profil i Alert Profiles Alle boxdown og servicedown events Legg inn en svitsj fra vår lab i edit db> IP: Vi tar ned svitsjen, senere opp tail f /var/log/nav/eventengine.log samt sjekk NAV status side. Legg inn server voldsminde.uninett.no Legg inn http overv[kning av denne Vi tar ned tjenensten, senere opp tail f /var/log/nav/eventengine.log samt sjekk NAV status side. 48

49 NAV videre... 49

50 NAV 3.1 nyheter Arnold portdødaren L2trace lag 2 traceroute IP info center Nyheter i IP device center Portaktivitet Force refresh knapp Software versjon Event Engine trigger til eksterne script Autodiscovery contrib 50

51 NAV bugfiksversjon Styrket modulinnsamling Styrket støtte for ukjent utstyr hardware version changed problemet løst Nettkart sort last problem løst Fiks karantenetid for tjenesteovervåkeren 51

52 NAV 3.2 nyheter - januar Cricket 64 bits tellere Maintenance og messages bedre Mer fleksibel SMS-løsning Sortert RRD statistikk Overvåking av nye tjenester, bl.a. tacacs 52 NAV 3.3 nyheter - påske Mer modulær oppbyging av makecricketconfig Lettere å utvide til ny statistikkinnsamling Støtte for UPS-overvåking, samt annen miljøovervåking snmp trap mottak Mer, mer, mer

53 tftp-opplegget På verktøykassen på /tftpboot: cp tftpd.txt.dist tftpd.txt cp tftpd.pre.dist tftpd.pre pico tftpd.txt make hamar-gsw touch hamar-gsw-confg På ruteren /GSW: write network Oppgi verktøykassen

54 NTP # conf term clock timezone MET 1 clock summer-time MET-DST recurring last Sun Mar 2:00 last Sun Oct 2:00 ntp server (lokal ruter, her hamar-gsw) ntp server (sentral ntp-tjener, her ntp.uninett.no) # sh clock 54 Syslogg # conf term service timestamps debug datetime msec localtime show-timezone service timestamps log datetime msec localtime show-timezone logging trap debugging logging facility local7 logging (ip adresse til din verktøykasse) # kun på gsw logging source-interface loopback0

55 Radius På svitsj: aaa new-model aaa authentication login radius-login local group radius enable aaa accounting exec default start-stop group radius aaa accounting system default start-stop group radius radius-server host <ip-adresse> auth-port 1812 acct-port 1813 non-standard radius-server key <delt-hemmelighet> line vty 0 16 login authentication radius-login exit 55 I /etc/freeradius/clients.conf (eks fra hil): client /26 { secret = <delt-hemmelighet> shortname = hil-mngmt }