X-Git-Url: https://git.sesse.net/?a=blobdiff_plain;f=backup.sh;h=f464e88b70f3ac133f3cb37c0a52e678b86321bf;hb=c10c07017a01f8e451f70865b6833e1ddb17ee85;hp=35448a418fbee9b986db612885d49e8bdb65be4b;hpb=4c3e0306c1bd8d0e35f1803ddb310e0dc00a74e2;p=backup.sh diff --git a/backup.sh b/backup.sh index 35448a4..f464e88 100755 --- a/backup.sh +++ b/backup.sh @@ -1,27 +1,31 @@ #!/bin/bash +#dirs +confdir=/home/backup/conf/ #configuration files +webdir=/home/backup/public_html #web-pages +storagedir=/backup #mountpoint of huge disc +### + +exclude=$confdir/exclude +[ ! -f $exclude ] && printf "tmp\ncore\n" > $exclude + PATH=/local/bin:$PATH export PATH -exclude=/home/backup/exclude.txt -echo -n "Starter... " date #Skriver litt til loggefilen echo -echo "Slik ser regexpen som forteller hva vi ikke skal ta backup av:" +echo "Exclude pattern:" cat $exclude echo echo -#newgrp itk umask 027 -#liste over maskinene vi tar backup av. (space mellom maskinnavn) -computers="cirkus backup josef" -#for debug -#computers="josef" -### +#Maskiner vi skal ta backup av +unixcomputers=`cat $confdir/computers.unix` +ntcomputers=`cat $confdir/computers.nt` #disse bør kunne varieres fra fs til fs? #disse bør flyttes ut i egen fil som kan editeres fra web kanskje? @@ -31,8 +35,8 @@ dagermellomfulle=30 #antall dager f ### #lager datovariabeler -DATE=`date "+%Y%m%d%H%M"` #passer for bruk med touch -DATEs=`date "+%Y-%m-%d %H:%M"` #passer for bruk med tar +DATE=`date "+%Y%m%d%H%M"` #format: touch +DATEs=`date "+%Y-%m-%d %H:%M"` #format: tar ### #selve backupen @@ -41,35 +45,32 @@ DATEs=`date "+%Y-%m-%d %H:%M"` #passer for bruk med tar backup() { - echo "$computer:$filesystem tar $backuplevel backup" + printf "%-50s %s\n" "$computer:$filesystem" "$backuplevel backup" - if [ "$backuplevel" = "daglig" ] + if [ "$backuplevel" = "daglig" ] || [ "$backuplevel" = "incremental" ] then - forrige=`cat ../.dato` + forrige=`cat ../.date` forrigecmd=--newer=\"$forrige\" else forrigecmd="" fi - #Prøver å kopiere over $exclude til $computer - scp $exclude $computer:/tmp/exclude.txt || - echo "Vi klarte ikke kopiere over exclude.txt til $computer :(" - + #Prøver å ta backup med tar if `ssh $computer "cd $filesystem ;\ tar cfl - . $forrigecmd \ - --exclude-from=/tmp/exclude.txt \ + --exclude-from=/tmp/.backup/exclude \ | gzip" \ | dd of=$DATE.tmp 2>/dev/null` then #Det gikk kanskje bra mv $DATE.tmp $DATE.tgz - #lage listefil - tar tvfz $DATE.tgz > $DATE.idx 2>&1 - grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx + #lage listefil og oppdater datofil om det gikk greit + tar tvfz $DATE.tgz > $DATE.idx 2>&1 && + echo $DATEs > ../.date && + touch -t $DATE ../.date - #oppdatere datofil - echo $DATEs > ../.dato - touch -t $DATE ../.dato + #lage sortert listefil + grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx #fikse rettigheter chmod 600 *tgz @@ -80,9 +81,11 @@ backup() rm $DATE.tmp echo "$backuplevel backup av $computer:$filesystem gikk ikke bra" fi + } -for computer in $computers +#Løper gjennom listen av unixmaskiner som vi skal ta backup av +for computer in $unixcomputers do #tømmer variabelen for sikkerhets skyld @@ -94,48 +97,65 @@ do | grep -v ^# \ | awk '{ if ( $(NF-1) != "0" ) print $2}' ` + #Renske opp i katalogen vår på klienten + ssh $computer "rm -rf /tmp/.backup ; mkdir -m 700 /tmp/.backup" + + #Prøver å kopiere over $exclude til $computer + scp $exclude $computer:/tmp/.backup/exclude || + echo "Vi klarte ikke kopiere over exclude.txt til $computer :(" + + #Prøver å kopiere over preeexec og postexec om de finnes + [ -f $confdir/preexec.$computer ] && + scp $confdir/preexec.$computer $computer:/tmp/.backup/preexec + [ -f $confdir/postexec.$computer ] && + scp $confdir/postexec.$computer $computer:/tmp/.backup/postexec + + #Prøver å kjøre preexec om den finnes + ssh $computer "[ -f /tmp/.backup/preexec ] && + /bin/bash -x /tmp/.backup/preexec" + for filesystem in $filesystems do #lager en variant uten tegnet "/" eller $ (gjelder NT) sfilesystem=`echo $filesystem | tr '\/\$' '__'` # - echo $filesystem > /backup/$computer/$sfilesystem.navn - chmod 644 /backup/$computer/$sfilesystem.navn + echo $filesystem > $storagedir/$computer/$sfilesystem.name + chmod 644 $storagedir/$computer/$sfilesystem.name #standard backuplevel. full og daglig er eneste muligheter backuplevel=daglig #backuplevel=full #lager det som trengs av kataloger - mkdir -m 755 -p /backup/$computer/$sfilesystem/{full,daglig} 2>/dev/null + mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null #Bør bare skje ved første gangs kjøring for dette fs - if [ ! -f /backup/$computer/$sfilesystem/.dato ] + if [ ! -f $storagedir/$computer/$sfilesystem/.date ] then backuplevel=full - echo $DATEs > /backup/$computer/$sfilesystem/.dato + echo $DATEs > $storagedir/$computer/$sfilesystem/.date echo "$computer:$filesystem datofil laget" echo "$computer:$filesystem trenger full pga ingen fra foer" fi #sjekker om det er på tide med en full if - [ -z `find /backup/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ] + [ -z `find $storagedir/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ] then echo "$computer:$filesystem trenger full pga lenge siden sist" backuplevel=full fi #gå ned i rett katalog - cd /backup/$computer/$sfilesystem/$backuplevel + cd $storagedir/$computer/$sfilesystem/$backuplevel #selve backupen backup #Sjekker om det er på tide å slette noen fulle backuper mf=$(($maksantallfulle+1)) - for full in `ls -1t /backup/$computer/$sfilesystem/full/*tgz | tail +$mf` + for full in `ls -1t $storagedir/$computer/$sfilesystem/full/*tgz | tail +$mf` do prefix=`echo $full|cut -d . -f 1` echo "$computer:$filesystem sletter full $prefix (for mange)" @@ -143,23 +163,26 @@ do done #Sjekker om det er på tide å slette noen daglige backuper - eldste=`ls -t1 /backup/$computer/$sfilesystem/full/*tgz | tail -1` + eldste=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz | tail -1` find \ - /backup/$computer/$sfilesystem/daglig \ + $storagedir/$computer/$sfilesystem/daglig \ \! -newer $eldste \ -printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \ -exec rm {} \; done + #Prøver å kjøre postexec om den finnes + ssh $computer "[ -f /tmp/.backup/postexec ] && + /bin/bash -x /tmp/.backup/postexec" + done #Finne de backupene som har tryna og #lage en webside med de -/home/backup/finn_ufullstendige.sh +/home/backup/finn_ufullstendige.sh $storagedir $webdir/ufullstendige.html #Lage søkbar indeks over listefilene -/home/backup/indekser.sh +/home/backup/indekser.sh $storagedir -echo -n "Ferdig... " date