X-Git-Url: https://git.sesse.net/?a=blobdiff_plain;f=backup.sh;h=d4ef98b57947a9315ac32490062c489bc9cd5b83;hb=e2156b8d8f4bbda9d46050bfe7363ff84d8ff3ee;hp=749a7a535d6abf3dc18dcaed59c38cf801729686;hpb=429dc49d50f2debf2740776e0ad2473b5bef971d;p=backup.sh diff --git a/backup.sh b/backup.sh index 749a7a5..d4ef98b 100755 --- a/backup.sh +++ b/backup.sh @@ -2,20 +2,25 @@ #dirs confdir=/home/backup/conf/ #configuration files -webdir=/home/backup/public_html #web-pages storagedir=/backup #mountpoint of huge disc ### +#exclude-pattern exclude=$confdir/exclude [ ! -f $exclude ] && printf "tmp\ncore\n" > $exclude +### + +#syntax of remotestat: +#hostname:/directory/ +remotestatf=$confdir/remotestat +[ -f $remotestatf ] && remotestat=`cat $remotestatf` +### -PATH=/local/bin:$PATH +PATH=/local/bin:$PATH:/store/bin export PATH -echo -n "Start... " +#start the logfile date - -#Skriver litt til loggefilen echo echo "Exclude pattern:" cat $exclude @@ -24,15 +29,14 @@ echo umask 027 -#Maskiner vi skal ta backup av +# The computers we want to back up unixcomputers=`cat $confdir/computers.unix` -ntcomputers=`cat $confdir/computers.nt` +### #disse bør kunne varieres fra fs til fs? -#disse bør flyttes ut i egen fil som kan editeres fra web kanskje? maksantallfulle=2 #hvor mange fulle vi tar vare på -#maksantalldaglige=30 #hvor mange daglige vi tar vare på dagermellomfulle=30 #antall dager før det er på tide med ny full +logw=40 ### #lager datovariabeler @@ -46,41 +50,42 @@ DATEs=`date "+%Y-%m-%d %H:%M"` #format: tar backup() { - printf "%-50s %s\n" "$computer:$filesystem" "$backuplevel backup" + printf "%-${logw}s %s\n" "$computer:$filesystem" "$backuplevel backup" if [ "$backuplevel" = "daglig" ] || [ "$backuplevel" = "incremental" ] then forrige=`cat ../.date` - forrigecmd=--newer=\"$forrige\" + forrigecmd="--newer=\"$forrige\"" else forrigecmd="" fi - #Prøver å ta backup med tar + #We try to run tar on the remote computer if `ssh $computer "cd $filesystem ;\ tar cfl - . $forrigecmd \ --exclude-from=/tmp/.backup/exclude \ | gzip" \ | dd of=$DATE.tmp 2>/dev/null` then - #Det gikk kanskje bra + #perhaps it did work mv $DATE.tmp $DATE.tgz - #lage listefil og oppdater datofil om det gikk greit + #make a filelist. + #update the datefile if the filelist is ok. tar tvfz $DATE.tgz > $DATE.idx 2>&1 && echo $DATEs > ../.date && touch -t $DATE ../.date - #lage sortert listefil + #make a sortet filelist grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx - #fikse rettigheter - chmod 600 *tgz - chmod 644 *sdx *idx + #fix perm + chmod 600 *tgz #only for us + chmod 644 *sdx *idx 2>/dev/null #everyone can read else - #Det gikk ikke bra - rm $DATE.tmp - echo "$backuplevel backup av $computer:$filesystem gikk ikke bra" + #it did not work + rm $DATE.tmp 2>/dev/null + echo "$backuplevel backup of $computer:$filesystem failed and deleted" fi } @@ -98,20 +103,20 @@ do | grep -v ^# \ | awk '{ if ( $(NF-1) != "0" ) print $2}' ` - #Renske opp i katalogen vår på klienten + #clean up our dir at this client ssh $computer "rm -rf /tmp/.backup ; mkdir -m 700 /tmp/.backup" - #Prøver å kopiere over $exclude til $computer + #try to copy $exclude to $computer scp $exclude $computer:/tmp/.backup/exclude || echo "Vi klarte ikke kopiere over exclude.txt til $computer :(" - #Prøver å kopiere over preeexec og postexec om de finnes + #try to copy preeexec and postexec if they exist [ -f $confdir/preexec.$computer ] && scp $confdir/preexec.$computer $computer:/tmp/.backup/preexec [ -f $confdir/postexec.$computer ] && scp $confdir/postexec.$computer $computer:/tmp/.backup/postexec - #Prøver å kjøre preexec om den finnes + #try to run preexec if it exist ssh $computer "[ -f /tmp/.backup/preexec ] && /bin/bash -x /tmp/.backup/preexec" @@ -120,41 +125,37 @@ do #lager en variant uten tegnet "/" eller $ (gjelder NT) sfilesystem=`echo $filesystem | tr '\/\$' '__'` + #lager det som trengs av kataloger + mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null + # - echo $filesystem > $storagedir/$computer/$sfilesystem.name - chmod 644 $storagedir/$computer/$sfilesystem.name + echo $filesystem > ${storagedir}/${computer}/.${sfilesystem}.name + chmod 644 ${storagedir}/${computer}/.${sfilesystem}.name - #standard backuplevel. full og daglig er eneste muligheter + #set default backuplevel backuplevel=daglig - #backuplevel=full - - #lager det som trengs av kataloger - mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null - #Bør bare skje ved første gangs kjøring for dette fs if [ ! -f $storagedir/$computer/$sfilesystem/.date ] then + #take the first full backup of this filesystem on this computer backuplevel=full echo $DATEs > $storagedir/$computer/$sfilesystem/.date - echo "$computer:$filesystem datofil laget" - echo "$computer:$filesystem trenger full pga ingen fra foer" fi #sjekker om det er på tide med en full if [ -z `find $storagedir/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ] then - echo "$computer:$filesystem trenger full pga lenge siden sist" backuplevel=full fi #gå ned i rett katalog cd $storagedir/$computer/$sfilesystem/$backuplevel - #selve backupen + #perform the actual backup backup - #Sjekker om det er på tide å slette noen fulle backuper + #delete complete backups mf=$(($maksantallfulle+1)) for full in `ls -1t $storagedir/$computer/$sfilesystem/full/*tgz | tail +$mf` do @@ -163,28 +164,27 @@ do rm $prefix* done - #Sjekker om det er på tide å slette noen daglige backuper - eldste=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz | tail -1` + #delete incremental backups older than the oldest complete backup + oldf=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz | tail -1` find \ $storagedir/$computer/$sfilesystem/daglig \ - \! -newer $eldste \ - -printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \ + -type f \ + \! -newer $oldf \ -exec rm {} \; + #denne funker bare med gnu find + #-printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \ done - #Prøver å kjøre postexec om den finnes + #try to run postexec if it exist ssh $computer "[ -f /tmp/.backup/postexec ] && /bin/bash -x /tmp/.backup/postexec" done -#Finne de backupene som har tryna og -#lage en webside med de -/home/backup/finn_ufullstendige.sh $storagedir $webdir/ufullstendige.html - -#Lage søkbar indeks over listefilene -/home/backup/indekser.sh $storagedir +#create report +/home/backup/report.sh $storagedir > /tmp/report.txt +[ ! -z $remotestat ] && scp /tmp/report.txt $remotestat +### -echo -n "Ferdig... " date