X-Git-Url: https://git.sesse.net/?a=blobdiff_plain;f=backup.sh;h=15546283ad878122be657428d62cf08adc61fb54;hb=748f1b3eb61a7b5a6d3808ed83e8b7915f7a3dee;hp=c5c9ef476dd33184974f341b230f74dabd7b428f;hpb=37553240139bd379052d8fd191f527145d360d65;p=backup.sh diff --git a/backup.sh b/backup.sh index c5c9ef4..1554628 100755 --- a/backup.sh +++ b/backup.sh @@ -1,37 +1,50 @@ #!/bin/bash -PATH=/local/bin:$PATH -export PATH -confdir=/home/backup/conf/ +#dirs +confdir=/home/backup/conf/ #configuration files +webdir=/home/backup/public_html #web-pages +storagedir=/backup #mountpoint of huge disc +### + +#exclude-pattern exclude=$confdir/exclude +[ ! -f $exclude ] && printf "tmp\ncore\n" > $exclude +### -echo -n "Starter... " -date +#syntax of remotestat: +#hostname:/directory/ +remotestatf=$confdir/remotestat +[ -f $remotestatf ] && remotestat=`cat $remotestatf` +### + +PATH=/local/bin:$PATH:/store/bin +export PATH -#Skriver litt til loggefilen +#start the logfile +date echo -echo "Slik ser regexpen som forteller hva vi ikke skal ta backup av:" +echo "Exclude pattern:" cat $exclude echo echo -#newgrp itk umask 027 -#Maskiner vi skal ta backup av +# The computers we want to back up unixcomputers=`cat $confdir/computers.unix` -ntcomputers=`cat $confdir/computers.nt` +#ntcomputers=`cat $confdir/computers.nt` +### #disse bør kunne varieres fra fs til fs? #disse bør flyttes ut i egen fil som kan editeres fra web kanskje? maksantallfulle=2 #hvor mange fulle vi tar vare på -#maksantalldaglige=30 #hvor mange daglige vi tar vare på dagermellomfulle=30 #antall dager før det er på tide med ny full +logw=40 ### #lager datovariabeler -DATE=`date "+%Y%m%d%H%M"` #passer for bruk med touch -DATEs=`date "+%Y-%m-%d %H:%M"` #passer for bruk med tar +DATE=`date "+%Y%m%d%H%M"` #format: touch +DATEs=`date "+%Y-%m-%d %H:%M"` #format: tar ### #selve backupen @@ -40,12 +53,12 @@ DATEs=`date "+%Y-%m-%d %H:%M"` #passer for bruk med tar backup() { - printf "%-50s %s\n" "$computer:$filesystem" "$backuplevel backup" + printf "%-${logw}s %s\n" "$computer:$filesystem" "$backuplevel backup" if [ "$backuplevel" = "daglig" ] || [ "$backuplevel" = "incremental" ] then - forrige=`cat ../.dato` - forrigecmd=--newer=\"$forrige\" + forrige=`cat ../.date` + forrigecmd="--newer=\"$forrige\"" else forrigecmd="" fi @@ -57,24 +70,24 @@ backup() | gzip" \ | dd of=$DATE.tmp 2>/dev/null` then - #Det gikk kanskje bra + #perhaps it did work mv $DATE.tmp $DATE.tgz - #lage listefil og oppdater datofil om det gikk greit + #make a filelist and update the datefile tar tvfz $DATE.tgz > $DATE.idx 2>&1 && - echo $DATEs > ../.dato && - touch -t $DATE ../.dato + echo $DATEs > ../.date && + touch -t $DATE ../.date - #lage sortert listefil + #make a sortet filelist grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx - #fikse rettigheter + #fix perm chmod 600 *tgz - chmod 644 *sdx *idx + chmod 644 *sdx *idx 2>/dev/null else - #Det gikk ikke bra - rm $DATE.tmp - echo "$backuplevel backup av $computer:$filesystem gikk ikke bra" + #it did not work + rm $DATE.tmp 2>/dev/null + echo "$backuplevel backup of $computer:$filesystem failed and deleted" fi } @@ -92,20 +105,20 @@ do | grep -v ^# \ | awk '{ if ( $(NF-1) != "0" ) print $2}' ` - #Renske opp i katalogen vår på klienten + #clean up our dir at this client ssh $computer "rm -rf /tmp/.backup ; mkdir -m 700 /tmp/.backup" - #Prøver å kopiere over $exclude til $computer + #try to copy $exclude to $computer scp $exclude $computer:/tmp/.backup/exclude || echo "Vi klarte ikke kopiere over exclude.txt til $computer :(" - #Prøver å kopiere over preeexec og postexec om de finnes + #try to copy preeexec and postexec if they exist [ -f $confdir/preexec.$computer ] && scp $confdir/preexec.$computer $computer:/tmp/.backup/preexec [ -f $confdir/postexec.$computer ] && scp $confdir/postexec.$computer $computer:/tmp/.backup/postexec - #Prøver å kjøre preexec om den finnes + #try to run preexec if it exist ssh $computer "[ -f /tmp/.backup/preexec ] && /bin/bash -x /tmp/.backup/preexec" @@ -114,71 +127,65 @@ do #lager en variant uten tegnet "/" eller $ (gjelder NT) sfilesystem=`echo $filesystem | tr '\/\$' '__'` + #lager det som trengs av kataloger + mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null + # - echo $filesystem > /backup/$computer/$sfilesystem.navn - chmod 644 /backup/$computer/$sfilesystem.navn + echo $filesystem > $storagedir/$computer/$sfilesystem.name + chmod 644 $storagedir/$computer/$sfilesystem.name - #standard backuplevel. full og daglig er eneste muligheter + #set default backuplevel backuplevel=daglig - #backuplevel=full - #lager det som trengs av kataloger - mkdir -m 755 -p /backup/$computer/$sfilesystem/{full,daglig} 2>/dev/null - - #Bør bare skje ved første gangs kjøring for dette fs - if [ ! -f /backup/$computer/$sfilesystem/.dato ] + if [ ! -f $storagedir/$computer/$sfilesystem/.date ] then + #take the first full backup of this filesystem on this computer backuplevel=full - echo $DATEs > /backup/$computer/$sfilesystem/.dato - echo "$computer:$filesystem datofil laget" - echo "$computer:$filesystem trenger full pga ingen fra foer" + echo $DATEs > $storagedir/$computer/$sfilesystem/.date fi #sjekker om det er på tide med en full if - [ -z `find /backup/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ] + [ -z `find $storagedir/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ] then - echo "$computer:$filesystem trenger full pga lenge siden sist" backuplevel=full fi #gå ned i rett katalog - cd /backup/$computer/$sfilesystem/$backuplevel + cd $storagedir/$computer/$sfilesystem/$backuplevel - #selve backupen + #perform the actual backup backup - #Sjekker om det er på tide å slette noen fulle backuper + #delete complete backups mf=$(($maksantallfulle+1)) - for full in `ls -1t /backup/$computer/$sfilesystem/full/*tgz | tail +$mf` + for full in `ls -1t $storagedir/$computer/$sfilesystem/full/*tgz | tail +$mf` do prefix=`echo $full|cut -d . -f 1` echo "$computer:$filesystem sletter full $prefix (for mange)" rm $prefix* done - #Sjekker om det er på tide å slette noen daglige backuper - eldste=`ls -t1 /backup/$computer/$sfilesystem/full/*tgz | tail -1` + #delete incremental backups older than the oldest complete backup + oldf=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz | tail -1` find \ - /backup/$computer/$sfilesystem/daglig \ - \! -newer $eldste \ - -printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \ + $storagedir/$computer/$sfilesystem/daglig \ + \! -newer $oldf \ -exec rm {} \; + #denne funker bare med gnu find + #-printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \ done - #Prøver å kjøre postexec om den finnes + #try to run postexec if it exist ssh $computer "[ -f /tmp/.backup/postexec ] && /bin/bash -x /tmp/.backup/postexec" done -#Finne de backupene som har tryna og -#lage en webside med de -/home/backup/finn_ufullstendige.sh - -#Lage søkbar indeks over listefilene -/home/backup/indekser.sh +#create report +/home/backup/report.sh $storagedir > /tmp/report.txt +[ ! -z $remotestat ] && scp /tmp/report.txt $remotestat +### -echo -n "Ferdig... " date