#!/bin/bash
-PATH=/local/bin:$PATH
+#dirs
+confdir=/home/backup/conf/ #configuration files
+webdir=/home/backup/public_html #web-pages
+storagedir=/backup #mountpoint of huge disc
+###
+
+#exclude-pattern
+exclude=$confdir/exclude
+[ ! -f $exclude ] && printf "tmp\ncore\n" > $exclude
+###
+
+#syntax of remotestat:
+#hostname:/directory/ or
+#hostname:/directory/file
+remotestatf=$confdir/remotestat
+[ -f $remotestatf ] && remotestat=`cat $remotestatf`
+###
+
+PATH=/local/bin:$PATH:/store/bin
export PATH
-echo -n "Starter... "
+#start the logfile
date
+echo
+echo "Exclude pattern:"
+cat $exclude
+echo
+echo
-#newgrp itk
umask 027
-#liste over maskinene vi tar backup av. (space mellom maskinnavn)
-computers="cirkus backup josef"
-#for debug
-#computers="josef"
+# The computers we want to back up
+unixcomputers=`cat $confdir/computers.unix`
+#ntcomputers=`cat $confdir/computers.nt`
###
-#disse bør kunne varieres fra fs til fs
+#disse bør kunne varieres fra fs til fs?
+#disse bør flyttes ut i egen fil som kan editeres fra web kanskje?
maksantallfulle=2 #hvor mange fulle vi tar vare på
-#maksantalldaglige=30 #hvor mange daglige vi tar vare på
dagermellomfulle=30 #antall dager før det er på tide med ny full
+logw=40
###
#lager datovariabeler
-DATE=`date "+%Y%m%d%H%M"` #passer for bruk med touch
-DATEs=`date "+%Y-%m-%d %H:%M"` #passer for bruk med tar
+DATE=`date "+%Y%m%d%H%M"` #format: touch
+DATEs=`date "+%Y-%m-%d %H:%M"` #format: tar
###
#selve backupen
backup()
{
- if [ "$backuplevel" = "daglig" ]
+ printf "%-${logw}s %s\n" "$computer:$filesystem" "$backuplevel backup"
+
+ if [ "$backuplevel" = "daglig" ] || [ "$backuplevel" = "incremental" ]
then
- forrige=`cat ../.dato`
+ forrige=`cat ../.date`
forrigecmd=--newer=\"$forrige\"
else
forrigecmd=""
fi
+ #Prøver å ta backup med tar
if `ssh $computer "cd $filesystem ;\
tar cfl - . $forrigecmd \
- --exclude=\"tmp\" \
- --exclude=\".netscape/cache\" \
- --exclude=\"core\" \
- --exclude=\"*.rar\" \
- --exclude=\"*.mp3\" \
- --exclude=\"*.MP3\" \
- --exclude=\"*.iso\" \
- --exclude=\"*.rar\" \
+ --exclude-from=/tmp/.backup/exclude \
| gzip" \
| dd of=$DATE.tmp 2>/dev/null`
then
- #Det gikk kanskje bra
+ #perhaps it did work
mv $DATE.tmp $DATE.tgz
- #lage listefil
- tar tvfz $DATE.tgz > $DATE.idx 2>&1
- grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx
+ #make a filelist and update the datefile
+ tar tvfz $DATE.tgz > $DATE.idx 2>&1 &&
+ echo $DATEs > ../.date &&
+ touch -t $DATE ../.date
- #oppdatere datofil
- echo $DATEs > ../.dato
- touch -t $DATE ../.dato
+ #make a sortet filelist
+ grep -v ^d $DATE.idx | sort -n -r +2 > $DATE.sdx
- #fikse rettigheter
+ #fix perm
chmod 600 *tgz
chmod 644 *sdx *idx
else
- #Det gikk ikke bra
+ #it did not work
rm $DATE.tmp
- echo "$backuplevel backup av $computer:$filesystem gikk ikke bra"
+ echo "$backuplevel backup of $computer:$filesystem failed"
fi
+
}
-for computer in $computers
+#Løper gjennom listen av unixmaskiner som vi skal ta backup av
+for computer in $unixcomputers
do
#tømmer variabelen for sikkerhets skyld
| grep -v ^# \
| awk '{ if ( $(NF-1) != "0" ) print $2}' `
- #for debugging
- #filesystems="/"
+ #clean up our dir at this client
+ ssh $computer "rm -rf /tmp/.backup ; mkdir -m 700 /tmp/.backup"
+
+ #try to copy $exclude to $computer
+ scp $exclude $computer:/tmp/.backup/exclude ||
+ echo "Vi klarte ikke kopiere over exclude.txt til $computer :("
+
+ #try to copy preeexec and postexec if they exist
+ [ -f $confdir/preexec.$computer ] &&
+ scp $confdir/preexec.$computer $computer:/tmp/.backup/preexec
+ [ -f $confdir/postexec.$computer ] &&
+ scp $confdir/postexec.$computer $computer:/tmp/.backup/postexec
+
+ #try to run preexec if it exist
+ ssh $computer "[ -f /tmp/.backup/preexec ] &&
+ /bin/bash -x /tmp/.backup/preexec"
for filesystem in $filesystems
do
- #lager en variant uten tegnet "/"
- sfilesystem=`echo $filesystem | tr '/' '_'`
+ #lager en variant uten tegnet "/" eller $ (gjelder NT)
+ sfilesystem=`echo $filesystem | tr '\/\$' '__'`
+
+ #lager det som trengs av kataloger
+ mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null
#
- echo $filesystem > /backup/$computer/$sfilesystem.navn
- chmod 644 /backup/$computer/$sfilesystem.navn
+ echo $filesystem > $storagedir/$computer/$sfilesystem.name
+ chmod 644 $storagedir/$computer/$sfilesystem.name
- #standard backuplevel. full og daglig er eneste muligheter
+ #set default backuplevel
backuplevel=daglig
- #backuplevel=full
- #lager det som trengs av kataloger
- mkdir -m 755 -p /backup/$computer/$sfilesystem/{full,daglig} 2>/dev/null
-
- #Bør bare skje ved første gangs kjøring for dette fs
- if [ ! -f /backup/$computer/$sfilesystem/.dato ]
+ if [ ! -f $storagedir/$computer/$sfilesystem/.date ]
then
+ #take the first full backup of this filesystem on this computer
backuplevel=full
- echo $DATEs > /backup/$computer/$sfilesystem/.dato
- echo "$computer:$filesystem datofil laget"
- echo "$computer:$filesystem trenger full pga ingen fra foer"
+ echo $DATEs > $storagedir/$computer/$sfilesystem/.date
fi
#sjekker om det er på tide med en full
if
- [ -z `find /backup/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ]
+ [ -z `find $storagedir/$computer/$sfilesystem/full/ -name \*tgz -mtime -$dagermellomfulle` ]
then
- echo "$computer:$filesystem trenger full pga lenge siden sist"
backuplevel=full
fi
#gå ned i rett katalog
- cd /backup/$computer/$sfilesystem/$backuplevel
+ cd $storagedir/$computer/$sfilesystem/$backuplevel
- #selve backupen
+ #perform the actual backup
backup
- echo "$computer:$filesystem sletter fulle slik at vi ikke har mer enn 2"
+ #delete complete backups
mf=$(($maksantallfulle+1))
- for full in `ls -1t /backup/$computer/$sfilesystem/full/*tgz | tail +$mf`
+ for full in `ls -1t $storagedir/$computer/$sfilesystem/full/*tgz | tail +$mf`
do
prefix=`echo $full|cut -d . -f 1`
- echo "$computer:$filesystem sletter $prefix"
+ echo "$computer:$filesystem sletter full $prefix (for mange)"
rm $prefix*
done
- echo "$computer:$filesystem ferdig med slett av fulle"
- echo "$computer:$filesystem slette daglige eldre enn eldste fulle"
- eldste=`ls -t1 /backup/$computer/$sfilesystem/full/*tgz | tail -1`
+ #delete incremental backups older than the oldest complete backup
+ oldf=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz | tail -1`
find \
- /backup/$computer/$sfilesystem/daglig \
- \! -newer $eldste \
- -print \
+ $storagedir/$computer/$sfilesystem/daglig \
+ \! -newer $oldf \
-exec rm {} \;
- echo "$computer:$filesystem ferdig med slett av gamle daglige"
+ #denne funker bare med gnu find
+ #-printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \
done
+ #try to run postexec if it exist
+ ssh $computer "[ -f /tmp/.backup/postexec ] &&
+ /bin/bash -x /tmp/.backup/postexec"
+
done
-#Finne de backupene som har tryna og
-#lage en webside med de
-/home/backup/finn_ufullstendige.sh
+#create report
+/home/backup/report.sh $storagedir /tmp/report.txt
+[ ! -z $remotestat ] && scp /tmp/report.txt $remotestat
+
+#create index
+/home/backup/indekser.sh $storagedir
-echo -n "Ferdig... "
date