]> git.sesse.net Git - backup.sh/blob - backup-nonpriv.sh
Take backup at lowest possible (non-idle) CPU priority, and idle I/O priority.
[backup.sh] / backup-nonpriv.sh
1 #!/bin/sh
2
3 # Modifisert utgave av backup.sh som tar backup også på maskiner der kolje ikke har root.
4
5 #dirs
6 confdir=/home/backup/conf/           #configuration files
7 storagedir=/backup                   #mountpoint of huge disc
8 ###
9
10 #exclude-pattern
11 exclude=$confdir/exclude
12 [ ! -f $exclude ] && printf "tmp\ncore\n" > $exclude
13 ###
14
15 #syntax of remotestat:
16 #hostname:/directory/
17 remotestatf=$confdir/remotestat
18 [ -f $remotestatf ] && remotestat=`cat $remotestatf`
19 ###
20
21 PATH=/local/bin:$PATH:/store/bin
22 export PATH
23
24 #start the logfile
25 date
26 echo
27 echo "Exclude pattern:"
28 cat $exclude
29 echo
30 echo
31
32 umask 027
33
34 # The computers we want to back up
35 unixcomputers=`cat $confdir/computers.unix.nonpriv | grep -v ^# | grep -v ^$`
36 ###
37
38 #disse bør kunne varieres fra fs til fs?
39 maksantallfulle=3          #hvor mange fulle vi tar vare på (kan overstyres med conf)
40 dagermellomfulle=30        #antall dager før det er på tide med ny full
41 logw=40
42 ###
43
44 #lager datovariabeler
45 DATE=`date "+%Y%m%d%H%M"`            #format: touch
46 DATEs=`date "+%Y-%m-%d %H:%M"`       #format: tar
47 ###
48
49 #selve backupen
50 # krever at noen variabler er satt
51 # krever at vi er i rett katalog
52 backup()
53 {
54
55  printf "%-${logw}s %s\n" "$computer:$filesystem" "$backuplevel backup"
56
57  if [ "$backuplevel" = "daglig" ] || [ "$backuplevel" = "incremental" ]
58  then
59   lastd=`cat ../.date`
60   lastcmd="\"$lastd\""
61  else
62   lastcmd=""
63  fi
64
65  #expand the exclude-path for use with tar
66  exf=`ssh $username@$computer "ls ~/.backup/exclude"`
67
68  #We try to run tar on the remote computer
69  #    C is instead of 'cd $filesystem'
70  #    - is 'this directory'
71  #    l is 'stay in local filesystem
72  if `ssh $username@$computer "sudo /usr/local/sbin/output-encrypted-backup $filesystem $lastcmd" | dd of=$DATE.tmp 2>/dev/null` 
73  then
74   # perhaps it did work
75   mv $DATE.tmp $DATE.tgz.gpg
76
77   # FIXME: ignore the file lists for now
78
79   # fix perm
80   chmod 600 *tgz.gpg                  #only for us
81 #  chmod 644 *sdx *idx 2>/dev/null     #everyone can read
82
83    echo $DATEs > ../.date            &&
84    touch -t $DATE ../.date
85  else
86   #it did not work
87   rm $DATE.tmp 2>/dev/null
88   echo "$backuplevel backup of $computer:$filesystem failed and deleted"
89  fi
90
91 }
92
93 #Løper gjennom listen av unixmaskiner som vi skal ta backup av
94 for computer in $unixcomputers
95 do
96  
97  # find the user to do the non-root parts as 
98  if [ -f $confdir/username.$computer ] ; then
99    username=`cat $confdir/username.$computer`
100  else 
101    username=backup
102  fi
103
104  # Try to SSH to the computer without entering a password.
105  if `ssh -n -o NumberOfPasswordPrompts=0 $username@$computer /bin/true`; then
106   echo "Passwordless SSH to $username@$computer works."
107  else
108   echo "Could not use passwordless SSH to $username@$computer. Exiting."
109   exit 1;
110  fi
111  
112  # see if se have a local exclude file
113  if [ -f $confdir/exclude.$computer ] ; then
114    localexclude=$confdir/exclude.$computer
115    
116    echo
117    echo "Overriding local exclude pattern with:"
118    cat $localexclude
119    echo
120    echo
121  else 
122    localexclude=$exclude
123  fi
124  
125  localmaksantallfulle=$maksantallfulle
126  # Sjekk om det skal være et annet antall fulle backuper av en boks
127  if [ -f $confdir/maksfulle.$computer ] ; then
128    localmaksantallfulle=`cat $confdir/maksfulle.$computer`
129  fi
130  
131  #tømmer variabelen for sikkerhets skyld
132  filesystems=""
133
134  #Sjekker nest siste felt i fstab. Om det er 0 tar vi ikke backup
135  filesystems=`ssh -n $username@$computer "cat /etc/fstab" \
136   | grep -v nfs \
137   | grep -v "^#" \
138   | grep -v "^$" \
139   | awk '{ if ( $(NF-1) != "0" ) print $2}' `
140
141  #clean up our dir at this client
142  ssh $username@$computer "rm -r ~/.backup ; mkdir -m 700 ~/.backup"
143
144  #try to copy $exclude to $computer
145  scp $localexclude $username@$computer:~/.backup/exclude ||
146     echo "could not copy $localexclude to $computer :("
147
148  #try to copy preeexec and postexec if they exist
149  [ -f $confdir/preexec.$computer ] &&
150     scp $confdir/preexec.$computer  $username@$computer:~/.backup/preexec
151  [ -f $confdir/postexec.$computer ] &&
152     scp $confdir/postexec.$computer $username@$computer:~/.backup/postexec
153
154  #try to run preexec if it exist
155  ssh $username@$computer "[ -f ~/.backup/preexec ] && /bin/bash -x ~/.backup/preexec"
156
157  for filesystem in $filesystems
158  do
159   #lager en variant uten tegnet "/" eller $ (gjelder NT)
160   sfilesystem=`echo $filesystem | tr '\/\$' '__'`
161
162   #lager det som trengs av kataloger
163   mkdir -m 755 -p $storagedir/$computer/$sfilesystem/{full,daglig} 2>/dev/null
164
165   #
166   echo $filesystem > ${storagedir}/${computer}/.${sfilesystem}.name 
167   chmod 644 ${storagedir}/${computer}/.${sfilesystem}.name
168
169   #set default backuplevel
170   backuplevel=daglig
171
172   if [ ! -f $storagedir/$computer/$sfilesystem/.date ]
173   then
174    #take the first full backup of this filesystem on this computer
175    backuplevel=full
176    echo $DATEs > $storagedir/$computer/$sfilesystem/.date
177   fi
178
179   #sjekker om det er på tide med en full
180   if 
181  [ -z "`find $storagedir/$computer/$sfilesystem/full/ -name \*tgz.gpg -mtime -$dagermellomfulle`" ]
182   then
183    backuplevel=full
184   fi
185  
186   #gå ned i rett katalog
187   cd $storagedir/$computer/$sfilesystem/$backuplevel || exit 1
188
189   #perform the actual backup
190   backup
191
192   #delete complete backups
193   mf=$(($localmaksantallfulle+1))
194
195   for full in `ls -1t $storagedir/$computer/$sfilesystem/full/*tgz.gpg | tail +$mf`
196   do
197    prefix=`echo $full | sed "s/\.[^.]*$//"`
198    echo "$computer:$filesystem sletter full $prefix (for mange)"
199    rm $prefix*
200   done
201
202   #delete incremental backups older than the oldest complete backup
203   oldf=`ls -t1 $storagedir/$computer/$sfilesystem/full/*tgz.gpg | tail -1`
204   find \
205      $storagedir/$computer/$sfilesystem/daglig \
206      -type f \
207      \! -newer $oldf \
208      -exec rm {} \;
209      #denne funker bare med gnu find
210      #-printf "$computer:$filesystem sletter daglig %f (for gammel)\n" \
211
212  done
213
214  #try to run postexec if it exist
215  ssh $username@$computer "[ -f ~/.backup/postexec ] && /bin/bash -x ~/.backup/postexec"
216
217 done
218
219 #create report
220 #/home/backup/report.sh $storagedir > /tmp/report.txt
221 #[ ! -z $remotestat ] && scp /tmp/report.txt $remotestat
222 ###
223
224 # print diskusage to logfile
225 df -k
226
227 date