Update buildd/ setup
[grml-live.git] / buildd / functions.sh
1 # Filename:      /usr/share/grml-live/buildd/functions.sh
2 # Purpose:       main function file for grml-live buildd
3 # Authors:       grml-team (grml.org), (c) Michael Prokop <mika@grml.org>
4 # Bug-Reports:   see http://grml.org/bugs/
5 # License:       This file is licensed under the GPL v2 or any later version.
6 ################################################################################
7
8 die() {
9   [ -n "$1" ] && echo "$1">&2
10   exit 1
11 }
12
13 . /etc/grml/grml-buildd.conf || die "Could not source /etc/grml/grml-buildd.conf. Exiting."
14
15 type -p mutt 1>/dev/null 2>&1 || die "mutt binary not found. Exiting."
16
17 # exit if important variables aren't set:
18 [ -n "$STORAGE" ]  || die "\$STORAGE is not set. Exiting."
19 [ -n "$SUITE" ]    || die "\$SUITE is not set. Exiting."
20 [ -n "$CLASSES" ]  || die "\$CLASSES is not set. Exiting."
21 [ -n "$NAME" ]     || die "\$NAME is not set. Exiting."
22 [ -n "$ISO_NAME" ] || die "\$ISO_NAME is not set. Exiting."
23
24 # some defaults:
25 PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/bin/X11
26 DATE="$(date +%Y%m%d)"
27 TMP_DIR="$(mktemp -d)"
28 MUTT_HEADERS="$(mktemp)"
29 [ -n "$TMP_DIR" ]      || die "Could not create \$TMP_DIR. Exiting."
30 [ -n "$MUTT_HEADERS" ] || die "Could not create $\MUTT_HEADERS. Exiting."
31 [ -n "$ARCH" ] && GRML_LIVE_ARCH="-a $ARCH"
32
33 # make sure we have same safe defaults:
34 [ -n "$OUTPUT_DIR" ]    || OUTPUT_DIR="${STORAGE}/grml-live_${DATE}.$$"
35 [ -n "$ISO_DIR" ]       || ISO_DIR=$STORAGE/grml-isos
36 [ -n "$RECIPIENT" ]     || RECIPIENT=root@localhost
37 [ -n "$ATTACHMENT" ]    || ATTACHMENT="$TMP_DIR/grml-live-logs_$DATE.tar.gz"
38 [ -n "$FROM" ]          || FROM=root@localhost
39
40 if [ -n "$LOGFILE" ] ; then
41    GRML_LOGFILE="$LOGFILE"
42 else
43    [ -n "$GRML_LOGFILE" ]  || GRML_LOGFILE=/var/log/grml-live.log
44 fi
45
46 [ -n "$FAI_LOGFILES" ]  || FAI_LOGFILES=/var/log/fai/grml/last
47
48 echo "my_hdr From: grml-live autobuild daemon <$FROM>" > $MUTT_HEADERS
49
50 # execute grml-live:
51 grml_live_run() {
52   if ! [ "$FORCE_REBUILD" = "1" ] ; then
53      if [ -f "$ISO_DIR/$ISO_NAME" ] ; then
54         echo "$ISO_DIR/$ISO_NAME exists already. Nothing to be done, exiting."
55         exit 0
56      fi
57   fi
58
59   # workaround the 32 chars limit of mkisofs -V ....
60   # 'grml64-small-daily-squeeze 090223' is too long
61   case $SUITE in
62     sid)      CODENAME=sid   ;;
63     squeeze)  CODENAME=squ   ;;
64     lenny)    CODENAME=lenny ;;
65     etch)     CODENAME=etch  ;;
66   esac
67
68   grml_name="$NAME-daily-$CODENAME"
69   shortdate="$(date +%y%m%d)"
70
71   grml-live -F $* $GRML_LIVE_ARCH -s $SUITE -c $CLASSES -o $OUTPUT_DIR \
72             -g "$grml_name" -v "$shortdate" -r grml-live-autobuild -i $ISO_NAME \
73             1>/var/log/grml-buildd.stdout \
74             2>/var/log/grml-buildd.stderr ; RC=$?
75
76   if [ "$RC" = "0" ] ; then
77      RC_INFO=success
78   else
79      RC_INFO=error
80   fi
81 }
82
83 # create log archive:
84 create_logs() {
85   ( cd / && tar zcf $ATTACHMENT $FAI_LOGFILES /var/log/grml-buildd.stderr /var/log/grml-buildd.stdout $GRML_LOGFILE 1>/dev/null )
86 }
87
88 # store logs on remote server:
89 upload_logs() {
90   [ -n "$RSYNC_MIRROR" ] || return 1
91   umask 002
92   rsync --exclude dmesg.log --times --partial --copy-links -az --quiet /var/log/grml-buildd.* \
93   $FAI_LOGFILES $GRML_LOGFILE $RSYNC_MIRROR/logs/"${NAME}_${DATE}"/
94 }
95
96 # store information of ISO size:
97 iso_details() {
98   if ! [ -f "$OUTPUT_DIR/grml_isos/$ISO_NAME" ] ; then
99      ISO_DETAILS="There was an error creating $ISO_NAME"
100   else
101      ISO_DETAILS=$(ls -lh $OUTPUT_DIR/grml_isos/$ISO_NAME)
102   fi
103 }
104
105 # send status mail:
106 send_mail() {
107   # create logs only if using 'send_mail -e'
108   [ "$1" = "-e" ] && create_logs
109   # attach logs only if we have some:
110   [ -r "$ATTACHMENT" ] && MUTT_ATTACH="-a $ATTACHMENT" || MUTT_ATTACH=''
111
112   echo -en "Automatically generated mail by $SCRIPTNAME
113
114 $ISO_DETAILS
115
116 Return code of grml-live run was: $RC
117
118 $(grep -A2 'Executed grml-live' $GRML_LOGFILE || echo "* executed grml-live command line not available")
119
120 $(grep -A2 'Executed FAI' $GRML_LOGFILE || echo "* executed FAI command line not available")
121
122 The following errors have been noticed (several might be warnings only):
123
124 $(grep -i error $FAI_LOGFILES/* /var/log/grml-buildd.std* | grep -ve liberror -ve libgpg-error || echo "* nothing")
125
126 The following warnings have been noticed:
127
128 $(grep -i warn $FAI_LOGFILES/* /var/log/grml-buildd.std* || echo "* nothing")
129
130 There following dependency problems have been noticed:
131
132 $(grep -i "Not Installed" $FAI_LOGFILES/software.log || echo "* nothing")
133
134 The following packages could not be installed:
135
136 $(grep -i "Couldn't find.*package" $FAI_LOGFILES/software.log | sed 's/\(.*\)"\(.*\)"\(.*\)/\2/' | sort -u || echo "* nothing")
137
138 See attached files:
139 /var/log/grml-buildd.stderr /var/log/grml-buildd.stdout $ATTACHMENT
140
141 EOF " | \
142   mutt -s "$SCRIPTNAME [${DATE}] - $RC_INFO" -a /var/log/grml-buildd.stderr -a /var/log/grml-buildd.stdout $MUTT_ATTACH "$RECIPIENT"
143 }
144
145 # make sure we store the final iso:
146 store_iso() {
147   if [ "$RC" = "0" ] ; then
148      [ -d "$ISO_DIR" ] || mkdir "$ISO_DIR"
149      mv "${OUTPUT_DIR}/grml_isos/${ISO_NAME}" "$ISO_DIR"
150      if [ -r "${OUTPUT_DIR}/grml_isos/${ISO_NAME}.md5" ] ; then
151         mv   "${OUTPUT_DIR}/grml_isos/${ISO_NAME}.md5" "${ISO_DIR}"
152      fi
153      if [ -r "${OUTPUT_DIR}/grml_isos/${ISO_NAME}.sha1" ] ; then
154         mv   "${OUTPUT_DIR}/grml_isos/${ISO_NAME}.sha1" "${ISO_DIR}"
155      fi
156   fi
157 }
158
159 # allow clean exit:
160 bailout() {
161   if [ "$RC" = "0" ] ; then
162      rm -rf "$TMP_DIR" "$MUTT_HEADERS" "$OUTPUT_DIR"
163   else
164      rm -f "$MUTT_HEADERS"
165      echo "building ISO failed, keeping build files [${OUTPUT_DIR} / ${TMP_DIR}]">&2
166   fi
167
168 }
169
170 trap bailout 1 2 3 15
171
172 ## END OF FILE #################################################################