Make sure apt caches are up2date before trying to install aptitude

Otherwise we might run into:

| [...]
| 08:54:38 preserving etc/apt/sources.list.d/grml-stable.list
| 08:54:39 OK
| 08:54:39 aptitude binary is not available, installing to make sure further FAI actions continue to work
| 08:54:39 Reading package lists...
| 08:54:42 Building dependency tree...
| 08:54:42 Package aptitude is not available, but is referred to by another package.
| 08:54:42 This may mean that the package is missing, has been obsoleted, or
| 08:54:42 is only available from another source
| 08:54:42
| 08:54:42 E: Package 'aptitude' has no installation candidate
| 08:54:42 updatebase.GRMLBASE  FAILED with exit code 100.
| 08:54:42 Calling task_updatebase

As nowadays - with Debian/jessieu - aptitude no longer is in
a base debootstrap chroot.

Switch from http.debian.net to ftp.debian.org

Out of 10 recent ISO builds within ~4 days 9 of them failed. :(
At least 7 of those 9 broken builds were caused by broken downloads:

| 20141023 => 07:52:28 E: Failed to fetch http://http.debian.net/debian/pool/main/libr/librsvg/librsvg2-common_2.40.4-1_amd64.deb: Error reading from server. Remote end closed connection [IP: 2001:41c8:1000:21::21:35 80]
| 20141024 => 06:47:25 W: Failed to fetch xz:/var/lib/apt/lists/partial/http.debian.net_debian_dists_testing_main_binary-amd64_Packages  Hash Sum mismatch
| 20141026 => 05:29:52 W: Failed to fetch http://http.debian.net/debian/dists/testing/main/i18n/Translation-en  Hash Sum mismatch
| 20141027 => E: Unable to find a source package for gcc-4.7
| 20141027 => E: Unable to find a source package for gcc-4.7
| 20141027 => 05:10:38 W: Failed to fetch xz:/var/lib/apt/lists/partial/http.debian.net_debian_dists_testing_main_binary-amd64_Packages  Hash Sum mismatch
| 20141027 => 09:32:37 Err http://http.debian.net/debian/ testing/main libsystemd-daemon0 amd64 215-5+b1
|             09:32:37   Error reading from server. Remote end closed connection [IP: 2001:41c8:1000:21::21:35 80]
| 20141027 => 20:29:56 E: Failed to fetch http://http.debian.net/debian/pool/main/s/systemd/libsystemd-daemon0_215-5+b1_amd64.deb: Error reading from server. Remote end closed connection [IP: 2001:41c8:1000:21::21:35 80]
| 20141027 => 22:44:01 E: Failed to fetch http://http.debian.net/debian/pool/main/libx/libxfont/libxfont1_1.4.99.901-1_amd64.deb: Error reading from server. Remote end closed connection [IP: 2001:41c8:1000:21::21:35 80]

This is a serious development and release stopper for us.
Therefore let's try switching to ftp.debian.org which has been
reported to have a useful network bandwidth and failover setup available
(thanks zobel + weasel).

set CRYPTSETUP=y when calling update-initramfs

This is needed for the initrd to include the cryptsetup binaries and modules
with cryptsetup >= 2:1.6.6-1 after the patch in https://bugs.debian.org/714104

Thanks: Charles A. Hewson <cahewson@eskimo.com>

SW: add syslinux-common to GRMLBASE

Otherwise the boot related modules might be missing:

| * Missing addon file: "chain.c32"                                        [ !! ]
| * Missing addon file: "hdt.c32"                                          [ !! ]
| * Missing addon file: "mboot.c32"                                        [ !! ]
| * Missing addon file: "menu.c32"                                         [ !! ]

This is happening on grml-small where syslinux-common isn't
present by default because it's just a Recommends but not a Depends.
On grml-full we ship syslinux-common by default though because
it's a dependency of grub-imageboot.

Fix path for memdisk binary when building with recent syslinux[-common] versions

Addressing:

| * Missing addon file: "memdisk"

Release new version 0.26.0

Update lintian overrides for modified lintian message

Do our best to make sure aptitude is installed in chroot

There seems to be a change in Debian (jessie) causing aptitude to
no longer be present in debootstrapped systems by default any
longer. By setting $FAI_DEBOOTSTRAP_OPTS accordingly we include
it in its default package selection though. If it still shouldn't
be present we explicitely try to install it through the
updatebase.GRMLBASE hook script.

isohybrid binary moved to syslinux-utils, update Recommends + error msg

SW: drop gptsync (orphaned and broken)

See Debian's #755510: Orphaned since 2012, last upload 2010, not in testing

SW: add augeas-tools

Useful e.g. for customizing /etc/fstab of an installed system, like:

cat << EOT | augtool --root="$TARGET"
insert opt after /files/etc/fstab/*[file="/"]/opt[last()]
set /files/etc/fstab/*[file="/"]/opt[last()] noatime
save
EOT

Release new version 0.25.1

Check for failed updatebase and instsoft hook executions

updatebase.GRMLBASE: execute fcopy with -i flag to ignore non-matching files

Otherwise when building testing/unstable we get:

| fcopy: no matching file for any class for etc/apt/preferences.d/wheezy-backports defined.

and fcopy fails to execute:

| updatebase.GRMLBASE  FAILED with exit code 1.

and causing the following '$ROOTCMD apt-key add /etc/apt/grml.key
to never get executed then.

Release new version 0.25.0

Fixes to be able to build Grml based on Debian Wheezy

In Debian Wheezy initramfs-tools is 0.109, but the Grml kernel needs
at least 0.110. The backport contains the requested version.

Don't use addons in GRUB if NO_ADDONS is set

Possibility to give LIVE_CONF as env. variable

New cmdline option -S + env variable SCRIPTS_DIRECTORY to set script directory

This allows us to run grml-live from the Git repository without
having /usr/share/grml-live/scripts available.

Thanks: Krisztian VASAS <iron@ironiq.hu> for the initial patch

21-usersetup: check for existing /bin/zsh inside the chroot

/bin/zsh usually points to /etc/alternatives/zsh, but if
/etc/alternatives/zsh doesn't exist on the *build* system,
the test for existing /bin/zsh fails, so we need to verify
the existence of /bin/zsh *inside* the chroot.

Thanks: Krisztian VASAS <iron@ironiq.hu> for reporting the problem
Acked-by: Alexander Wirt <formorer@grml.org>

Add 'rsync' to dependencies

Otherwise using a $CHROOT_INSTALL will result in a message like this:
```
/usr/sbin/grml-live: line 1150: rsync: command not found
```

Add falls positive privacy-breach-generic to lintian overrides

Release new version 0.24.0

Further updates for syslinux v3:6.03~pre1+dfsg-4 support

We need to also include ldlinux.c32, libcom32.c32 and
libutil.c32, but only for syslinux versions >3:4.05+dfsg-6+deb8u1.

While the modules are located in directory
/usr/lib/syslinux/modules/bios/ the main isolinux.bin file is in
either /usr/lib/ISOLINUX or /usr/lib/syslinux, so adjust code
accordingly.

Do not fail in upgrade mode (-u) when configuration files have been modified

Custom configuration files might be present and upgrading
packages might fail then:

| Setting up sudo (1.8.9p5-1) ...
|
| Configuration file '/etc/sudoers'
|  ==> File on system created by you or by a script.
|  ==> File also in package provided by package maintainer.
|    What would you like to do about it ?  Your options are:
|     Y or I  : install the package maintainer's version
|     N or O  : keep your currently-installed version
|       D     : show the differences between the versions
|       Z     : start a shell to examine the situation
|  The default action is to keep your current version.
| *** sudoers (Y/I/N/O/D/Z) [default=N] ? dpkg: error processing package sudo (--configure):

SW: move syslinux into GRMLBASE class, add pxelinux + isolinux

Recent versions of syslinux (at least applies to v3:6.03~pre1+dfsg-4)
split the packages into isolinux, pxelinux, syslinux + syslinux-common.

Adjust syslinux directories for syslinux v3:6.03~pre1+dfsg-4

Recent versions of syslinux no longer provide the files we have
been relying on in the syslinux package any longer but files have
been split into packages isolinux, pxelinux, syslinux + syslinux-common
with different directory names.

SW: add iperf to GRML_FULL

As suggested by Frank Terbeck <ft@grml.org>

Add more filesystems to modular GRUB2

This fixes the bug described in http://bts.grml.org/grml/issue1306
that a grml2usb prepared medium cannot boot from (U)EFI.

Added a few more filesystems just in case somebody wants to use
grml2usb with a non-mainstream filesystem.

I am unable to reproduce the second bug in that issue, when dd-ing
the ISO to a USB device - this scenario works fine with the (U)EFI
implementation used by VirtualBox.

Release new version 0.23.3

Provide GRMLBASE script 49-sshd to adjust sshd configuration [Closes: issue1304]

Providing the openssh-server/permit-root-login debconf option sadly
isn't enough to switch from "PermitRootLogin without-password"
to "PermitRootLogin yes", so we have to adjust the file on-the-fly.
(Let's try to avoid shipping the sshd configuration file for now,
to make sure the file works for all the Debian releases.)

While at it also disable UseDNS which speeds up login when DNS
is unconfigured/unavailable/broken.

SW: replace zd1211-firmware with firmware-zd1211

debconf: enable permit-root-login for openssh-server package [Closes: issue1304]

Drop "forensic" boot option from Forensic Mode boot menu

The "forensic" kernel option (which corresponds to the "Forensic Mode"
boot menu entry) sets all the according boot options. If the "forensic"
boot option is used then grml-autoconfig raises a warning for wrong
usage, so let's avoid further confusion since "forensic" boot option
itself doesn't change anything.

Release new version 0.23.2

Work around regression in GRUB 2.00-22

Seems that Grub 2.00-22 cannot properly load a gzipped initrd file
with 'linux16' command (which is used to load the gzipped FreeDOS
memdisk image). As a workaround, mount the filesystem using the
'loopback' command (which transparently decompresses it) and then use
blocklist syntax to load the whole mounted filesystem as an initrd.

Make sure to not leak any mdadm configurations from the build system

We haven't run into this issue yet, though it was reported
on the debian-live mailing list:

  https://lists.debian.org/debian-live/2014/03/msg00063.html

and we don't want to have anyone using grml-live run into it.

Thanks: Evgeni Golov for the pointer
Reviewed-by: Evgeni Golov

Remove /etc/resolvconf/resolv.conf.d/original during cleanup

This file provides the original content of the system where the
build is running from, there's no reason we ship this with
our ISOs.

Thanks: Evgeni Golov for the pointer

Merge branch 'modular-grub' of https://github.com/schierlm/grml-live

Make the GRUB images modular

Now, both the i386-pc and the amd64 UEFI GRUB images are modular.
This means, that startup is faster and that all modules (even those
that cannot be embedded) can be used.

The embedded configfile has been simplified since conditionals are not
supported by the simple command parser of the rescue shell, without
sacrificing any functionality.

Also, the main build script now copies the *.mod and *.lst files for
UEFI GRUB to the ISO.

[My statement that the .lst files are no longer needed was wrong; at
least the command.lst is used for autoloading modules that have
different names than their commands.]

Add warning for running grml-live from git

If you do without setting GRML_FAI_CONFIG, it will not use your edited FAI
scripts, but the ones installed by default.

Run wrap-and-sort -a on debian directory

Add bzip2 to depends, used for netboot package generation

Thanks: Michael Schierl for the bugreport

Fix syntax error in "${BUILD_OUTPUT}"/boot/grub/i386-pc/ creation

Install grub modules into /boot/grub/i386-pc [Testing: issue1297]

Otherwise for example Addons loaded via linux16 (e.g. memtest) fail
to boot because of:

| error: file `/boot/grub/i386-pc/linux16.mod' not found
| error: can't find command `linux16'.

Thanks: Michael Schierl

SW: replace lynx with lynx-cur

lynx is a transitional package pointing to lynx-cur

Thanks: Axel Beckert <abe@deuxchevaux.org>

SW: drop libertas-firmware from GRMLBASE

It's a transitional package for firmware-libertas which we
already have on our list.

Thanks: Axel Beckert <abe@deuxchevaux.org>

name the correct, non-deprecated, persistence label first

Release new version 0.23.1

SW: drop recover, abandoned upstream

See Debian's #735858 for further details.

Rework script which checks for uninstallable packages

While older versions of dpkg reported:

| No packages found matching ${package}.

newer ones report:

| dpkg-query: no packages found matching ${package}

Newer versions of dpkg also seem to mix stdout and stderr
(looking like buffering problems?), so the result is unreliable
for us. Therefore split handling of stdout and stderr output.

This fixes the problem that the junit output wasn't
really adequate anymore lately.

Release new version 0.23.0

Enable fbdev for vmwgfx kernel driver [Testing: issue1280]

This is supposed to fix the display issue on
VMware ESXi 5.5, vSphere 5.0 and 5.5 etc where
boot hangs after "Waiting for /dev/" but it's
actually just the display that's hanging.

See https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=714929
for further information.

Thanks: Andreas Gredler <jimmy@grml.org>

SW: remove ufsutils from GRML_{SMALL,MEDIUM,FULL,XL}

ufsutils is kfreebsd*-only nowadays

Move return code check of FAI-run before wrinting to /etc of live system

If the underlying file system is mounted without suid or dev
permissions we otherwise try to write to the live system
even though FAI run failed to execute.

SW: replace transitional package ifenslave-2.6 with ifenslave

Rename "readonly" boot option to "read-only", renamed in live-boot

Upstream broke the "readonly" boot option by renaming
it to "read-only" in live-boot.git commit 5d6acf56. :(

33-aptsetup: adopt snapshot.debian.org code for http.debian.net

98-clean-chroot: get rid of /var/lib/aptitude/pkgstates.old in RELEASE class

Release new version 0.22.1

Force bootlocal* files to be executables

If the files have the wrong permissions on the filesystem
they are useless on the live system.

Remove DEBIAN_STABLE file regarding wheezy-backports

linux-base isn't available in wheezy-backports as of today
and the initramfs-tools dependency should be resolvable by
aptitude anyway, so let's try getting rid of this workaround.

Thanks: Andras Korn

zsh completion: update list of Debian suites

grml-live.conf: adjust debootstrap cmdline for Debian/wheezy

grml-live.conf: adjust SUITE comment for new defaults

Update DEBIAN_STABLE for wheezy as current stable release

Release new version 0.22.0

SW: add nocache to GRML_FULL

GRMLBASE/98-clean-chroot: do not execute apt-get update

There should be no point in running the apt-get update
command at this place.

RELEASE/98-clean-chroot: remove /var/lib/apt/lists/*Translation* files

This saves some further space on the ISO.

Bump Standards-Version to 3.9.5

SW: add dump to GRML_FULL [Closes: issue1288]

Switch from cdn.debian.net to http.debian.net

Let's see whether it works nowadays, we hit:

| W: Failed to fetch bzip2:/var/lib/apt/lists/partial/cdn.debian.net_debian_dists_sid_main_source_Sources  Hash Sum mismatch
| W: Failed to fetch bzip2:/var/lib/apt/lists/partial/cdn.debian.net_debian_dists_sid_main_binary-amd64_Packages  Hash Sum mismatch
| W: Failed to fetch bzip2:/var/lib/apt/lists/partial/cdn.debian.net_debian_dists_sid_main_i18n_Translation-en  Hash Sum mismatch

in today's automated builds, so it's worth a try...

Release new version 0.21.6

Update list of supported Debian suites/releases and related docs

SW: add tcplay to GRML_FULL [Closes: issue1282]

Thanks: Raoul for the suggestion

grml-cheatcodes.txt: document passwd and encpasswd boot options

Release new version 0.21.5

Drop trailing dot in 'Boot from next boot device'

This was inconsistent with all the other entries.

Thanks: Andreas Gredler for noticing

Fix check for presence of pxelinux.0 file

This worked only on for build systems where /usr/lib/syslinux/pxelinux.0
was present on the build system itself. :)

scripts/generate_netboot_package.sh: add closing brace to error message

Release new version 0.21.4

Execute freshclam only if class FRESHCLAM is set

A current grml-full daily ISO has ~360MB without freshclam data,
including freshclam data it has ~429MB - this isn't worth the disk space,
especially as you're interested in up2date definitions anyway and
freshclam can be executed on the live ISO then.

Release new version 0.21.3

SW: add clonezilla to GRML_FULL

Thanks to ludinator for the suggestion.

Acked-by: Alexander Wirt <formorer@grml.org>
Acked-by: Evgeni Golov <evgeni@grml.org>
Acked-by: Frank Terbeck <ft@grml.org>

SW: add nwipe to GRML_SMALL

Acked-by: Alexander Wirt <formorer@grml.org>

SW: add nwipe to GRML_FULL

Thanks to ludinator for the suggestion.

Release new version 0.21.2

SW: add xz-utils to GRMLBASE

We use compress=xz inside
/etc/grml/fai/config/files/etc/initramfs-tools/conf.d/xz-compress/GRMLBASE
so we always need to have xz-utils present.

Release new version 0.21.1

docs: use wheezy and http.debian.net in base.tgz instructions

templates: Use lowercase 'timeout' command in syslinux configuration

Related to issue1262 in Grml's BTS.

Release new version 0.21.0

SW: drop febootstrap from GRML_FULL

While febootstrap was a "tool for bootstrapping a Fedora system
(like Debian debootstrap)" until and including the squeeze
release, starting with wheezy it's a "tool for building supermin
appliances" (actually being a transitional package, depending on
package supermin). It's actually a rewrite of febootstrap but
with its present feature set it doesn't seem to be of any use for
Grml.

SW: replace epdfview with xpdf in GRML_FULL

epdfview is unmaintained and abandonned upstream, see:
http://bugs.debian.org/cgi-bin/bugreport.cgi?bug=710550

xpdf with ~5500kB disk space is quite small and useful
for the average user (as compared to zathura and mupdf
which have no buttons)

DEBORPHAN/98-clean-chroot: be more verbose about executed steps

Revert "Avoid file-rc being considered for removal by deborphan"

This reverts commit f565065789c9c28146a9acd2efe5a5a1d2b0d2fb.

Looks like it's not deborphan which removes file-rc but
file-rc gets removed earlier and is just purged through
the DEBORPHAN/98-clean-chroot script.

Avoid file-rc being considered for removal by deborphan

For whatever reason deborphan seems to consider file-rc
being available for removal since a few days:

| =====   shell: DEBORPHAN/98-clean-chroot   =====
| [...]
| (Reading database ... 24676 files and directories currently installed.)
| Removing file-rc ...
| Purging configuration files for file-rc ...
| Please purge /var/backups/rc.* manually.
| DEBORPHAN/98-clean-chroot OK.

Use UTC as default TIMEZONE

Related to issue1261

SW: Add puppet to GRML_FULL

Shipping puppet in GRML_FULL allows to use puppet receipes for system management out of the box.

Closes #11 at github