jenkins-build

   1 #!/bin/bash
   2 #
   3 # this is the script run by the Jenkins server to run the build and tests.  Be
   4 # sure to always run it in its dir, i.e. ./jenkins-build.sh, otherwise it might
   5 # remove things that you don't want it to.
   6
   7 if [ `dirname $0` != "." ]; then
   8     echo "only run this script like ./`basename $0`"
   9     exit
  10 fi
  11
  12 # jenkins.debian.net slaves do not export WORKSPACE
  13 if [ -z $WORKSPACE ]; then
  14     export WORKSPACE=`pwd`
  15 fi
  16
  17 set -e
  18 set -x
  19
  20 # this is a local repo on the Guardian Project Jenkins server
  21 cd tests
  22 #./complete-ci-tests /var/www/fdroid
  23
  24
  25 # report info about virtualization
  26 (dmesg | grep -i -e hypervisor -e qemu -e kvm) || true
  27 (lspci | grep -i -e virtio -e virtualbox -e qemu -e kvm) || true
  28 lsmod
  29 if systemd-detect-virt -q ; then
  30         echo "Virtualization is used:" `systemd-detect-virt`
  31 else
  32         echo "No virtualization is used."
  33 fi
  34 sudo /bin/chmod -R a+rX /var/lib/libvirt/images
  35 echo 'maximum allowed number of open file descriptors: ' `ulimit -n`
  36 ls -ld /var/lib/libvirt/images
  37 ls -l /var/lib/libvirt/images || echo no access
  38 ls -lR ~/.vagrant.d/ || echo no access
  39 virsh --connect qemu:///system list --all || echo cannot virsh list
  40 cat /etc/issue
  41
  42 /sbin/ifconfig || true
  43 hostname || true
  44
  45 # point to the Vagrant/VirtualBox configs created by reproducible_setup_fdroid_build_environment.sh
  46 # these variables are actually set in fdroidserver/jenkins-build-makebuildserver
  47 export SETUP_WORKSPACE=$(dirname $WORKSPACE)/reproducible_setup_fdroid_build_environment/fdroidserver
  48 export XDG_CONFIG_HOME=$SETUP_WORKSPACE
  49 export VBOX_USER_HOME=$SETUP_WORKSPACE/VirtualBox
  50 export VAGRANT_HOME=$SETUP_WORKSPACE/vagrant.d
  51
  52 # let's see what is actually there:
  53 find $SETUP_WORKSPACE | grep -v fdroiddata/metadata/ | cut -b43-9999
  54
  55 # the way we handle jenkins slaves doesn't copy the workspace to the slaves
  56 # so we need to "manually" clone the git repo here…
  57 cd $WORKSPACE
  58
  59 # set up Android SDK to use the Debian packages in stretch
  60 export ANDROID_HOME=/usr/lib/android-sdk
  61
  62 # ignore username/password prompt for non-existant repos
  63 git config --global url."https://fakeusername:fakepassword@github.com".insteadOf https://github.com
  64 git config --global url."https://fakeusername:fakepassword@gitlab.com".insteadOf https://gitlab.com
  65 git config --global url."https://fakeusername:fakepassword@bitbucket.org".insteadOf https://bitbucket.org
  66
  67 # now build the whole archive
  68 cd $WORKSPACE
  69
  70 # this can be handled in the jenkins job, or here:
  71 if [ -e fdroiddata ]; then
  72     cd fdroiddata
  73     git remote update -p
  74     git checkout master
  75     git reset --hard origin/master
  76     # no don't `git clean` here, it'll wipe the APKs in unsigned/
  77 else
  78     git clone https://gitlab.com/fdroid/fdroiddata.git fdroiddata
  79     cd fdroiddata
  80 fi
  81
  82 echo "build_server_always = True" > config.py
  83 $WORKSPACE/fdroid build --verbose --latest --no-tarball --all
  84
  85 vagrant global-status
  86 cd builder
  87 vagrant status