jenkins-build-all

   1 #!/bin/bash
   2 #
   3 # this is the script run by the Jenkins server to run the build tests.  Be
   4 # sure to always run it in its dir, i.e. ./jenkins-build, otherwise it might
   5 # remove things that you don't want it to.
   6 #
   7 # runs here:
   8 # https://jenkins.debian.net/job/reproducible_fdroid_build_apps
   9
  10
  11 if [ `dirname $0` != "." ]; then
  12     echo "only run this script like ./`basename $0`"
  13     exit
  14 fi
  15
  16 # jenkins.debian.net slaves do not export WORKSPACE
  17 if [ -z $WORKSPACE ]; then
  18     export WORKSPACE=`pwd`
  19 fi
  20
  21 set -e
  22 set -x
  23
  24 # report info about virtualization
  25 (dmesg | grep -i -e hypervisor -e qemu -e kvm) || true
  26 (lspci | grep -i -e virtio -e virtualbox -e qemu -e kvm) || true
  27 lsmod
  28 if systemd-detect-virt -q ; then
  29         echo "Virtualization is used:" `systemd-detect-virt`
  30 else
  31         echo "No virtualization is used."
  32 fi
  33 sudo /bin/chmod -R a+rX /var/lib/libvirt/images
  34 ulimit -n 2048
  35 echo 'maximum allowed number of open file descriptors: ' `ulimit -n`
  36 ls -ld /var/lib/libvirt/images
  37 ls -l /var/lib/libvirt/images || echo no access
  38 ls -lR ~/.vagrant.d/ || echo no access
  39 virsh --connect qemu:///system list --all || echo cannot virsh list
  40 cat /etc/issue
  41
  42 /sbin/ifconfig || true
  43 hostname || true
  44
  45 # point to the Vagrant/VirtualBox configs created by reproducible_setup_fdroid_build_environment.sh
  46 # these variables are actually set in fdroidserver/jenkins-build-makebuildserver
  47 export SETUP_WORKSPACE=$(dirname $WORKSPACE)/reproducible_setup_fdroid_build_environment
  48 export XDG_CONFIG_HOME=$SETUP_WORKSPACE
  49 export VBOX_USER_HOME=$SETUP_WORKSPACE/VirtualBox
  50 export VAGRANT_HOME=$SETUP_WORKSPACE/vagrant.d
  51
  52 # make sure we have the right buildserver paths and its ready for use
  53 vagrant global-status | grep reproducible_setup_fdroid_build_environment
  54
  55 # the way we handle jenkins slaves doesn't copy the workspace to the slaves
  56 # so we need to "manually" clone the git repo here…
  57 cd $WORKSPACE
  58
  59 # set up Android SDK to use the Debian packages in stretch
  60 export ANDROID_HOME=/usr/lib/android-sdk
  61
  62 # ignore username/password prompt for non-existant repos
  63 git config --global url."https://fakeusername:fakepassword@github.com".insteadOf https://github.com
  64 git config --global url."https://fakeusername:fakepassword@gitlab.com".insteadOf https://gitlab.com
  65 git config --global url."https://fakeusername:fakepassword@bitbucket.org".insteadOf https://bitbucket.org
  66
  67 # now build the whole archive
  68 cd $WORKSPACE
  69
  70 # this can be handled in the jenkins job, or here:
  71 if [ -e fdroiddata ]; then
  72     cd fdroiddata
  73     git remote update -p
  74     git checkout master
  75     git reset --hard origin/master
  76     # keep all the cloned source repos
  77     git clean -fdx --exclude build --exclude repo --exclude unsigned
  78 else
  79     git clone https://gitlab.com/fdroid/fdroiddata.git fdroiddata
  80     cd fdroiddata
  81 fi
  82
  83 echo "build_server_always = True" > config.py
  84 $WORKSPACE/fdroid build --verbose --latest --no-tarball --all
  85
  86 vagrant global-status
  87 cd builder
  88 vagrant status