lint: catch links at the beginning too

lint: also catch gitlab master links

update: remove icons when removing disabled builds

They were just left there forever.

update: move apk icons to and from archive too

They all were stuck in repo/ for this reason. This resulted in apps that
were only in the archive to seem like they didn't have icons, when in
fact they did but were in the wrong dir.

update: lower apps without apks logs to debug

If you run 'fdroid update', 6k+ warning messages are output. This is
definitely wrong. They can still be shown if one enables -v.

Don't use paramiko with DEBUG

It outputs way, way too much info. Thousands of lines only when copying
the files over, which is not useful at all.

Fix ndk always being reinstalled

Add gradle 2.9 to the BS

Install build-tools from the cache too

Download platforms via makebuildserver

Add qt5 to the buildserver

fdroidbuild-general: split packages in lines

This improves readability, but more importantly makes changes in git a
lot easier to track.

import: don't crash due to missing id

Fixes #129

Don't crash if AM.xml has no application element

Don't crash if no auto name is found

build: don't treat FDroidExceptions as unknown

common: error if any glob paths are unused

Like rm=foo and foo doesn't exist.

checkupdates: find new subdirs for autonames too

The same method used for Tags and RepoManifest.

scanner: don't warn about ignored files

Bump to 0.5.0

install: filter out log messages better

scanner: Ignore certain binary executable files

These were warnings, so the behaviour doesn't really change.

scanner: ignore .DS_Store files

They are binary and sometimes executable, so they trigger false
positives.

Fix buildserver debian stable java paths

Root required to set default java

Fix 'set default java'

Bump build-tools to 23.0.2

If we're using a jessie buildserver, we need backports (for java 8)

Install Java 1.8 alongside 1.7 for retrolambda

Fixes #103.

Fix example config default

run-tests: Don't set -x until option parsing is done

run-tests: Don't show echo_header commands

tests: allow running ./tests/run-tests

checkupdates: check packages in AM.xml files too

scanner: allow apache.org maven repo

Since it has the same free software and source code publishing
requirements that oss.sonatype and maven.org repos have.

checkupdates: work around multiple package ids

If there are multiple package ids in a build.gradle file and the first
one we don't want, checkupdates would get stuck. Make it ignore any
package id that we don't want so that it can get past that.

checkupdates: better "no tags" messages

checkupdates: no need to sort tags if len()<=5

Also fix local.prop files before subdir

If subdir=foo/bar and there is a foo/local.properties file, it would not
get treated.

checkupdates: don't blindly accept subdir

This is unnecessary because dirs_with_manifest will pick it up anyway.
But the problem manifested because we weren't checking the package id
here.

checkupdates: compare CVs as ints, not strs

Add an extra strip() to work around tostring issue

In cases like this xml code:

<string name="app_name">"OpenKeychain"</string>
<!-- title -->
<string name="title_encrypt_text">"Encrypt"</string>

tostring() returns trailing whitespaces (including newlines). Which
aren't removed until the very end, after we try to remove enclosing
quotes. So strip right after tostring() too, since we never really care
about whitespaces anyway.

checkupdates: never auto-update to older versions

common: Compile more regexes only once

Don't double check package name

checkupdates: don't ignore root directory

checkupdates: Make RepoManifest change subdir too

checkupdates: let Tags detect subdir changes

Up until now, this was done only if no overall version could be found. But in
tags, we would get stuck with an old version from an old tag and not see
subdir changes in new tags.

Be consistent about root_dir/build_dir naming

Fix a small indentation issue

Fix gradle-2.8 checksum

I once again did the -all.zip hash, not the -bin.zip one.

lint: fix unlinkified links regex

It was incorrectly matching:

foo [http://bar

and not matching:

http://foo (start of line)

update: fix for 0fa6aac2881

For some reason, my up to date pyflakes didn't catch this.

Also replace git@gitlab.com submodule urls

Add gradle 2.8

Bump sdk to 24.4.1

tests: we now replace "buildToolsVersion var" too

See d706cfa7d8a

Typo fix for 91daacb8896e796

common: don't crash if an sdk binary is not found

Remove densities getter

scanner: allow sonatype groups/public repo

See http://central.sonatype.org/pages/ossrh-guide.html

scanner: escape urls

Fix build-tools patching when it uses variables

Like:

buildToolsVersion FOO_VERSION

tests: Comment values are lists, not strings

Since there can be multiple lines.

Fix shasum for gradle 2.7 (see a229afe1)

tests: adapt to new comments dict

tests: close files

scanner: ignore gradle comment lines

Useful to detect:

maven {
// foo
url "http://foo.bar"
}

Remove unwanted files in a more consistent way

scanner: error on unknown maven repos

This finds maven repos of the format:

maven {
url 'http://foo.bar'
}

And checks if the repository is one that we allow. As usual, scanignore can be
used, or the list modified, if there are exceptions or more repositories to
allow.

Fix moving of gpg sigs between repo and archive

buildserver: Add gradle 2.7

Always use the same logging format

This helps differentiate errors, warnings and regular messages.

extension simplifications

write_metadata fixes

Final touches to yaml writing

Now it writes and reads properly.

bash-completion: add appid support for all formats

More improvements to yaml writing

Don't leave an empty line at the end

Add basic yaml metadata writing

Rename write_metadata to specify txt

Simplify format parsing logic

scanner: don't error on partially used globs

This meant that using something like `scanignore=*` would error if there were
ignores happening in some directories/files, but not all.

Fixes #110

Rework path glob expansion

Slightly simplifies the whole thing and lets us map what each resulting path
comes from. This will be useful to fix #110 later on.

import: fix issue tracker links

Don't use exists() on symlinks

If they are broken, exists() will return false. islink() will return true in
both cases.

Smarter archive policy apk moving

* Move apks back from the archive repo (e.g. if builds are disabled thus the
  number of apks on the main repo decreases)
* Also move apk signatures back and forth

checkupdates: Ignore xml tags in string content

This allows us to fetch strings like the following:

<string name="app_name">foo <xliff:g>bar</xliff:g></string>

Up until now, using .text would only return "foo ", but if we use .tostring()
with the text method, it converts everything into plain text for us resulting
in "foo bar".

Fetch string contents in a safer way

Fix for bb2cbd527b

Increase wiki error detail length limit

8k is too small, e.g. when make -jN errors or when there are a lot of scanner
errors and warnings. 16k should be better. Also, use "[...]" to make it
obvious that the output is truncated.

fdroid: don't treat MetaDataException as unknown

Up until now, if it was thrown, fdroid would crash with a full stacktrace as
if the program had stopped unexpectedly. Now it just prints the metadata
error, as intended.

rewritemeta: add -l option to list files

Make write_metadata take a writer

This will let rewritemeta report format issues without writing to disk.

Replace MD5withRSA with SHA1withRSA. Fixes #26.

Looks to me like we were using SHA1withRSA all along. Tested that everything
still works with a test repo.

As Hans reports, SHA1withRSA has been the default on Android tools for a long
time and it's supported on all Android versions.

Push a more complete/standard fdroidserver layout to buildserver

checkupdates: ignore gradle comments

build: make sure .gradle/ is removed at clean

Update build status badge to new CI url

scanner: skip symlinks to avoid issues

If they resolve to a missing file, we don't care about them. If they resolve
to an existing file, we'll scan that file anyway.