chiark / gitweb /
README: complete and sort the known subcommands list
[nailing-cargo.git] / README.md
1 nailing-cargo
2 =============
3
4 This is a wrapper tool for cargo, the Rust build tool and package
5 manager.  Functions:
6
7  * Conveniently use local crates, including completely
8    unpublished crates.
9  * Perform out-of-tree builds, including in an account with
10    no write access to the source tree.
11  * Provide convenience aliases for target architecture names.
12  * Make the default be offline (ie, not to access the internet).
13
14 These functions are of course configurable.
15
16 The primary source of information for nailing-cargo is the file
17 `../Cargo.nail` (which is in TOML syntax).  You put `Cargo.nail`
18 alongside the top-level git repositories you are working with, and
19 invoke nailing-cargo from the git directory containing the Rust
20 package you want to build.
21
22 Installing
23 ----------
24
25 nailing-cargo is designed to be run out of a git clone:
26
27 ```
28 $ git clone https://salsa.debian.org/iwj/nailing-cargo.git
29 $ ln -s `pwd`/nailing-cargo/nailing-cargo ~/bin
30 ```
31
32 It is self-contained, depending only on a reasonably functional Perl
33 installation.
34
35 Most basic example usage
36 ------------------------
37
38 ```
39 $ cd myproject
40 $ cat >../Cargo.nail
41 subdirs="""
42 myproject
43 mylibrary
44 """
45 $ nailing-cargo -u fetch
46 $ nailing-cargo build
47 ```
48
49 Documentation table of contents
50 -------------------------------
51
52 <!-- TOC autogenerated by ./markdown-toc-filter, do not edit -->
53
54   * [Introduction](#nailing-cargo)
55     * [Installing](#installing)
56     * [Most basic example usage](#most-basic-example-usage)
57     * [Documentation table of contents](#documentation-table-of-contents)
58   * [Using local crates, or locally modified crates](#using-local-crates-or-locally-modified-crates)
59     * [How nailing-cargo helps with using local crates](#how-nailing-cargo-helps-with-using-local-crates)
60     * [Telling nailing-cargo how to massage `Cargo.toml`](#telling-nailing-cargo-how-to-massage-cargo.toml)
61   * [Out-of-tree builds](#out-of-tree-builds)
62     * [How nailing-cargo helps with out-of-tree builds](#how-nailing-cargo-helps-with-out-of-tree-builds)
63     * [Configuring out-of-tree builds](#configuring-out-of-tree-builds)
64   * [Target architecture convenience aliases](#target-architecture-convenience-aliases)
65   * [Default change to offline mode](#default-change-to-offline-mode)
66   * [Invocation and command-line option reference](#invocation-and-command-line-option-reference)
67     * [Usages](#usages)
68     * [Options](#options)
69     * [Environment of the build command](#environment-of-the-build-command)
70   * [Configuration reference](#configuration-reference)
71     * [Source directories and packages (toplevel)](#source-directories-and-packages-toplevel)
72     * [`[alt_cargolock]`: Alternative `Cargo.lock` filename](#alt_cargolock-alternative-cargo.lock-filename)
73     * [`[oot]`: Out-of-tree build support](#oot-out-of-tree-build-support)
74     * [`[arch]`: Architecture convenience aliases](#arch-architecture-convenience-aliases)
75     * [`[misc]`: Miscellaneous individual nailing-cargo config](#misc-miscellaneous-individual-nailing-cargo-config)
76   * [Limitations and bugs](#limitations-and-bugs)
77   * [Contributing and legal](#contributing-and-legal)
78     * [Legal](#legal)
79
80 Using local crates, or locally modified crates
81 ==============================================
82
83 cargo does not work well with local crates,
84 especially completely unpublished ones.
85 (See [issue#6713](https://github.com/rust-lang/cargo/issues/6713),
86 [stackoverflow](https://stackoverflow.com/questions/33025887/how-to-use-a-local-unpublished-crate),
87 [issue#1481](https://github.com/rust-lang/cargo/issues/1481),
88 [my blog](https://diziet.dreamwidth.org/1805.html).)
89
90 Using a local version of a crate should be possible without putting
91 paths into your `Cargo.toml` and without editing complex
92 configuration.
93
94 How nailing-cargo helps with using local crates
95 -----------------------------------------------
96
97 nailing-cargo temporarily edits all the `Cargo.toml` files in all the
98 subdirectories you mention, to refer to each other; then it runs
99 cargo; and then it puts everything back.
100
101 Telling nailing-cargo how to massage `Cargo.toml`
102 -------------------------------------------------
103
104 To find the subdirectories, and the packages, nailing-cargo looks for
105 `subdirs` and `packages` in `Cargo.nail`.
106
107 For straightforward use, write `subdirs` as a multi-line string
108 containing a list of subdirectory names one per line.  In each of
109 these directories `Cargo.toml` will be massaged, and the package there
110 will be used for other massaged `Cargo.toml`s.
111
112 See the [Configuration reference](#configuration-reference) for full details.
113
114 Scope of nailing-cargo's local crate functionality
115 --------------------------------------------------
116
117 nailing-cargo's `Cargo.toml` massaging will allow you to easily build
118 an interdepending set of local packages, possibly even including
119 private unpublished packages, and/or locally-modified versions of
120 published packages.  These local packages can freely depend on
121 published packages (eg from `crates.io`) in the usual way.
122
123 Compared to the corresponding cargo feature, nailing-cargo's approach:
124 (i) works even for local crates that have not been published anywhere; and
125 (ii) is a lot simpler to configure.
126
127 But nailing-cargo's local crate support won't work if any non-local
128 crate needs to be rebuilt against a local crate (ie, a local version
129 of one of its dependencies).  If that is your requirement, either make
130 local versions of the intermediate crates in the dependency graph, or
131 use the cargo override facility --- see [Overriding
132 Dependencies](https://doc.rust-lang.org/cargo/reference/overriding-dependencies.html)
133 in the Cargo Book.
134
135 Out-of-tree builds
136 ==================
137
138 It is often desirable to run builds in a way that does not write to
139 the source tree.  cargo's enthusiastic approach to the dependency
140 management task means that it is a good idea to try to insulate your
141 main working environment from the many things cargo has decided to
142 download and execute.
143
144 However, when you tell cargo to do an out of tree build (using
145 `--manifest-path`) it will insist on `Cargo.lock` being in the source
146 directory, and often will insist on writing to it.
147
148 How nailing-cargo helps with out-of-tree builds
149 -----------------------------------------------
150
151 nailing-cargo (configured appropriately) copies files back and forth
152 to between the source and build directories, and runs cargo as your
153 build user.
154
155 The `Cargo.lock` must still be saved in your source tree somewhere.
156 nailing-cargo arranges this for you.  You can either put this file in
157 `.gitignore`; or commit it to git; or you can tell nailing-cargo to
158 save it as something like `Cargo.lock.example`.
159
160 Depending on the circumstances, nailing-cargo uses a variety of
161 strategies, including `--manifest-path` options, and linkfarming, to
162 make out of tree builds.  Some crates don't natively support
163 out-of-tree builds, in which case passing a `--linkfarm` option to
164 nailing-cargo can be helpful.
165
166 Configuring out-of-tree builds
167 ------------------------------
168
169 To enable out-of-tree-builds, put an `[oot]` section in your
170 `Cargo.nail` or one of nailing-cargo's other config files.
171 In that section, specify at least `use`.
172
173 Also, specify `dir`, or create a symlink `Build` next to `Cargo.nail`,
174 pointing to to your build area.
175
176 For example,
177 ```
178 [oot]
179 use='ssh'
180 user='rustcargo'
181 ```
182 will have nailing-cargo run `ssh rustcargo@localhost` to
183 run build commands.
184
185 Target architecture convenience aliases
186 =======================================
187
188 If you are cross-building you may need to tell cargo `--target=`.
189 The architecture names are quite long and inconvenient.
190
191 A simple shell alias would help a lot, except that cargo rejects
192 `--target=` when it thinks it's not needed.
193
194 In your nailing-cargo config, you can write something like
195 `arch.RPI='arm-unknown-linux-gnueabihf'`.  Then `nailing-cargo -TRPI`
196 will DTRT.  In fact, you do not even need to specify that particular
197 arch alias, since it is built-in to nailing-cargo.
198
199 Default change to offline mode
200 ==============================
201
202 It seems to me that build tools should be explicit about their use of
203 the network.  So by default, nailing-cargo passes `--offline` to
204 cargo.
205
206 If you disagree with my opinion, write `misc.online=true` in your
207 nailing-cargo configuration.  `misc.online=false`, and command line
208 options, are also available, for overriding.
209
210 If you agree with me, you may wish to use `nailing-cargo
211 generate-lockfile`, which can update (even an existing) `Cargo.lock`
212 without going online, instead of `update`.
213
214 Invocation and command-line option reference
215 ============================================
216
217 Usages
218 ------
219
220 ```
221 1$ nailing-cargo <nailing-opts> <cargo-opts> [--] <subcmd>...
222 2$ nailing-cargo <nailing-opts> --- <cargo> <cargo-opts> [--] <subcmd>...
223 3$ nailing-cargo <nailing-opts> --- [--] <build-command>...
224 ```
225 Ususally the `--` is not needed.  (It should generally be passed by
226 programs which wrap nailing-cargo.  See [Invocation argument disambiguation rules](#invocation-argument-disambiguation-rules), below.)
227
228 In usage 1, nailing-cargo runs `cargo` (from `PATH`).  In the usage 2
229 nailing-cargo runs `<cargo>`.  In both these cases it adds its own
230 options to control cargo's behaviour.  In both of these cases
231 nailing-cargo looks at `<subcmd>` to determine the cargo subcommand
232 being run: this controls various defaults, to try to do the right
233 things.
234
235 In the third syntax, nailing-cargo runs `<build-command>...` without
236 additional arguments and does not attempt to identify the cargo
237 subcommand(s) that it will run.  Possibly it will be necessary to pass
238 `--online` or `--cargo-lock-update`, or even `--cargo-*arg*`
239
240 ### Invocation argument disambiguation rules ###
241
242 For authors of tools which call nailing-cargo (and pedants):
243
244 The usages overlap in syntax!  nailing-cargo follows the following
245 rules when interpreting its command line:
246
247   * The first option not recognised as a nailing-cargo option is
248     treated as the start of the `<cargo-opts>`.
249
250   * `<cargo-opts>` are terminated by `--` (which is removed) or the
251     first argument which does not start with a `-` or `+`.
252
253     (It is not possible to get nailing-cargo to pass the value `--`
254     as a separate argument to a cargo global option, but cargo global
255     options can typically take the values cuddled with `=`, so doing
256     that is not necessary.)
257
258   * After `---`, nailing-cargo will search for a `--`, to the end of
259     the arguments if necessary.  The position of the `--` determines
260     whether this is usage 2 or usage 3, and what `<subcmd>` is.
261
262     If the arguments after `nailing-cargo ... ---` might contain `--`
263     anywhere, an explicit `--` should be passed.
264
265   * If no `--` appears after `---`, the word after `---` is the
266     command to run; if its final pathname component contains the
267     string `cargo`, it is treated as `<cargo>` (implying usage 2 and
268     the search for `<subcmd>`).  Otherwise it is treated as
269     `<build-command>` (usage 3).
270
271 Options
272 -------
273
274   * `-v`: Increase verbosity.  Default is 1.
275
276   * `-q`: Set verbosity to 0.
277
278   * `-D`: Increase amount of debugging dump.
279
280   * `-n`: "No action": stop after writing `Cargo.toml.nailing~`
281        everywhere, and do not run any build command.
282
283   * `-f` | `--force`: Force going ahead even if problems are likely.
284     (E.g., due to missing `-E` option.)
285
286   * `-T<arch>` | `--target=<arch>`
287
288     Specify target architecture.
289
290     This option translates to a `--target=<arch>` option to cargo
291     (when the subcommand accepts it).
292
293     If `<arch>` starts with a capital ascii letter, it is an alias
294     for some other arch: it is looked up in the configuration, and
295     then in the builtin arch alias list.  The builtin list is
296     equivalent to:
297
298 ```
299 [arch]
300 RPI="arm-unknown-linux-gnueabihf"
301 WASM="wasm32-unknown-unknown"
302 ```
303
304   * `-o` | `--online` | `-O` | `--offline`
305
306     Whether to allow cargo to make network access.  nailing-cargo
307     always passes `--offline` to cargo, unless `--online` is in
308     force.  The default value depends on the configuration and the
309     cargo subcommand - see [`[misc]` `online`](#misc_online),
310     under Configuration.
311
312   * `-u` | `--cargo-lock-update` | `-U` | `--no-cargo-lock-update`
313
314     Allows (or disallows) cargo to update `Cargo.lock` in the source
315     directory.  Without this enabled, nailing-cargo passes `--locked`
316     to cargo.
317
318     With this enabled, in an out-of-tree build the `Cargo.lock` and
319     `Cargo.toml` are copied to the build directory along with a
320     linkfarm, to fool cargo.  After cargo has run, the resulting
321     `Cargo.lock` is copied back to the source tree.
322
323     Default is no update unless the whole point of the cargo
324     subcommand is to update `Cargo.lock`.
325
326   * `-c` | `-C`
327
328     Controls the addition of cargo command line options; ie,
329     whether nailing-cargo should treat the build command as if it
330     were cargo.
331     With `-C`, nailing-cargo will not add additional options
332     to the build command.  With `-c` it will pass those options
333     after the cargo subcommand (usages 1 and 2) or right
334     after the build command (usage 3).
335
336     The cargo options are in any case also passed in the
337     environment - see [Environment of the build command](#environment-of-the-build-command).
338
339     The default is to pass cargo options if the command line
340     parsing yielded a cargo command and options (usages 1 and 2),
341     rather than a non-cargo build command (usage 3).  `-C` and `-c`
342     do not affect the parsing of nailing-cargo's command line.
343
344   * <a name="s_subcommand">`-s<subcommand>`</a>
345
346     Behave as if the build command were `cargo <subcommand>`.
347     This influences the logic which tries to determine which
348     options to pass to cargo, whether cargo needs to be online, and
349     whether cargo might want to update `Cargo.lock`.
350
351     nailing-cargo knows about the following commands:
352      * `fetch`
353      * `fmt`
354      * `generate-lockfile`
355      * `init`
356      * `metadatay`
357      * `miri`
358      * `update`
359      * `upgrades`
360
361     All other subcommands are (silently) treated the same way
362     as `build` (ie, no subcommand properties).  See
363     `--subcommand-props` for more detail about how the
364     subcommand affects nailing-cargo's behaviour.
365
366     The default is to use the cargo subcommand found from parsing
367     nailing-cargo's command line.  NB: `-s` does not affect
368     which build command (and which cargo subcommand) is actually run.
369
370   * <a name="subcommand_props">`--subcommand-props=<prop>,...`</a>
371
372     Specify the properties of the subcommand.  This is an
373     alternative to `-s<subcmd>`.  The usual properties are:
374
375     * `lock_update`: cargo will want to update `Cargo.lock`.  (The `-u` and `-U` options override this.)
376     * `online`: this subcommand makes no sense to run offline.  (The `-o` and `-O` options, and the configuration, can override this.)
377     * `edits`: The purpose of this subcommand is to edit the source tree.  Imples that `--edit-sources` is necessary (unless `--force`).
378     * `creates`: The purpose of this subcommand is to edit the source tree and create new files in it.  Imples that `-EE` (`--edit-sources`, twice) is necessary (unless `--force`).
379     * `!target`: cargo would reject `--target=<arch>`; in this case nailing-cargo's `-T` option is ineffective.
380     * `!target-dir`: cargo would reject `--target-dir`, so don't pass it.  (Usually we pass `--target-dir=target` when we pass `--manifest-path`, since cargo's default is `target` in the same directory as `Cargo.toml`.)
381     * `linkfarm-shallow`: Make the default be `--linkfarm=shallow`.  This is the default for `miri` and can also be used for other subcommands which do not understandg `--manifest-path` properly.
382     * `linkfarm-gitclean`: Make the defaults be `--linkfarm=git` and `--preclean-build=src`.
383
384     There are also some properties which should not be needed, but are
385     provided for completeness.  Do not use these to solve the problem
386     of nailing-cargo passing cargo options to a build command which is
387     not cargo - use `-C` for that.  The properties whose use is discouraged:
388
389     * `!manifest-path`: cargo would reject `--manifest-path`, so don't pass it (and don't pass `--target-dir` either).  Only makes any difference for out-of-tree builds.  Things will probably go wrong unless the build command looks at `[NAILING]CARGO_MANIFEST_DIR`.
390     * `!locked`: cargo would reject `--locked`, so don't pass it.  Hazardous.
391     * `!offline`: the build command would reject `--offline`, so never pass it.  *Not* overridden by configuration or command line.
392
393
394   * `--linkfarm[=no|shallow|git|full]`: Override nailing-cargo's
395     approach to out-of-tree builds.  Normally nailing-cargo chooses
396     automatically whether to make a linkfarm, and precisely what kind
397     of linkfarm, based on the cargo subcommand.  The linkfarm styles
398     are:
399
400     * `no`: Do not make a linkfarm; pass a `--manifest-path` option
401       pointing to the actual source directory.  This is the default
402       for most cargo commands.
403
404     * `shallow`: Symlink top-level objects in the source directory,
405       including whole subdirectories.  This the default when
406       nailing-cargo thinks cargo is going to update `Cargo.lock`.
407
408     * `git`: Make a deep linkfarm, with subdirectories.  Symlink
409       those objects tracked by git.  This is the default for
410       `cargo publish`.
411
412     * `full`: Make a deep linkfarm and symlink every nondirectory found
413       in the source tree.  This will including all sorts of junk,
414       including for example editor backup files.
415
416     Whenever nailing-cargo linkfarms, old symlinks pointing back to
417     the source tree are deleted.  In each case, `Cargo.lock` is not
418     symlinked, but copied.  If nailing-cargo expects cargo to update
419     `Cargo.lock`, it will copy it back to the source tree afterwards.
420     Just `--linkfarm` is the same as `--linkfarm=git`.
421
422   * `--edit | --edit-sources | -E`: Permits the cargo command to edit
423     sources in the source tree.  This is achieved by *copying* the
424     entire source tree (all files tracked by git) into the destination
425     directory, and then copying back all changed files.  *Only git
426     tracked filles* can be edited by the cargo command; edits to
427     other files, and creation of new files, will be ignored.
428
429     When this option is repeated (**`-EE`**), the cargo subcommand can
430     create new files including dotfiles (but nothing in the toplevel
431     `target` and nothing called `.git`).  (This also enables
432     `--preclean=src` by default.)
433
434     If you are running out of tree builds for privsep reasons, you
435     should use git to review the edits made by the cargo command and
436     either stage and commit them, or reject them.
437
438     This option is overridden by a subsequent `--linkfarm` options.
439
440     `-E` or `-f` is needed for `nailing-cargo fmt`.  `-EE` or `-f` is
441     needed for `nailing-cargo init`.  (`-E` is never the default.)
442
443   * `--just-linkfarm[=shallow|git|full]`: Make the out-of-tree
444     linkfarm as if for `--cargo-lock-update`, but do not actually run
445     any command, nor try to copy back a a generated `Cargo.lock`.
446     Forces `--keep-linkfarm` (even if the contrary is also specified).
447
448     With a linkfarming mode, overrides (and is overridden by)
449     `--linkfarm=`.  Without a linkfarming mode, and without
450     `--linkfarm`, the default is `shallow`.
451
452   * `--keep-linkfarm` | `--clean-linkfarm`: When doing an out-of-tree
453     lockfile update, controls whether the linkfarm is kept afterwards.
454     Overrides the `oot.clean` config option.  (Default: keep.)
455
456   * `--[no-]preclean-build[=no|src|full]`: When doing an out-of-tree
457     build, controls whether the build directory is purged of leftover
458     contents *before* the build is run.  The usual default is `no`.
459     For `cargo publish`, the default is `src`, which deletes
460     everything except the directory `target`.  `full` means to clean
461     out that too.
462
463   * `--leave-nailed`: At the end, leave all the `Cargo.toml` files in
464     their edited state, rather than (trying to) clean them up.  To
465     clean this up later, run `nailing-cargo` again without this option.
466     Without this option, the nailed versions are left in
467      `.Cargo.toml.nailed~`, so you only need this if you want to run
468     cargo by hand or something.
469
470   * `--just-run`: Execute the specified command (perhaps concurrently
471     with other commands), but do not manipulate any of Cargo's
472     metadata fiules.  Useful in out of tree mode to invoke a non-cargo
473     command in the build environment.  Implies `--no-nail`,
474     `--no-cargo-lock-manip` and `--no-concurrency-lock` (overrideable
475     by later occurrences of the corresponding opposite options).
476     Hazardous if the command is actually cargo, or will run cargo.
477
478   * `--no-nail` | `--nail` (default): Whether to actually nail - ie,
479     whether to actually modify any `Cargo.toml`s while running the
480     command.  This can be useful, e.g., in out-of-tree mode with
481     commands that don't actually invoke cargo.  Consider passingm
482     `--no-lock` too.
483
484   * `--no-cargo-lock-manip` | `--cargo-lock-manip` (default):
485     Whether to manipulate `Cargo.lock`.  For example, whether to copy
486     it to the build tree and back (in out of tree mode) and whether to
487     rename it from an alternative lockfile name, and put it back.
488     Overrides `-u` etc.
489
490   * `--no-concurrency-lock` | `--concurrency-lock` (default): Whether
491     to take the nailing-cargo lock.  Some kind of protection against
492     concurrent operation is necessary to prevent multiple instances of
493     nailing-cargo trashing each others' work, and possibly mangling
494     your `Cargo.toml`s, `Cargo.lock`, etc., so `--no-concurrency-lock`
495     is dangerous unless you take other measures against concurrent
496     execution.
497
498   * `-h` | `--help`: Print usage summary.
499
500   * `--doc` | `--man` | `--manual`: Format this manual into html using
501     `pandoc` and display it with `w3m`.
502
503 Environment of the build command
504 --------------------------------
505
506 nailing-cargo passes these environment variables to the build command:
507
508   * `CARGO_MANIFEST_DIR`: invocation `.` (invocation directory)
509   * `NAILINGCARGO_MANIFEST_DIR`: same as `CARGO_MANIFEST_DIR`
510   * `NAILINGCARGO_WORKSPHERE`: invocation `..` (parent)
511   * `NAILINGCARGO_BUILD_DIR`: build directory (even if same as source)
512   * `NAILINGCARGO_BUILDSPHERE`: parent of build dir (only set if out-of-tree)
513   * `NAILINGCARGO_CARGO_OPTIONS`: additional options that nailing-cargo passed (or would pass) to cargo.  Space-separated; does not include `--manifest-path`.
514
515 All of these are absolute paths.
516
517 ### Build commands which wrap cargo ###
518
519 If you specify a build command which eventually runs cargo, you may
520 wish to pass on to your cargo the options which nailing-cargo would
521 have passed.  This will definitely be necessary if you are using nailing-cargo's out-of-tree facility.
522
523 In such a situation, do it like this:
524 ```
525   cargo build --manifest-path="${CARGO_MANIFEST_DIR-.}"/Cargo.toml $NAILINGCARGO_CARGO_OPTIONS
526 ```
527
528 If you need to run a cargo subcommand which doesn't understand some of
529 nailing-cargo's options, currently, you must strip them out of
530 `NAILINGCARGO_CARGO_OPTIONS` yourself - or pass some `-s` or
531 `--subcmd-props` option to nailing-cargo (but that is a layering
532 violation and may not work if one build command runs various different
533 cargo runes).
534
535 Configuration reference
536 =======================
537
538 nailing-cargo reads these configuration files:
539 ```
540     /etc/nailing-cargo/cfg.toml
541     ~/.nailing-cargo.toml
542     ./.nailing-cargo.toml
543     ../Nailing-Cargo.toml
544     ../Cargo.nail
545 ```
546 Settings in later-mentioned files override ones in earlier-mentioned
547 files.
548
549 Source directories and packages (toplevel)
550 ------------------------------------------
551
552 Note that unlike everything else, these keys (`packages` and
553 `subdirs`) are read only from `Cargo.nail` (see "Limitations and
554 bugs", below).
555
556 These keys specify a combination of (i) a mapping from package name to
557 source subdirectory (ii) a set of subdirectories whose `Cargo.toml`
558 must be massaged.
559
560   * `packages`: a map keyed by package name, giving the subdirectory
561     for each one.
562
563     This causes each mentioned subdirectory's `Cargo.toml` to be
564     massaged, and records that subdirectory as the source for that
565     package.  (nailing-cargo will check that subdirectory actually
566     contains the indicated package.)
567
568     Each value can be just the subdirectory name (eg `[packages]`
569     `mylibrary='mylibrary-test'`) or itself a map with the key `subdir`
570     (eg `[packages.mylibrary]` `subdir='mylibrary-test'`).
571
572   * `subdirs`: a list of subdirectory names to process.
573
574     Each subdirectory's `Cargo.toml` will be massaged.  Also, the
575     subdirectory will be examined to see what package it contains; it
576     will then be used as the source for that package, unless that
577     package appears in an entry in `packages`, or an earlier entry in
578     `subdirs`.
579
580     This can be a list of strings (eg `subdirs =
581     ['myproject','mylibrary']`).  Or it can be single multi-line
582     string containing one subdirectory name per line; in that
583     case, `#`-comments are supported and tabs and spaces are ignored
584     (see "Most basic example usage" above.)
585
586 In each case the subdirectory should usually be a relative pathname;
587 it is relative to the directory containing `Cargo.nail`.
588
589 `[alt_cargolock]`: Alternative `Cargo.lock` filename
590 ----------------------------------------------------
591
592 To control use of alternative `Cargo.lock` filename, use the section
593 `[alt_cargolock]`.  Settings here:
594
595   * `file = <some leafname>`.
596
597   * `file = true`: Equivalent to `file = "Cargo.lock.example"`.
598     (This is the default.)
599
600   * `file = false`: Disables this feature.
601
602   * `force = false`: Uses the alternative filename only if it
603      already exists.  (This is the default.)
604
605   * `force = true`: Always uses the alternative filename.
606
607 `[oot]`: Out-of-tree build support
608 ----------------------------------
609
610   * `dir`: The build directory.  If relative, it is relative to the
611    parent of the invocation directory (and could be a symlink then).
612    Default is `Build` (assuming `use` is specified).
613
614    The build directory will contain one subdir for each package: each
615    subdir in the build dir corresponds to one source dir where
616    nailing-cargo was invoked.  nailing-cargo will arrange to create
617    these subdirectories, so the build directory can start out empty.
618
619   * `use`: How to become the build user.  Needs to be combined
620     with other setting(s):
621
622     * `ssh`: Use ssh.  `user` must be given as well and can be
623        a username on localhost, or the `<user>@<host>`
624        argument to ssh.
625
626     * `command_args`: `command` must be specified as a list,
627        specifying a command and arguments which work like `nice`.
628
629     * `command_sh`: `command` must be specified as a list,
630        specifying a command and arguments which work like `sh -c`.
631
632     * `null`: Run builds as the same user.
633
634     * `really`: Use `really` from `chiark-really.deb`.
635        `user` must be given as well.
636
637     * `disable': Disable this feature, even if `dir` is set.
638
639  * `command`: The command to run for `command_sh` or `command_args`.
640
641    In both cases, this is a command and its arguments/options.  The
642    list will be passed to `execvp`.  The difference between
643    `command_args` and `command_sh` is in what nailing-cargo appends to
644    the specified `command` list:
645
646    For `command_args`, nailing cargo appends multiple more arguments;
647    each one should be passed as-is as a single argument to the actual
648    build command.  This is correct if `command` is a program like
649    `nice` or `really`, which takes a command and its arguments and
650    does not go via the shell.
651
652    For `command_sh`, nailing-cargo appends one single further
653    argument.  That argument is a shell command; nailing-cargo
654    constructs it by shell-quoting the real command and arguments and
655    wrapping them up in a small script, the text of which becomes the
656    extra argument to `command`.  This is correct if `command` will
657    pass its argument to a bournelike shell - for example, if `command`
658    is an ssh rune for a remote account whose shell is `/bin/sh` or
659    `/bin/bash`.
660
661  * `user`: The build username, for `really` and `ssh`.  For `ssh`, can
662    be just the local username (meaning `@localhost`), or
663    `<user>@<host>`.
664
665  * `clean` (boolean): When doing a `Cargo.lock` update, which involves
666    linkfarming in the build directory, whether the clean up the
667    linkfarm afterwards.  Default: `true`.  Can be overridden by
668    `--keep-linkfarm` or `--clean-linkfarm`.
669
670 `[arch]`: Architecture convenience aliases
671 ------------------------------------------
672
673 This is a map from archictecture aliases to full cargo architecture
674 names.  The keys are the aliases; each entry should be a string, the
675 cargo architecture name.
676
677 Only keys starting with an ascii uppercase letter are relevant, since
678 other names are not looked up in this alias map.
679
680 `[misc]`: Miscellaneous individual nailing-cargo config
681 -------------------------------------------------------
682
683  * <a name="misc_online">`online`</a>:
684
685    Specifies whether to allow or prevent cargo from accessing the
686    network.  Value is a boolean or `'auto'`.  `'auto'` permits online
687    access if the cargo subcommand being invoked is one whose main
688    purpose involves online access.
689
690    Implemented by passing `--offline` to cargo when necessary ---
691    cargo's default is online.  nailing-cargo's default is
692    `'auto'`.
693
694 Limitations and bugs
695 ====================
696
697   * nailing-cargo temporarily dirties your source trees, including
698     particularly `Cargo.toml` and `Cargo.lock`; and if nailing-cargo
699     crashes or is interrupted these changes may be left behind.
700     Unfortunately it is not possible to avoid this temporary dirtying
701     because the cargo team have deliberately made cargo inflexible -
702     [issue#6715](https://github.com/rust-lang/cargo/issues/6715).  
703     At least, running nailing-cargo again will clean up any mess
704     left by an interrupted run.
705
706   * nailing-cargo needs to understand the behaviour of the cargo
707     subcommand you are running - especially for out-of-tree builds.
708     nailing-cargo only has a short builtin list of commands it knows
709     about (see [`-s<subcommand`](#s_subcommand)).  For other commands, you may need to
710     add an entry to `@subcmd_props` in the source, or use
711     [`--subcommand-props`](#subcommand_props).
712
713     Contributions of additonal entries to `@subcmd_props` (or bug
714     reports about missing entries) are of course very welcome.
715
716   * Out-of-tree builds ought to support `sudo`.  Patches welcome.
717
718   * Out-of-tree builds require a unified filesystem view: eg, different
719     users on the same host, NFS, or something.
720
721     Specifically, the invocation and build execution environments must
722     both have visibility of the source and build directories, at the
723     same absolute pathnames.  The invocation environment must be able
724     to write to the build environment (but vice versa is not
725     required).
726
727     This could be improved.
728
729   * The alternative `Cargo.lock` filename must currently be a leafname.  I
730     think fixing this just involves review to check other values work
731     properly.
732
733   * The alternative `Cargo.lock` file must be on the same filesystem
734     as the source tree.  This is not so easy to fix; we would want the
735     existing algorithm but a fallback for the different-filsystem case.
736
737   * `Cargo.nail` is unconditionally looked for in the parent directory.
738     Ideally this should be configurable, and also perhaps be able to
739     combine multiple `Cargo.nail` files?  Relatedly, although
740     nailing-cargo can read multiple config files, it can only handle
741     one file specifying directories and packages.
742
743   * nailing-cargo uses a single lockfile alongside your `Cargo.nail`,
744     rather than a more sophisticated scheme involving locking
745     particular directories.  This means that if you run multiple
746     copies of nailing-cargo at once, in different directories, but
747     with `Cargo.nail` files which imply overlapping sets of package
748     directories, things will go Badly Wrong.
749
750 Contributing and legal
751 ======================
752
753 nailing-cargo is Free Software.
754
755 Please help improve it.  Contributions (to address the limitations, or
756 to add new facilities to help work with cargo) are welcome by email to
757 `ijackson@chiark.greenend.org.uk` or via the [Salsa
758 project](https://salsa.debian.org/iwj/nailing-cargo).
759
760 If you plan to do substantial work, please do get in touch with a
761 sketch of your proposed changes.
762
763 Legal
764 -----
765
766 This project accepts contributions based on the git commit
767 Signed-off-by convention, by which the contributors certify their
768 contributions according to the Developer Certificate of Origin version
769 1.1 - see the file DEVELOPER-CERTIFICATE.
770
771 Copyright (C) 2019-2020 Ian Jackson and others
772
773 This program is free software: you can redistribute it and/or modify
774 it under the terms of the GNU Affero General Public License as
775 published by the Free Software Foundation, either version 3 of the
776 License, or (at your option) any later version.
777
778 This program is distributed in the hope that it will be useful,
779 but WITHOUT ANY WARRANTY; without even the implied warranty of
780 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
781 GNU Affero General Public License for more details.
782
783 You should have received a copy of the GNU Affero General Public License
784 along with this program.  If not, see <http://www.gnu.org/licenses/>.
785
786 Individual files generally contain the following tag in the copyright
787 notice, instead of the full licence grant text:
788 ```
789    SPDX-License-Identifier: AGPL-3.0-or-later
790 ```
791 As is conventional, this should be read as a licence grant.