chiark / gitweb /
README.md: Fix doc for --linkfarm=full
[nailing-cargo.git] / README.md
1 nailing-cargo
2 =============
3
4 This is a wrapper tool for cargo, the Rust build tool and package
5 manager.  Functions:
6
7  * Conveniently use local crates, including completely
8    unpublished crates.
9  * Perform out-of-tree builds, including in an account with
10    no write access to the source tree.
11  * Provide convenience aliases for target architecture names.
12  * Make the default be offline (ie, not to access the internet).
13
14 These functions are of course configurable.
15
16 The primary source of information for nailing-cargo is the file
17 `../Cargo.nail` (which is in TOML syntax).  You put `Cargo.nail`
18 alongside the top-level git repositories you are working with, and
19 invoke nailing-cargo from the git directory containing the Rust
20 package you want to build.
21
22 Installing
23 ----------
24
25 nailing-cargo is designed to be run out of a git clone:
26
27 ```
28 $ git clone https://salsa.debian.org/iwj/nailing-cargo.git
29 $ ln -s `pwd`/nailing-cargo/nailing-cargo ~/bin
30 ```
31
32 It is self-contained, depending only on a reasonably functional Perl
33 installation.
34
35 Most basic example usage
36 ------------------------
37
38 ```
39 $ cd myproject
40 $ cat >../Cargo.nail
41 subdirs="""
42 myproject
43 mylibrary
44 """
45 $ nailing-cargo -u fetch
46 $ nailing-cargo build
47 ```
48
49 Documentation table of contents
50 -------------------------------
51
52 <!-- TOC autogenerated by ./markdown-toc-filter, do not edit -->
53
54   * [Introduction](#nailing-cargo)
55     * [Installing](#installing)
56     * [Most basic example usage](#most-basic-example-usage)
57     * [Documentation table of contents](#documentation-table-of-contents)
58   * [Using local crates, or locally modified crates](#using-local-crates-or-locally-modified-crates)
59     * [How nailing-cargo helps with using local crates](#how-nailing-cargo-helps-with-using-local-crates)
60     * [Telling nailing-cargo how to massage `Cargo.toml`](#telling-nailing-cargo-how-to-massage-cargo.toml)
61   * [Out-of-tree builds](#out-of-tree-builds)
62     * [How nailing-cargo helps with out-of-tree builds](#how-nailing-cargo-helps-with-out-of-tree-builds)
63     * [Configuring out-of-tree builds](#configuring-out-of-tree-builds)
64   * [Target architecture convenience aliases](#target-architecture-convenience-aliases)
65   * [Default change to offline mode](#default-change-to-offline-mode)
66   * [Invocation and command-line option reference](#invocation-and-command-line-option-reference)
67     * [Usages](#usages)
68     * [Options](#options)
69     * [Environment of the build command](#environment-of-the-build-command)
70   * [Configuration reference](#configuration-reference)
71     * [Source directories and packages (toplevel)](#source-directories-and-packages-toplevel)
72     * [`[alt_cargolock]`: Alternative `Cargo.lock` filename](#alt_cargolock-alternative-cargo.lock-filename)
73     * [`[oot]`: Out-of-tree build support](#oot-out-of-tree-build-support)
74     * [`[arch]`: Architecture convenience aliases](#arch-architecture-convenience-aliases)
75     * [`[misc]`: Miscellaneous individual nailing-cargo config](#misc-miscellaneous-individual-nailing-cargo-config)
76   * [Limitations and bugs](#limitations-and-bugs)
77   * [Contributing and legal](#contributing-and-legal)
78     * [Legal](#legal)
79
80 Using local crates, or locally modified crates
81 ==============================================
82
83 cargo does not work well with local crates,
84 especially completely unpublished ones.
85 (See [issue#6713](https://github.com/rust-lang/cargo/issues/6713),
86 [stackoverflow](https://stackoverflow.com/questions/33025887/how-to-use-a-local-unpublished-crate),
87 [issue#1481](https://github.com/rust-lang/cargo/issues/1481),
88 [my blog](https://diziet.dreamwidth.org/1805.html).)
89
90 Using a local version of a crate should be possible without putting
91 paths into your `Cargo.toml` and without editing complex
92 configuration.
93
94 How nailing-cargo helps with using local crates
95 -----------------------------------------------
96
97 nailing-cargo temporarily edits all the `Cargo.toml` files in all the
98 subdirectories you mention, to refer to each other; then it runs
99 cargo; and then it puts everything back.
100
101 Telling nailing-cargo how to massage `Cargo.toml`
102 -------------------------------------------------
103
104 To find the subdirectories, and the packages, nailing-cargo looks for
105 `subdirs` and `packages` in `Cargo.nail`.
106
107 For straightforward use, write `subdirs` as a multi-line string
108 containing a list of subdirectory names one per line.  In each of
109 these directories `Cargo.toml` will be massaged, and the package there
110 will be used for other massaged `Cargo.toml`s.
111
112 See the [Configuration reference](#configuration-reference) for full details.
113
114 Scope of nailing-cargo's local crate functionality
115 --------------------------------------------------
116
117 nailing-cargo's `Cargo.toml` massaging will allow you to easily build
118 an interdepending set of local packages, possibly even including
119 private unpublished packages, and/or locally-modified versions of
120 published packages.  These local packages can freely depend on
121 published packages (eg from `crates.io`) in the usual way.
122
123 Compared to the corresponding cargo feature, nailing-cargo's approach:
124 (i) works even for local crates that have not been published anywhere; and
125 (ii) is a lot simpler to configure.
126
127 But nailing-cargo's local crate support won't work if any non-local
128 crate needs to be rebuilt against a local crate (ie, a local version
129 of one of its dependencies).  If that is your requirement, either make
130 local versions of the intermediate crates in the dependency graph, or
131 use the cargo override facility --- see [Overriding
132 Dependencies](https://doc.rust-lang.org/cargo/reference/overriding-dependencies.html)
133 in the Cargo Book.
134
135 Out-of-tree builds
136 ==================
137
138 It is often desirable to run builds in a way that does not write to
139 the source tree.  cargo's enthusiastic approach to the dependency
140 management task means that it is a good idea to try to insulate your
141 main working environment from the many things cargo has decided to
142 download and execute.
143
144 However, when you tell cargo to do an out of tree build (using
145 `--manifest-path`) it will insist on `Cargo.lock` being in the source
146 directory, and often will insist on writing to it.
147
148 How nailing-cargo helps with out-of-tree builds
149 -----------------------------------------------
150
151 nailing-cargo (configured appropriately) copies files back and forth
152 to between the source and build directories, and runs cargo as your
153 build user.
154
155 The `Cargo.lock` must still be saved in your source tree somewhere.
156 nailing-cargo arranges this for you.  You can either put this file in
157 `.gitignore`; or commit it to git; or you can tell nailing-cargo to
158 save it as something like `Cargo.lock.example`.
159
160 Depending on the circumstances, nailing-cargo uses a variety of
161 strategies, including `--manifest-path` options, and linkfarming, to
162 make out of tree builds.  Some crates don't natively support
163 out-of-tree builds, in which case passing a `--linkfarm` option to
164 nailing-cargo can be helpful.
165
166 Configuring out-of-tree builds
167 ------------------------------
168
169 To enable out-of-tree-builds, put an `[oot]` section in your
170 `Cargo.nail` or one of nailing-cargo's other config files.
171 In that section, specify at least `use`.
172
173 Also, specify `dir`, or create a symlink `Build` next to `Cargo.nail`,
174 pointing to to your build area.
175
176 For example,
177 ```
178 [oot]
179 use='ssh'
180 user='rustcargo'
181 ```
182 will have nailing-cargo run `ssh rustcargo@localhost` to
183 run build commands.
184
185 Target architecture convenience aliases
186 =======================================
187
188 If you are cross-building you may need to tell cargo `--target=`.
189 The architecture names are quite long and inconvenient.
190
191 A simple shell alias would help a lot, except that cargo rejects
192 `--target=` when it thinks it's not needed.
193
194 In your nailing-cargo config, you can write something like
195 `arch.RPI='arm-unknown-linux-gnueabihf'`.  Then `nailing-cargo -TRPI`
196 will DTRT.  In fact, you do not even need to specify that particular
197 arch alias, since it is built-in to nailing-cargo.
198
199 Default change to offline mode
200 ==============================
201
202 It seems to me that build tools should be explicit about their use of
203 the network.  So by default, nailing-cargo passes `--offline` to
204 cargo.
205
206 If you disagree with my opinion, write `misc.online=true` in your
207 nailing-cargo configuration.  `misc.online=false`, and command line
208 options, are also available, for overriding.
209
210 If you agree with me, you may wish to use `nailing-cargo
211 generate-lockfile`, which can update (even an existing) `Cargo.lock`
212 without going online, instead of `update`.
213
214 Invocation and command-line option reference
215 ============================================
216
217 Usages
218 ------
219
220 ```
221 1$ nailing-cargo <nailing-opts> <cargo-opts> [--] <subcmd>...
222 2$ nailing-cargo <nailing-opts> --- <cargo> <cargo-opts> [--] <subcmd>...
223 3$ nailing-cargo <nailing-opts> --- [--] <build-command>...
224 ```
225 Ususally the `--` is not needed.  (It should generally be passed by
226 programs which wrap nailing-cargo.  See [Invocation argument disambiguation rules](#invocation-argument-disambiguation-rules), below.)
227
228 In usage 1, nailing-cargo runs `cargo` (from `PATH`).  In the usage 2
229 nailing-cargo runs `<cargo>`.  In both these cases it adds its own
230 options to control cargo's behaviour.  In both of these cases
231 nailing-cargo looks at `<subcmd>` to determine the cargo subcommand
232 being run: this controls various defaults, to try to do the right
233 things.
234
235 In the third syntax, nailing-cargo runs `<build-command>...` without
236 additional arguments and does not attempt to identify the cargo
237 subcommand(s) that it will run.  Possibly it will be necessary to pass
238 `--online` or `--cargo-lock-update`, or even `--cargo-*arg*`
239
240 ### Invocation argument disambiguation rules ###
241
242 For authors of tools which call nailing-cargo (and pedants):
243
244 The usages overlap in syntax!  nailing-cargo follows the following
245 rules when interpreting its command line:
246
247   * The first option not recognised as a nailing-cargo option is
248     treated as the start of the `<cargo-opts>`.
249
250   * `<cargo-opts>` are terminated by `--` (which is removed) or the
251     first argument which does not start with a `-` or `+`.
252
253     (It is not possible to get nailing-cargo to pass the value `--`
254     as a separate argument to a cargo global option, but cargo global
255     options can typically take the values cuddled with `=`, so doing
256     that is not necessary.)
257
258   * After `---`, nailing-cargo will search for a `--`, to the end of
259     the arguments if necessary.  The position of the `--` determines
260     whether this is usage 2 or usage 3, and what `<subcmd>` is.
261
262     If the arguments after `nailing-cargo ... ---` might contain `--`
263     anywhere, an explicit `--` should be passed.
264
265   * If no `--` appears after `---`, the word after `---` is the
266     command to run; if its final pathname component contains the
267     string `cargo`, it is treated as `<cargo>` (implying usage 2 and
268     the search for `<subcmd>`).  Otherwise it is treated as
269     `<build-command>` (usage 3).
270
271 Options
272 -------
273
274   * `-v`: Increase verbosity.  Default is 1.
275
276   * `-q`: Set verbosity to 0.
277
278   * `-D`: Increase amount of debugging dump.
279
280   * `-n`: "No action": stop after writing `Cargo.toml.nailing~`
281        everywhere, and do not run any build command.
282
283   * `-T<arch>` | `--target=<arch>`
284
285     Specify target architecture.
286
287     This option translates to a `--target=<arch>` option to cargo
288     (when the subcommand accepts it).
289
290     If `<arch>` starts with a capital ascii letter, it is an alias
291     for some other arch: it is looked up in the configuration, and
292     then in the builtin arch alias list.  The builtin list is
293     equivalent to:
294
295 ```
296 [arch]
297 RPI="arm-unknown-linux-gnueabihf"
298 WASM="wasm32-unknown-unknown"
299 ```
300
301   * `-o` | `--online` | `-O` | `--offline`
302
303     Whether to allow cargo to make network access.  nailing-cargo
304     always passes `--offline` to cargo, unless `--online` is in
305     force.  The default value depends on the configuration and the
306     cargo subcommand - see [`[misc]` `online`](#misc_online),
307     under Configuration.
308
309   * `-u` | `--cargo-lock-update` | `-U` | `--no-cargo-lock-update`
310
311     Allows (or disallows) cargo to update `Cargo.lock` in the source
312     directory.  Without this enabled, nailing-cargo passes `--locked`
313     to cargo.
314
315     With this enabled, in an out-of-tree build the `Cargo.lock` and
316     `Cargo.toml` are copied to the build directory along with a
317     linkfarm, to fool cargo.  After cargo has run, the resulting
318     `Cargo.lock` is copied back to the source tree.
319
320     Default is no update unless the whole point of the cargo
321     subcommand is to update `Cargo.lock`.
322
323   * `-c` | `-C`
324
325     Controls the addition of cargo command line options; ie,
326     whether nailing-cargo should treat the build command as if it
327     were cargo.
328     With `-C`, nailing-cargo will not add additional options
329     to the build command.  With `-c` it will pass those options
330     after the cargo subcommand (usages 1 and 2) or right
331     after the build command (usage 3).
332
333     The cargo options are in any case also passed in the
334     environment - see [Environment of the build command](#environment-of-the-build-command).
335
336     The default is to pass cargo options if the command line
337     parsing yielded a cargo command and options (usages 1 and 2),
338     rather than a non-cargo build command (usage 3).  `-C` and `-c`
339     do not affect the parsing of nailing-cargo's command line.
340
341   * <a name="s_subcommand">`-s<subcommand>`</a>
342
343     Behave as if the build command were `cargo <subcommand>`.
344     This influences the logic which tries to determine which
345     options to pass to cargo, whether cargo needs to be online, and
346     whether cargo might want to update `Cargo.lock`.
347
348     nailing-cargo knows about the following commands:
349      * `fetch`
350      * `fmt`
351      * `generate-lockfile`
352      * `update`
353
354     All other subcommands are (silently) treated the same way
355     as `build` (ie, no subcommand properties).  See
356     `--subcommand-props` for more detail about how the
357     subcommand affects nailing-cargo's behaviour.
358
359     The default is to use the cargo subcommand found from parsing
360     nailing-cargo's command line.  NB: `-s` does not affect
361     which build command (and which cargo subcommand) is actually run.
362
363   * <a name="subcommand_props">`--subcommand-props=<prop>,...`</a>
364
365     Specify the properties of the subcommand.  This is an
366     alternative to `-s<subcmd>`.  The usual properties are:
367
368     * `lock_update`: cargo will want to update `Cargo.lock`.  (The `-u` and `-U` options override this.)
369     * `online`: this subcommand makes no sense to run offline.  (The `-o` and `-O` options, and the configuration, can override this.)
370     * `edits`: The purpose of this subcommand is to edit the source tree.  Enables `--edit-sources` mode.
371     * `!target`: cargo would reject `--target=<arch>`; in this case nailing-cargo's `-T` option is ineffective.
372     * `!target-dir`: cargo would reject `--target-dir`, so don't pass it.  (Usually we pass `--target-dir=target` when we pass `--manifest-path`, since cargo's default is `target` in the same directory as `Cargo.toml`.)
373     * `linkfarm-shallow`: Make the default be `--linkfarm=shallow`.  This is the default for `miri` and can also be used for other subcommands which do not understandg `--manifest-path` properly.
374
375     There are also some properties which should not be needed, but are
376     provided for completeness.  Do not use these to solve the problem
377     of nailing-cargo passing cargo options to a build command which is
378     not cargo - use `-C` for that.  The properties whose use is discouraged:
379
380     * `!manifest-path`: cargo would reject `--manifest-path`, so don't pass it (and don't pass `--target-dir` either).  Only makes any difference for out-of-tree builds.  Things will probably go wrong unless the build command looks at `[NAILING]CARGO_MANIFEST_DIR`.
381     * `!locked`: cargo would reject `--locked`, so don't pass it.  Hazardous.
382     * `!offline`: the build command would reject `--offline`, so never pass it.  *Not* overridden by configuration or command line.
383
384
385   * `--linkfarm[=no|shallow|git|full]`: Override nailing-cargo's
386     approach to out-of-tree builds.  Normally nailing-cargo chooses
387     automatically whether to make a linkfarm, and precisely what kind
388     of linkfarm, based on the cargo subcommand.  The linkfarm styles
389     are:
390
391     * `no`: Do not make a linkfarm; pass a `--manifest-path` option
392       pointing to the actual source directory.  This is the default
393       for most cargo commands.
394
395     * `shallow`: Symlink top-level objects in the source directory,
396       including whole subdirectories.  This the default when
397       nailing-cargo thinks cargo is going to update `Cargo.lock`.
398
399     * `git`: Make a deep linkfarm, with subdirectories.  Symlink
400       those objects tracked by git.
401
402     * `full`: Make a deep linkfarm and symlink every nondirectory found
403       in the source tree.  This will including all sorts of junk,
404       including for example editor backup files.
405
406     Whenever nailing-cargo linkfarms, old symlinks pointing back to
407     the source tree are deleted.  In each case, `Cargo.lock` is not
408     symlinked, but copied.  If nailing-cargo expects cargo to update
409     `Cargo.lock`, it will copy it back to the source tree afterwards.
410     Just `--linkfarm` is the same as `--linkfarm=git`.
411
412   * `--edit | --edit-sources | -E`: Permits the cargo command to edit
413     sources in the source tree.  This is achieved by *copying* the
414     entire source tree (all files tracked by git) into the destination
415     directory, and then copying back all changed files.  *Only git
416     tracked filles* can be edited by the cargo command; edits to
417     other files, and creation of new files, will be ignored.
418
419     If you are running out of tree builds for privsep reasons, you
420     should use git to review the edits made by the cargo command and
421     either stage and commit them, or reject them.
422
423     This is the default mode for `nailing-cargo fmt`.
424
425   * `--just-linkfarm[=shallow|git|full]`: Make the out-of-tree
426     linkfarm as if for `--cargo-lock-update`, but do not actually run
427     any command, nor try to copy back a a generated `Cargo.lock`.
428     Forces `--keep-linkfarm` (even if the contrary is also specified).
429
430     With a linkfarming mode, overrides (and is overridden by)
431     `--linkfarm=`.  Without a linkfarming mode, and without
432     `--linkfarm`, the default is `shallow`.
433
434   * `--keep-linkfarm` | `--clean-linkfarm`: When doing an out-of-tree
435     lockfile update, controls whether the linkfarm is kept afterwards.
436     Overrides the `oot.clean` config option.  (Default: keep.)
437
438   * `--leave-nailed`: At the end, leave all the `Cargo.toml` files in
439     their edited state, rather than (trying to) clean them up.  To
440     clean this up later, run `nailing-cargo` again without this option.
441     Without this option, the nailed versions are left in
442      `.Cargo.toml.nailed~`, so you only need this if you want to run
443     cargo by hand or something.
444
445   * `--just-run`: Execute the specified command (perhaps concurrently
446     with other commands), but do not manipulate any of Cargo's
447     metadata fiules.  Useful in out of tree mode to invoke a non-cargo
448     command in the build environment.  Implies `--no-nail`,
449     `--no-cargo-lock-manip` and `--no-concurrency-lock` (overrideable
450     by later occurrences of the corresponding opposite options).
451     Hazardous if the command is actually cargo, or will run cargo.
452
453   * `--no-nail` | `--nail` (default): Whether to actually nail - ie,
454     whether to actually modify any `Cargo.toml`s while running the
455     command.  This can be useful, e.g., in out-of-tree mode with
456     commands that don't actually invoke cargo.  Consider passingm
457     `--no-lock` too.
458
459   * `--no-cargo-lock-manip` | `--cargo-lock-manip` (default):
460     Whether to manipulate `Cargo.lock`.  For example, whether to copy
461     it to the build tree and back (in out of tree mode) and whether to
462     rename it from an alternative lockfile name, and put it back.
463     Overrides `-u` etc.
464
465   * `--no-concurrency-lock` | `--concurrency-lock` (default): Whether
466     to take the nailing-cargo lock.  Some kind of protection against
467     concurrent operation is necessary to prevent multiple instances of
468     nailing-cargo trashing each others' work, and possibly mangling
469     your `Cargo.toml`s, `Cargo.lock`, etc., so `--no-concurrency-lock`
470     is dangerous unless you take other measures against concurrent
471     execution.
472
473   * `-h` | `--help`: Print usage summary.
474
475   * `--doc` | `--man` | `--manual`: Format this manual into html using
476     `pandoc` and display it with `w3m`.
477
478 Environment of the build command
479 --------------------------------
480
481 nailing-cargo passes these environment variables to the build command:
482
483   * `CARGO_MANIFEST_DIR`: invocation `.` (invocation directory)
484   * `NAILINGCARGO_MANIFEST_DIR`: same as `CARGO_MANIFEST_DIR`
485   * `NAILINGCARGO_WORKSPHERE`: invocation `..` (parent)
486   * `NAILINGCARGO_BUILD_DIR`: build directory (even if same as source)
487   * `NAILINGCARGO_BUILDSPHERE`: parent of build dir (only set if out-of-tree)
488   * `NAILINGCARGO_CARGO_OPTIONS`: additional options that nailing-cargo passed (or would pass) to cargo.  Space-separated; does not include `--manifest-path`.
489
490 All of these are absolute paths.
491
492 ### Build commands which wrap cargo ###
493
494 If you specify a build command which eventually runs cargo, you may
495 wish to pass on to your cargo the options which nailing-cargo would
496 have passed.  This will definitely be necessary if you are using nailing-cargo's out-of-tree facility.
497
498 In such a situation, do it like this:
499 ```
500   cargo build --manifest-path="${CARGO_MANIFEST_DIR-.}"/Cargo.toml $NAILINGCARGO_CARGO_OPTIONS
501 ```
502
503 If you need to run a cargo subcommand which doesn't understand some of
504 nailing-cargo's options, currently, you must strip them out of
505 `NAILINGCARGO_CARGO_OPTIONS` yourself - or pass some `-s` or
506 `--subcmd-props` option to nailing-cargo (but that is a layering
507 violation and may not work if one build command runs various different
508 cargo runes).
509
510 Configuration reference
511 =======================
512
513 nailing-cargo reads these configuration files:
514 ```
515     /etc/nailing-cargo/cfg.toml
516     ~/.nailing-cargo.toml
517     ./.nailing-cargo.toml
518     ../Nailing-Cargo.toml
519     ../Cargo.nail
520 ```
521 Settings in later-mentioned files override ones in earlier-mentioned
522 files.
523
524 Source directories and packages (toplevel)
525 ------------------------------------------
526
527 Note that unlike everything else, these keys (`packages` and
528 `subdirs`) are read only from `Cargo.nail` (see "Limitations and
529 bugs", below).
530
531 These keys specify a combination of (i) a mapping from package name to
532 source subdirectory (ii) a set of subdirectories whose `Cargo.toml`
533 must be massaged.
534
535   * `packages`: a map keyed by package name, giving the subdirectory
536     for each one.
537
538     This causes each mentioned subdirectory's `Cargo.toml` to be
539     massaged, and records that subdirectory as the source for that
540     package.  (nailing-cargo will check that subdirectory actually
541     contains the indicated package.)
542
543     Each value can be just the subdirectory name (eg `[packages]`
544     `mylibrary='mylibrary-test'`) or itself a map with the key `subdir`
545     (eg `[packages.mylibrary]` `subdir='mylibrary-test'`).
546
547   * `subdirs`: a list of subdirectory names to process.
548
549     Each subdirectory's `Cargo.toml` will be massaged.  Also, the
550     subdirectory will be examined to see what package it contains; it
551     will then be used as the source for that package, unless that
552     package appears in an entry in `packages`, or an earlier entry in
553     `subdirs`.
554
555     This can be a list of strings (eg `subdirs =
556     ['myproject','mylibrary']`).  Or it can be single multi-line
557     string containing one subdirectory name per line; in that
558     case, `#`-comments are supported and tabs and spaces are ignored
559     (see "Most basic example usage" above.)
560
561 In each case the subdirectory should usually be a relative pathname;
562 it is relative to the directory containing `Cargo.nail`.
563
564 `[alt_cargolock]`: Alternative `Cargo.lock` filename
565 ----------------------------------------------------
566
567 To control use of alternative `Cargo.lock` filename, use the section
568 `[alt_cargolock]`.  Settings here:
569
570   * `file = <some leafname>`.
571
572   * `file = true`: Equivalent to `file = "Cargo.lock.example"`.
573     (This is the default.)
574
575   * `file = false`: Disables this feature.
576
577   * `force = false`: Uses the alternative filename only if it
578      already exists.  (This is the default.)
579
580   * `force = true`: Always uses the alternative filename.
581
582 `[oot]`: Out-of-tree build support
583 ----------------------------------
584
585   * `dir`: The build directory.  If relative, it is relative to the
586    parent of the invocation directory (and could be a symlink then).
587    Default is `Build` (assuming `use` is specified).
588
589    The build directory will contain one subdir for each package: each
590    subdir in the build dir corresponds to one source dir where
591    nailing-cargo was invoked.  nailing-cargo will arrange to create
592    these subdirectories, so the build directory can start out empty.
593
594   * `use`: How to become the build user.  Needs to be combined
595     with other setting(s):
596
597     * `ssh`: Use ssh.  `user` must be given as well and can be
598        a username on localhost, or the `<user>@<host>`
599        argument to ssh.
600
601     * `command_args`: `command` must be specified as a list,
602        specifying a command and arguments which work like `nice`.
603
604     * `command_sh`: `command` must be specified as a list,
605        specifying a command and arguments which work like `sh -c`.
606
607     * `null`: Run builds as the same user.
608
609     * `really`: Use `really` from `chiark-really.deb`.
610        `user` must be given as well.
611
612     * `disable': Disable this feature, even if `dir` is set.
613
614  * `command`: The command to run for `command_sh` or `command_args`.
615
616    In both cases, this is a command and its arguments/options.  The
617    list will be passed to `execvp`.  The difference between
618    `command_args` and `command_sh` is in what nailing-cargo appends to
619    the specified `command` list:
620
621    For `command_args`, nailing cargo appends multiple more arguments;
622    each one should be passed as-is as a single argument to the actual
623    build command.  This is correct if `command` is a program like
624    `nice` or `really`, which takes a command and its arguments and
625    does not go via the shell.
626
627    For `command_sh`, nailing-cargo appends one single further
628    argument.  That argument is a shell command; nailing-cargo
629    constructs it by shell-quoting the real command and arguments and
630    wrapping them up in a small script, the text of which becomes the
631    extra argument to `command`.  This is correct if `command` will
632    pass its argument to a bournelike shell - for example, if `command`
633    is an ssh rune for a remote account whose shell is `/bin/sh` or
634    `/bin/bash`.
635
636  * `user`: The build username, for `really` and `ssh`.  For `ssh`, can
637    be just the local username (meaning `@localhost`), or
638    `<user>@<host>`.
639
640  * `clean` (boolean): When doing a `Cargo.lock` update, which involves
641    linkfarming in the build directory, whether the clean up the
642    linkfarm afterwards.  Default: `true`.  Can be overridden by
643    `--keep-linkfarm` or `--clean-linkfarm`.
644
645 `[arch]`: Architecture convenience aliases
646 ------------------------------------------
647
648 This is a map from archictecture aliases to full cargo architecture
649 names.  The keys are the aliases; each entry should be a string, the
650 cargo architecture name.
651
652 Only keys starting with an ascii uppercase letter are relevant, since
653 other names are not looked up in this alias map.
654
655 `[misc]`: Miscellaneous individual nailing-cargo config
656 -------------------------------------------------------
657
658  * <a name="misc_online">`online`</a>:
659
660    Specifies whether to allow or prevent cargo from accessing the
661    network.  Value is a boolean or `'auto'`.  `'auto'` permits online
662    access if the cargo subcommand being invoked is one whose main
663    purpose involves online access.
664
665    Implemented by passing `--offline` to cargo when necessary ---
666    cargo's default is online.  nailing-cargo's default is
667    `'auto'`.
668
669 Limitations and bugs
670 ====================
671
672   * nailing-cargo temporarily dirties your source trees, including
673     particularly `Cargo.toml` and `Cargo.lock`; and if nailing-cargo
674     crashes or is interrupted these changes may be left behind.
675     Unfortunately it is not possible to avoid this temporary dirtying
676     because the cargo team have deliberately made cargo inflexible -
677     [issue#6715](https://github.com/rust-lang/cargo/issues/6715).  
678     At least, running nailing-cargo again will clean up any mess
679     left by an interrupted run.
680
681   * nailing-cargo needs to understand the behaviour of the cargo
682     subcommand you are running - especially for out-of-tree builds.
683     nailing-cargo only has a short builtin list of commands it knows
684     about (see [`-s<subcommand`](#s_subcommand)).  For other commands, you may need to
685     add an entry to `@subcmd_props` in the source, or use
686     [`--subcommand-props`](#subcommand_props).
687
688     Contributions of additonal entries to `@subcmd_props` (or bug
689     reports about missing entries) are of course very welcome.
690
691   * Out-of-tree builds ought to support `sudo`.  Patches welcome.
692
693   * Out-of-tree builds require a unified filesystem view: eg, different
694     users on the same host, NFS, or something.
695
696     Specifically, the invocation and build execution environments must
697     both have visibility of the source and build directories, at the
698     same absolute pathnames.  The invocation environment must be able
699     to write to the build environment (but vice versa is not
700     required).
701
702     This could be improved.
703
704   * The alternative `Cargo.lock` filename must currently be a leafname.  I
705     think fixing this just involves review to check other values work
706     properly.
707
708   * The alternative `Cargo.lock` file must be on the same filesystem
709     as the source tree.  This is not so easy to fix; we would want the
710     existing algorithm but a fallback for the different-filsystem case.
711
712   * `Cargo.nail` is unconditionally looked for in the parent directory.
713     Ideally this should be configurable, and also perhaps be able to
714     combine multiple `Cargo.nail` files?  Relatedly, although
715     nailing-cargo can read multiple config files, it can only handle
716     one file specifying directories and packages.
717
718   * nailing-cargo uses a single lockfile alongside your `Cargo.nail`,
719     rather than a more sophisticated scheme involving locking
720     particular directories.  This means that if you run multiple
721     copies of nailing-cargo at once, in different directories, but
722     with `Cargo.nail` files which imply overlapping sets of package
723     directories, things will go Badly Wrong.
724
725 Contributing and legal
726 ======================
727
728 nailing-cargo is Free Software.
729
730 Please help improve it.  Contributions (to address the limitations, or
731 to add new facilities to help work with cargo) are welcome by email to
732 `ijackson@chiark.greenend.org.uk` or via the [Salsa
733 project](https://salsa.debian.org/iwj/nailing-cargo).
734
735 If you plan to do substantial work, please do get in touch with a
736 sketch of your proposed changes.
737
738 Legal
739 -----
740
741 This project accepts contributions based on the git commit
742 Signed-off-by convention, by which the contributors certify their
743 contributions according to the Developer Certificate of Origin version
744 1.1 - see the file DEVELOPER-CERTIFICATE.
745
746 Copyright (C) 2019-2020 Ian Jackson and others
747
748 This program is free software: you can redistribute it and/or modify
749 it under the terms of the GNU Affero General Public License as
750 published by the Free Software Foundation, either version 3 of the
751 License, or (at your option) any later version.
752
753 This program is distributed in the hope that it will be useful,
754 but WITHOUT ANY WARRANTY; without even the implied warranty of
755 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
756 GNU Affero General Public License for more details.
757
758 You should have received a copy of the GNU Affero General Public License
759 along with this program.  If not, see <http://www.gnu.org/licenses/>.
760
761 Individual files generally contain the following tag in the copyright
762 notice, instead of the full licence grant text:
763 ```
764    SPDX-License-Identifier: AGPL-3.0-or-later
765 ```
766 As is conventional, this should be read as a licence grant.