format: document -U (used by many mkfs.*)

dump: document -f

device add: support --help

bcachefs.8: completely rewrite manpage with mdoc, adapting to current usages

mkfs.bcachefs: convert to POSIX sh

fsck.bcachefs: convert to POSIX sh

Makefile: default PREFIX to /usr/local

Merge pull request #1 from Pneumaticat/patch-1

typo: "migrate_superblock" -> "migrate-superblock"

typo: "migrate_superblock" -> "migrate-superblock"

New data rereplicate command

Update bcachefs sources to d5e561b3cc bcachefs: BCH_DATA ioctl

cmd_migrate fixes

when linking existing data, we weren't creating alloc btree keys - also,
we were calculating the wrong bucket...

Update bcachefs sources to 496cbe9474 bcachefs: export bch2_alloc_write()

Update bcachefs sources to 0e765bc37c bcachefs: foreground merging of interior btree nodes

use futex instead of pthread cond variable for schedule

Update bcachefs sources to 2834633e12 bcachefs: fix ioctls that set inode flags

Update bcachefs sources to ae6e8a59d3 bcachefs: quota limit enforcement

Update bcachefs sources to 02ae70070a bcachefs: Allocate new btree roots lazily

fix cmd_evacuate

show-super can now print more stuff

Update bcachefs sources to 0b8c5d0fb7 bcachefs: refactor superblock validation

Resizing

update for bcachefs changes

Update bcachefs sources to f4b290345a bcachefs: device resize

Add bcachefs fs usage

Update bcachefs sources to 2afdc642c2 bcachefs: kill bucket_data_type, improve disk usage stats

Update bcachefs sources to b2f5acc670 bcachefs: fix assertion in journal read

Update bcachefs sources to 14ce2a2031 bcachefs: fixes for building in userspace

make: correct path to 'bcachefs' in mkfs/fsck scripts

The fsck and bcachefs scripts simply worked by running 'exec bcachefs
...', but this executes whatever is out of `$PATH`, which is likely not
what a user expected when working inside the bcachefs-tools tree.

This replaces the local uses of 'exec bcachefs' to use bash's
readlink/dirname builtins in order to find the location of the currently
executing wrapper, and execute the 'bcachefs' tool from there.

This allows executing these wrappers from anywhere, provided 'bcachefs'
is just right next to them, with the correct semantics.

As a result, this also allows removing a tiny hack from the Nix
expressions, allowing the included default.nix to use completely
standard mkDerivation builders, with no extra patch/fixup phases.

Signed-off-by: Austin Seipp <aseipp@pobox.com>

fix default checksum types

Update bcachefs sources to e57b5958cf bcachefs: fix for building in userspace

Shim layer updates

nix: add nix expressions for development

This adds Nix expressions for bcachefs-tools that are modular, work in
purely sandboxed build environments (e.g. on NixOS itself, or macOS, where
sandboxing is enabled by default), use a fixed copy of Nixpkgs (to avoid hidden,
global state) and uses standard build idioms.

This change uses a fixed version of Nixpkgs, one that will always be used for
every build of bcachefs-tools, for all users, rather than relying on whatever
copy of Nixpkgs the user has available.

This has a major benefit in that it allows the build to work in sandboxed
environments such as NixOS, and it correctly declares all of the necessary
dependencies that bcachefs-tools needs. This is done simply by using
stdenv.mkDerivation in order to write a "normal" Nix expression, where the
previous version used a variant of the stdenv builder, but this isn't needed for
the most part. (Doing this has other knock-on benefits, such as the usage of
standardized options like `enableParallelBuild = true;` -- allowing `nix-build`
to automatically do parallel builds, etc.)

Another major benefit of this change is that anyone can now use `nix-shell` to
develop/hack on bcachefs-tools incrementally; simply running nix-shell will put
you in a Bash shell environment where all of bcachefs-tools' dependencies are
proprerly provided, no matter the state of the outside build environment/host
operating system:

    $ nix-shell

    [nix-shell:~/src/bcachefs-tools]$ make -j4 # works immediately

As mentioned before, with this change, by default, nix-build and
nix-shell run using a prepackaged copy of an upstream Nixpkgs snapshot. This is
done purely to ensure anyone who builds bcachefs-tools using Nix does, in fact,
get a reproducible build. Without this, nix-build defaults to using the the
`<nixpkgs>` NIX_PATH entry in order to fetch dependencies; meaning that two
users on different channels will get different results (for example, if you have
the November 2017 channel but I have the October 2017 channel, the results may
be different).

With this patch, a user running

    $ nix-build

will always use the exact same copy of nixpkgs to bootstrap the build,
regardless of whatever channels the user has. This bootstrap mechanism does not
even depend on an existing copy of Nixpkgs itself; e.g. it can work with a
completely empty `NIX_PATH`.

This is arguably anti-modular, but for end-user applications like
bcachefs-tools, fixing the version of Nixpkgs is not normally a huge deal. Users
who wish to use a different copy of Nixpkgs can provide this with an argument to
nix-build directly, using the `nixpkgs` argument to the expression:

    $ nix-build --pure --arg nixpkgs 'import <nixpkgs> {}'

This uses the `<nixpkgs>` provided inside your `NIX_PATH` environment variable
to acquire dependencies, which by default is managed using `nix-channel`. If you
have a copy of the Nixpkgs source code e.g. from a `git clone`, you may use that
too by simply using `-I` to prepend your Nixpkgs to `NIX_PATH` (see `man
nix-build` for more):

    $ nix-build --pure \
        -I nixpkgs=$HOME/src/nixpkgs \
        --arg nixpkgs 'import <nixpkgs> {}'

Signed-off-by: Austin Seipp <aseipp@pobox.com>

build: require explicit include paths for libbcachefs/

This removes the implicit `-I libbcachefs` argument to $(CC), which in turn
requires a set of minor changes throughout the tools. There are two advantages
to this setup:

    1) It is (arguably) easier to read, since the location of bcachefs includes
    are easier to understand at a glance ("where does util.h live?")

    2) It removes the need for a hack to include glibc's copy of
    dirent.h explicitly via '/usr/include/dirent.h', because libbcachefs/
    *also* has a dirent.h file and the compiler cannot disambiguate them.
    This has some ramifications on systems where /usr/include may not
    exist, such as NixOS.

Signed-off-by: Austin Seipp <aseipp@pobox.com>

build: use 'find', not 'git', to locate C source code

We will not always have .git available in some cases. For example, if someone
simply downloaded a tarball of the tree, or if we're building with something
like Nix and want to exclude the .git folder, we need to cope and build the
source anyway.

Signed-off-by: Austin Seipp <aseipp@pobox.com>

bcachefs: make usage output more consistent

Minor newline and spacing/alignment touchups make it all just a little easier to
read.

Signed-off-by: Austin Seipp <aseipp@pobox.com>

add --replicas

Update bcachefs sources to 9e7ae5219c bcachefs: Make write points more dynamic

Update bcachefs sources to 661faf58db bcachefs: fix a deadlock in journal replay error path

Simple stupid memory reclaim code

Update bcachefs sources to 6a361fb68c bcachefs: Rework btree read error handling

Update bcachefs sources to 58b77cfec6 bcachefs: improve btree_ptr_debugcheck()

Update bcachefs sources to 2679158d6e bcachefs: fix allocation + replication

Add commands for changing and removing passphrase

update for new option code

Update bcachefs sources to d4b7ef921a bcachefs: Refactoring

Update for new superblock options; makefile improvements

Update bcachefs sources to e82e656279 bcachefs: Cleanups for building in userspace

Faster crc32c

fix a build error on weird glibc

Workarounds for building with gcc 4

handle REQ_OP_FLUSH

urandom fallback

fix incorrect errno usage

Update bcachefs sources to 6a25f7a00d bcachefs: fix ioctl code

Fix io from rebase to 4.11

Update for sysfs changes

Update bcachefs sources to 14e9ac5016 bcachefs: btree_iter fastpath

Update bcachefs sources to 2d95696fbe bcachefs: fix rw -> ro -> rw transition

Update bcachefs sources to 9ceb982d77 bcachefs: Store bucket gens in a btree

Update bcachefs sources to 113b475ed2 bcachefs: Better error handling reading bucket prios/gens

Update bcachefs sources to 3610542890 bcachefs: Convert to skcipher interface for chacha20

fix sync writes - don't use O_EXCL

Update bcachefs sources to fb365e1745

Use aio

Update bcachefs sources to 2e70771b8d

Update bcachefs sources to 846600a41b

cmd_list improvements; use %m

Update bcachefs sources to f026e4e024

Update bcachefs sources to 3b4024f944

silence a compiler warning

Update bcachefs sources to da037866e6

Allow disk commands to specify member by index

add -i to cmd_list

Fix some clang warnings

the issue in cmd_debug - passing members of struct bpos to kstrtoull,
which aren't aligned - was a legit bug

Update bcachefs sources to ff95156479

cmd_dump: fix crash when a device is offline

More cmd_migrate improvements

Factor out bch2_pick_bucket_size() from the format code, and pick the
bucket size before picking the superblock location - that way we can
ensure the superblock gets its own bucket and doesn't trigger warnings
due to the allocation code noticing different types of data in the same
bucket.

Update bcachefs sources

Update bcachefs sources

bcachefs-in-userspace improvements

Got rid of the stupid shim file hack

cmd_migrate fix

missing check_mark_super call - would trigger an assertion if
link_data() was called before we wrote any data

make linux shim timer code less fragile

Rename from bcache-tools to bcachefs-tools

update bcache sources

fix percpu_ref_reinit()

Add --quiet to cmd_format

Refactoring for device specific commands

update bcache sources

cmd_migrate: fix xattrs

add a force flag to cmd_migrate

cmd_device_add improvements

cmd_device_fail

Add a comamnd for setting a device as failed, update bcache sources

cmd_migrate

Delete more unused shim code, update bcache code

New on disk format - encryption

fewer workqueues

Add a command to dump filesystem metadata

update bcache code, fsck improvements

linux shim: return an error on failure to open