mount_image.c: add fallback definitions of RENAME_* constants

This is needed on older distros.

Reported at https://wimlib.net/forums/viewtopic.php?t=743

v1.14.4

README.md: improve the installation directions

configure.ac: mention development file packages

windows-build.sh: ensure that -static-libgcc is used with MSYS2 gcc

In MSYS2 MINGW32, the gcc version is "i686-w64-mingw32-cc.exe (Rev4,
Built by MSYS2 project) 13.2.0" which does not contain the string
"(GCC)" as expected.  Similarly for MSYS2 MINGW64.  This means that
-static-libgcc does not get used as intended.  As a quick fix, just
invert the check, so gcc is now detected by checking for not clang..

ci.yml: use actions/checkout@v4 and actions/upload-artifact@v4

This addresses the following warnings from GitHub Actions:

    Node.js 16 actions are deprecated. Please update the following
    actions to use Node.js 20: actions/checkout@v3. For more information
    see:
    https://github.blog/changelog/2023-09-22-github-actions-transitioning-from-node-16-to-node-20/.

    Node.js 16 actions are deprecated. Please update the following
    actions to use Node.js 20: actions/upload-artifact@v3. For more
    information see:
    https://github.blog/changelog/2023-09-22-github-actions-transitioning-from-node-16-to-node-20/.

A near-identical warning forced everyone to upgrade to v3 last year, so
this is some pointless churn, but let's just get it over with again...

win32-test-imagex-capture_and_apply.bat: exclude a test due to DISM bug

xmlproc: fix buffer enlargement logic

This fixes a heap buffer overflow caught by the xmlproc fuzzer.

fuzz.sh: add --max-len option

README.WINDOWS.md: use https URL instead of git

v1.14.3

Fix xml_legal_value() with signed char

Fixes: cd9959b4f62a ("Eliminate the dependency on libxml2")
Resolves https://wimlib.net/forums/viewtopic.php?p=1608

v1.14.2

Add a clang-format file

This approximates the de facto coding style of this project, which is
quite similar to the Linux kernel coding style.

This is just in case people to use it with 'git clang-format', as
requested at https://wimlib.net/forums/viewtopic.php?t=666.  I'm not
planning to reformat all the existing code to make it match exactly.

v1.14.2-BETA2

win32-test-imagex-capture_and_apply: re-enable more compatibility tests

After the previous commit, these tests now pass.

Fix compatibility issues with directory streams

Fix two related bugs where a WIM image metadata resource written by
wimlib could not be understood by some MS software versions:

- Never write an extra stream entry for the unnamed data stream of
  directories.  The concept of "unnamed data stream" isn't applicable to
  directories.  This fixes compatibility with DISM when the WIM image
  contains a directory with named data stream(s).  (I think DISM used to
  be okay with this, but on 10.0.20348.681 I'm seeing this issue.)

- Store the reparse point hash in main_hash when no extra stream entries
  are otherwise needed, i.e. when the file is a directory with no named
  data streams.  This fixes compatibility with the Windows 8 setup
  wizard, at least for some specific version of Windows 8, as reported
  at https://wimlib.net/forums/viewtopic.php?t=671.

Resolves https://wimlib.net/forums/viewtopic.php?t=671

win32-test-imagex-capture_and_apply: re-enable some compatibility tests

These tests are currently passing.

v1.14.2-BETA1

Improve encoding detection of wimupdate command files

Make wimupdate command files (read from stdin) and wimcapture source
list files be interpreted as UTF-8 or UTF-16LE (autodetected).
Previously these files were interpreted as the Windows codepage or
UTF-16LE on Windows (autodetected), and UTF-8 on non-Windows.

This makes these files be consistent with wimextract pathlist files and
wimcapture config files, which already had the behavior of "autodetect
UTF-8 or UTF-16LE on all platforms".

Resolves https://wimlib.net/forums/viewtopic.php?p=1545

Align stack when entering wimlib on 32-bit x86

This may resolve https://wimlib.net/forums/viewtopic.php?t=669.  The
reported crash happened in sha1_blocks_x86_avx_bmi2() on the first
instruction that writes to the stack with vmovqda.  That suggests the
stack was misaligned.  If this indeed fixes the bug, then it has
actually always existed but it got exposed by new code in v1.14.0.

mount_image.c: silence a -Wmaybe-uninitialized warning

Silence a false positive -Wmaybe-uninitialized warning in
do_unmount_commit() with gcc 13.1.1.

v1.14.1

cpu_features.c: fix unconditional execution of xgetbv

Ensure that the execution of the xgetbv instruction doesn't get moved
out from under the check for OSXSAVE support by a compiler optimization.
This fixes a crash on older CPUs, introduced in v1.14.0.

Reported at https://wimlib.net/forums/viewtopic.php?p=1527

v1.14.0

threads.c: fix file comment

libFuzzer: add encoding fuzzer

Fix win32-test-imagex-capture_and_apply.bat and add to CI

libFuzzer: rename xml fuzzer to xmlproc

libFuzzer: add xml_windows fuzzer

libFuzzer: increase max_len from 4K to 32K

Fix wlfuzz and enable in CI

- Fix build failure on Linux by linking with the math library.

- Don't hard-code the temporary directory to E:\ on Windows.

- Relax some comparisons that don't work reliably on Windows:
   - Security descriptor
   - Last access time
   - Sparse file attribute (clear only)

- Relax the timestamp comparisons when running on an ext4 filesystem,
  since ext4 doesn't support the full timestamp range that Windows does.
  Also, generate more timestamps that are close to the present date.

- Make the command-line argument give the number of seconds to run,
  rather than the number of iterations.  This makes it possible to run
  wlfuzz for 2 minutes in GitHub Actions, like the libFuzzer jobs.

- Increase coverage by using a different random seed on each run.

- Make wlfuzz initialize wimlib with STRICT_{CAPTURE,APPLY}_PRIVILIGES
  on Windows.  I.e., don't allow running wlfuzz as non-Administrator.

- Print security descriptors and timestamps when they differ.

- Add GitHub Actions jobs that run wlfuzz on Linux and Windows.

win32_apply: retry creating hard links

wimoptimize.1: fix ESD => WIM example

wimoptimize: better defaults for WIM <=> ESD

Resolves https://wimlib.net/forums/viewtopic.php?t=508
Resolves https://wimlib.net/forums/viewtopic.php?t=654

wimupdate: add --ref option for updating delta WIMs

Resolves https://wimlib.net/forums/viewtopic.php?t=450

mount_image.c: call file_contents_changed() on extending truncates

v1.14.0-BETA3

README.md: 7-Zip supports solid WIMs now

wimlib.h: remove outdated list of Windows architectures

Convert README* and NEWS to Markdown

This is the usual convention for new projects.

mount_image.c: avoid UBSAN warning in wimfs_listxattr()

When 'list == NULL && size == 0', the statement 'end = list + size'
executes 'NULL + 0'.  clang's UndefinedBehaviorSanitizer complains that
this is undefined:

    src/mount_image.c:1518:19: runtime error: applying zero offset to null pointer

This is questionable, but let's avoid it...

Upgrade WIM mounting support from fuse2 to fuse3

fuse2 is no longer maintained, and the various Linux distros want all
packages to move to fuse3.  So, let's add fuse3 support.

Moreover, as it's been over 5 years since fuse3 was released, it doesn't
seem worth it to support both fuse2 and fuse3.  So, remove support for
fuse2, and just support fuse3.

Note: as before, WIM mounting support can still be disabled by
configuring --without-fuse.  That removes the dependency.

configure.ac: explicitly call PKG_PROG_PKG_CONFIG

Without this, pkg-config only worked if the first PKG_CHECK_MODULES that
appears *in the file* was executed, i.e. only if WITH_NTFS_3G=yes.

ci.yml: add shellcheck job

tools: address all shellcheck warnings

tools: make all shell scripts have the .sh extension

Update hyperlinks

Use https whenever possible, and replace some outdated links.

Update to latest ax_pthread.m4

windows-build.sh: misc cleanups

v1.14.0-BETA2

xmlproc: fix parsing empty elements

v1.14.0-BETA1

windows-build.sh: hint about installing prerequisites

Add tools/repack-windows-release.sh

Include windows-build.sh in the release tarballs

Rename make-windows-release to windows-build.sh

This has turned into a much more generic build script than it was
originally, so rename it appropriately.

Add a gitattributes file

This is needed to avoid all files showing as "modified" on Windows.

ci.yml: upload Windows binaries when done

ci.yml: add ARM64 Windows build

make-windows-release: support cross-compiling for ARM64 in MSYS2

Cross-compiling for ARM64 is not possible with MSYS2 CLANGARM64 out of
the box, but it is possible to do by downloading and using a prebuilt
toolchain from https://github.com/mstorsjo/llvm-mingw.  Make the
'make-windows-release' script support doing this.

Suggested at https://wimlib.net/forums/viewtopic.php?p=1488#p1488

make-windows-release: split into functions for readability

xml_windows.c: update the language ID map

xml: fix wimlib_set_image_property()

The recent XML changes introduced a bug where
wimlib_set_image_property() rejected values of property_name containing
'/', '[', or ']', which are part of the "path" syntax.

Remove the outdated 'INSTALL' file

The INSTALL file was an old version of the generic GNU installation
instructions that was not customized to this package at all and was not
referenced by any other documentation.  It's unlikely to be useful.

win32_*.c: avoid some format string warnings

These aren't real issues as all the types in question are 32-bit ints,
but fixing these will prevent warnings later if we're ever able to
enable __attribute__((format)) on Windows (hopefully due to
https://gcc.gnu.org/bugzilla/show_bug.cgi?id=64862 being fixed).

compiler.h: remove _cold_attribute

This abstraction layer serves no purpose other than supporting gcc 4.3
and earlier, which is too old to bother supporting.  Just use
__attribute__((cold)) directly.

compiler.h: remove _unused_attribute

This abstraction layer serves no purpose.  Just use
__attribute__((unused)) directly.

compiler.h: remove _may_alias_attribute

This abstraction layer serves no purpose.  Just use
__attribute__((may_alias)) directly.

compiler.h: remove _packed_attribute

This abstraction layer serves no purpose.  Just use
__attribute__((packed)) directly.

compiler.h: remove _aligned_attribute

This abstraction layer serves no purpose.  Just use
__attribute__((aligned(n))) directly.

compiler.h: remove typeof

wimlib is compiled with -std=gnu99, so this is unnecessary.

endianness.h: use builtins directly

The compiler_bswap* macros serve no real purpose.  In endianness.h, just
use the builtins directly.

bitops: use builtins directly

The compiler_bs{r,f}{32,64} macros serve no real purpose.  In bitops.h,
just use the builtins directly.

compiler.h: define UNALIGNED_ACCESS_IS_FAST on powerpc64

error.h: cleanup debris from removal of --disable-error-messages

'extern' in function declarations is redundant

xml: miscellaneous cleanups

ci.yml: install the ntfs-3g package

Install ntfs-3g so that test-imagex-ntfs can run.  While we're here,
also install pkgconf (new name) instead of pkg-config (old name).

ci.yml: use -fno-sanitize-recover when using -fsanitize

Unlike ASAN, by default UBSAN doesn't abort the program on error but
instead just prints an error message.  Use -fno-sanitize-recover to
explicitly request the abort-on-error behavior for testing purposes.

test-imagex-ntfs: find mkntfs on Debian

Add /sbin to the PATH so that mkntfs is found on Debian.

encoding.c: avoid UBSAN warning in convert_string()

When 'in == NULL && in_nbytes == 0', the statement 'in_end = in +
in_nbytes' executes 'NULL + 0'.  clang's UndefinedBehaviorSanitizer
complains that this is undefined:

    src/encoding.c:223:31: runtime error: applying zero offset to null pointer

This is questionable, but let's avoid it...

sha1.c: fix arm64 build with clang 12 and earlier

clang 12 and earlier only defined the SHA-1 intrinsics when
__ARM_FEATURE_CRYPTO is defined.

make-windows-release: support MSYS2 clang environments

Update tools/make-windows-release to support the CLANG32 and CLANG64
MSYS2 environments, and update ci.yml to test them in GitHub Actions.

Also try to support CLANGARM64, though I have no way to test that yet.

Finally, make a couple more tweaks to make-windows-release:

- Run the configure script unless it's explicitly requested to be
  skipped, as the previous logic was too fragile.

- Default to no docs and no zip.

Fix clang warnings about inconsistent use of dllexport

In MSYS2, clang emits many warnings like the following:

    warning: redeclaration of 'wimlib_add_empty_image' should not add 'dllexport' attribute

The problem is that dllexport is used when defining the wimlib API
functions but not when declaring them.  Fix this by using dllexport in
both places.

Add tools/get-version-number to the distribution tarballs

Without this, 'autoreconf' only works in the git repo, not in tarballs.

make-windows-release: fix generation of the cmd files

Improve fuzz testing

- Convert fuzzing scripts from afl-fuzz to libFuzzer
- Add xml and wim fuzzers, including malloc failure injection
- Fuzz for 2 minutes as part of the GitHub Actions CI

Prevent huge memory allocations from fuzzed header fields

security.c: avoid NULL + 0 UBSAN error

UBSAN complains about adding 0 to NULL.  Avoid this.

README.WINDOWS: simplify the build procedure

Rework the build directions to use MSYS2 instead of Cygwin and to take
advantage of the improved make-windows-release script.

README: remove an unnecessary notice

The "copyright years may be listed using range notation" notice is
recommended by the GNU project, but most other people don't consider it
to be necessary or meaningful.

ci.yml: use make-windows-release script on Windows

Improve the make-windows-release script

- Automatically bootstrap the repository if needed
- Add --no-zip and --no-docs options
- Add --install-msys2-packages to install the needed MSYS2 packages
- Autodetect the architecture when using MSYS2
- Use 'strip' instead of ${ARCH}-w64-mingw32-strip, for compatibility
  with MSYS2
- Make it pass 'shellcheck'
- Other cleanups

Eliminate the dependency on libxml2

libxml2 is the only remaining third-party library that Windows builds of
wimlib need.  It's a bit of a pain to have to download it, build it, and
trick libtool into linking it into the resulting DLL.  It then
constitutes a significant part of the size of the resulting DLL, even
with the minimal libxml2 configuration options being used.

In reality, WIM files only use a small subset of XML containing the most
commonly used XML features.  Using a full-featured XML library (that
supports "features" like External Entities that we have to remember to
disable) is a bit dangerous and not actually necessary.  7-Zip's WIM
support, for example, just uses a very minimal home-brew XML processor.

Another issue is that the libxml2 API always uses UTF-8, which causes
the conversion UTF-16LE => UTF-8 => UTF-16LE to be needed on Windows.
This isn't really an "issue", per se, but it shouldn't be necessary.

Finally, wimlib was integrating with libxml2 at a low level via the tree
API, and it overlooked some things.  For example, libxml2 trees have
separate CDATA and TEXT nodes, but wimlib was only looking at TEXT, so
CDATA was ignored.  It was also possible for wimlib to create a document
containing control characters, which is not valid XML so it could not be
read.  These weren't very important issues, but the point is, just using
an XML library doesn't solve quite as many problems as one would hope...

Therefore, just add a simple XML 1.0 processor directly in the source
code.  It handles all XML features that are used in WIM files, plus a
bit more for futureproofing.  It's also faster than libxml2.

test_support.c: add some missing endianness conversions

Add configure~ to gitignore

Remove some outdated scripts

Simplify check for __NR_getrandom

There is no need for the configure script to check whether
__NR_getrandom is defined, as the source code can just use #ifdef.

sha1.c: fix arm64 build with clang 16

Reported at https://wimlib.net/forums/viewtopic.php?p=1480#p1480