imagex-extract.1.in:  Add example for wildcard path

do_wimlib_extract_image(): Do not allow GLOB_PATHS

extract_stream_list(): Remove never-executed code

Only allow default RPFIX for wimlib_extract_image{,_from_pipe}()

Add wimlib_get_version()

This allows an application to query the version number at runtime.

wimlib: strict checks for unassigned flags

This prevents programs that specify unassigned flags from working, since
these flags could be assigned in the future.

Update extraction documentation

Allow 'wimextract' to use wildcard paths on command line

And a couple more changes, described in the NEWS.

Update NEWS

imagex-apply.1.in:  Add notes about Windows permissions being annoying

Add support for not extracting file attributes

wimdir:  Add --one-file-only option

verify_inode(): Remove unused variable

Remove some printing code from library

Remove print_lookup_table_entry(), print_dentry(), and
print_security_data() from the library.

Turn wimlib_print_metadata() into a stub and replace it with code in
`wimlib-imagex dir' that uses wimlib_iterate_dir_tree().

Also, on Windows use
ConvertSecurityDescriptorToStringSecurityDescriptorW() to print security
descriptors in string format.

wimlib-imagex: Add and document --pack-chunk-size option

This allows users to change the pack chunk size to 67108864 rather than
the default of 33554432 if they want to.

win32_apply.c:  Simplify and fix win32_create_file()

win32_create_file() can be simplified by using CREATE_NEW and attempting
to delete the existing file if it exists.

This commit also adds FILE_FLAG_OPEN_REPARSE_POINT to the CreateFile()
call.  This is the equivalent to the O_NOFOLLOW addition to the UNIX
version in the previous commit.

Note that MS has contradictory documentation for the combination of
CREATE_ALWAYS and FILE_FLAG_OPEN_REPARSE_POINT, which further supports
the CREATE_NEW method changed to in this commit.

unix_apply.c:  Use O_NOFOLLOW when opening files

If the destination directory contained a symbolic link and wimlib
attempted to extract a regular file to the same location, it would write
the file to the target of the symbolic link, which could point to an
arbitrary location.  Fix this by passing O_NOFOLLOW to open().

lookup_sd():  Make static

Remove dentry.dos_name_invalid

This flag is no longer used.  The extraction code just extracts the DOS
names it finds, which is the best we can do.

imagex-apply.1.in:  Fix typo

lz_sarray_get_matches(): Remove unnecessary check

imagex-apply.1.in:  Add note about directory traversal attacks

imagex-delete.1.in:  Fix typo

imagex-apply.1.in: Update NOTES, remove silly example

imagex-capture.1.in:  Pedantic updates

wimlib_set_output_{,pack_}_compression_type(): Fix chunk size check

Add dotdot.wim, duplicate_names.wim

Refactor read_dentry_tree()

read_dentry_tree() now includes code previously in
read_metadata_resource(), and wraps around read_dentry_tree_recursive()
which is similar to the old read_dentry_tree().

This removes the declaration of a 'struct wim_dentry' on the stack in
read_dentry_tree() and a subsequent copy of the structure, and also
condenses two dentry allocation sites into one.

This also moves the check for '.' and '..' entries to immediately when
reading the dentry tree rather than just before extraction.

read_metadata_resource(): Simplify check for short resource

read_metadata_resource():  Don't decrement stream refcnts in error path

If a metadata resource could not be fully read, the code would decrement
the reference counts of streams referenced by the tree.  However this
should not be done, as there is no corresponding increment.

metadata_resource.c: Remove unneeded header

wim.c: Remove reopen_wim(), close_wim()

wimlib/header.h:  Improve comments

Adjust documentation for alternate chunk sizes

new_wim_struct(): Use filedes_invalidate()

win32_delete_file_wrapper(): Check for INVALID_FILE_ATTRIBUTES

Update NEWS

Simplify two warning messages

win32_set_security_descriptor(): Do not request MAXIMUM_ALLOWED

win32_apply.c:  Work around deleting READONLY files

write_stream_list(): Do not create threads to compress 1 chunk or less

read_wim_lookup_table():  Zero fields of resource spec until known

This code was removed by b6034a5dd44709341c46d553b1c0294ec91f13e4
but it was needed to ensure that 'back_to_back_pack' doesn't get set
at the wrong time.

Fix references to hardlink.c

capture.h:  Remove duplicate definitions

Update version to v1.6.1-BETA

Refactor some of the dentry, inode, and lookup table code

- Remove hardlink.c.  Its code is now split between inode.c and
  inode_fixup.c.
- Factor inode-related code out of dentry.h and dentry.c and place in
  inode.h and inode.c.
- Move wimlib_reference_resource_files() and wimlib_reference_resources()
  implementations to reference.c.
- Move wimlib_iterate_dir_tree() implementation to iterate_dir.c.
- Move wimlib_reference_template_image() to template.c.
- Move wim_pathname_to_stream() to dentry.c as it deals primarily with
  path walking.
- Remove 'unhashed_streams' member from 'struct wim_lookup_table'.  It
  now is stored separately in 'struct add_image_params'.
- Rename some *resource functions to *stream.
- Rename set_dentry_name() => dentry_set_name().
- Move 'struct ntfs_location' definition to ntfs_3g.h.
- Move UNIX data definitions to new header unix_data.h.
- Move case sensitivity definitions to new header case.h.

wimlib-imagex: Add --solid as alias for --pack-streams

read_dentry_tree(): Fix typo in error message

LZMS:  Do not do x86 translations starting in last 16 bytes

The value used before (last 11 bytes) was wrong; based on tests with the
MS implementation no translation can occur following an opcode starting
in the last 16 bytes of a data block.

Tested with two different length opcodes to make sure that it's the start
of the opcode that matters, not the start of the translated address.

README: COMPRESSION RATIO: Fix capitalization

README: Update "COMPRESSION RATIO" section

win32_wglob(): Improve setting of errno

wimfs_readlink(): Return -EINVAL if buf_len == 0, not -ENAMETOOLONG

wim_inode_readlink():  Document

execute_fusermount(): Check status of 'umount' properly

Code is only reached if fusermount command does not work.

unmount_timed_out_cb():  Do not check errno if kill() succeeds

lz_sarray:  Fix some comments

lz_sarray:  Performance and memory usage optimizations

lz_sarray:  Use 16-bit length

This saves 4 bytes of memory per position and only decreases the
compression ratio on very repetitive files (with matches of length >
65535), and even then only slightly.  Performance is not significantly
affected but may be slightly improved due to better use of cache.

wimlib_iterate_dir_tree(): Canonicalize WIM path

Cache compression format in 'struct wim_resource_spec'

Update NEWS

wimlib_extract_paths():  Canonicalize WIM paths before using them

expand_wildcard(): Only recognize WIM_PATH_SEPARATOR

For consistency with get_dentry(), only treat WIM_PATH_SEPARATOR
characters as path separators.

dentry.c:  Rewrite and document get_dentry()

Fully document the behavior of get_dentry(), and make paths with trailing
path separators only match directories.

write_stream_list(): Fix comments

Handle streams with uncompressed size 4 GiB consistently

The read code went to 8-byte chunk entries for uncompressed size >
4294967296, whereas the write code went to 8-byte chunk entries for
uncompressed size >= 4294967296.  Change both to >= 4294967296.
Confirmed that WIMGAPI (Windows 7) seems to have this behavior.

read_stream_list():  Spill huge data ranges array onto heap

There can be thousands of streams packed into a single resource, so it's
a good idea to check if the data_ranges array is really small enough to
be allocated on the stack or not, and if not, allocate it on the heap
instead.

For readability and to create a temporary frame for alloca(), place the
relevant code in a new function read_packed_streams().

v1.6.0

imagex-capture.1.in:  Minor updates

Fix typos

Update examples

Update NEWS

wimlib.h: Group wimlib_extract_path{s,list}()

wimlib.h: Fix docs for version and compression types

wimlib.h: Doxygen fixes

match_pattern(): No DEBUG if pattern does not match

lzx-compress.c: Remove unneeded headers

xpress-compress.c: Remove unneeded includes

lz_sarray_update_salink(): Only take rank and link array as input

compute_inverse_suffix_array(): Use r for rank, not i

Remove unused LZ_DEBUG() macro

lz_optimal.h: Minor comment fixes

lz_optimal.h:  Fix typedefs

lz_optimal.h:  Move struct lz_match_chooser towards top

imagex: set_compress_slow(): Remove unused variable

lzms-compress.c: Fix initialization of lzms_default

lzms-compress.c: Remove unused constant

lzms-compress.c:  Remove unused code for lzms_fast_encode()

lzms-decompress.c:  Fix indentation

Update references to LZMS compressor

lzms_init_compressor(): Do not zero end of window

Add wimlib_get_compressor_needed_memory()

compress_parallel.c:  Use 1 buffer per thread if chunks are big

LZMS:  Accelerate slot-finding

Update LZMS compressor

Fix error string for WIMLIB_ERR_INVALID_COMPRESSION_TYPE

Replace num_fast_bytes => nice_match_length

There is no binary tree match-finder anymore, so 'nice_match_length'
makes more sense.

lz_sarray.{c,h}:  Cleanup, better comments

Use BSD-style license on selected files