]> wimlib.net Git - wimlib/blobdiff - src/lookup_table.h
Fix sequential extraction, and include progress info
[wimlib] / src / lookup_table.h
index 0017320c5e4a82f439005c05249346f20a0a1e14..4458cc7ef1a146c1c59d9e100f710a84a5288ccb 100644 (file)
@@ -36,16 +36,55 @@ struct ntfs_location {
 };
 #endif
 
-/* 
- * An entry in the lookup table in the WIM file. 
+/* An enumerated type that identifies where the stream corresponding to this
+ * lookup table entry is actually located.
  *
- * It is used to find data streams for files in the WIM. 
+ * If we open a WIM and read its lookup table, the location is set to
+ * RESOURCE_IN_WIM since all the streams will initially be located in the WIM.
+ * However, to deal with problems such as image capture and image mount, we
+ * allow the actual location of the stream to be somewhere else, such as an
+ * external file.
+ */
+enum resource_location {
+       /* The lookup table entry does not correspond to a stream (this state
+        * should exist only temporarily) */
+       RESOURCE_NONEXISTENT = 0,
+
+       /* The stream resource is located in a WIM file.  The WIMStruct for the
+        * WIM file will be pointed to by the @wim member. */
+       RESOURCE_IN_WIM,
+
+       /* The stream resource is located in an external file.  The name of the
+        * file will be provided by @file_on_disk member.  In addition, if
+        * @file_on_disk_fp is not NULL, it will be an open FILE * to the file.
+        * */
+       RESOURCE_IN_FILE_ON_DISK,
+
+       /* The stream resource is located in an external file in the staging
+        * directory for a read-write mount.  */
+       RESOURCE_IN_STAGING_FILE,
+
+       /* The stream resource is directly attached in an in-memory buffer
+        * pointed to by @attached_buffer. */
+       RESOURCE_IN_ATTACHED_BUFFER,
+
+       /* The stream resource is located in an NTFS volume.  It is identified
+        * by volume, filename, data stream name, and by whether it is a reparse
+        * point or not. @ntfs_loc points to a structure containing this
+        * information. */
+       RESOURCE_IN_NTFS_VOLUME,
+};
+
+/*
+ * An entry in the lookup table in the WIM file.
+ *
+ * It is used to find data streams for files in the WIM.
  *
  * Metadata resources and reparse point data buffers will also have lookup table
  * entries associated with the data.
  *
  * The lookup_table_entry for a given dentry or alternate stream entry in the
- * WIM is found using the SHA1 message digest field. 
+ * WIM is found using the SHA1 message digest field.
  */
 struct lookup_table_entry {
 
@@ -71,44 +110,8 @@ struct lookup_table_entry {
         */
        u16 part_number;
 
-       /* An enumerated type that identifies where the stream corresponding to
-        * this lookup table entry is actually located.
-        *
-        * Obviously if we open a WIM and read its lookup table, the location is
-        * set to RESOURCE_IN_WIM since all the streams will initially be
-        * located in the WIM.  However, to deal with problems such as image
-        * capture and image mount, we allow the actual location of the stream
-        * to be somewhere else, such as an external file.
-        */
-       enum {
-               /* The lookup table entry does not correspond to a stream (this
-                * state should exist only temporarily) */
-               RESOURCE_NONEXISTENT = 0,
-
-               /* The stream resource is located in a WIM file.  The WIMStruct
-                * for the WIM file will be pointed to by the @wim member. */
-               RESOURCE_IN_WIM,
-
-               /* The stream resource is located in an external file.  The
-                * name of the file will be provided by @file_on_disk member.
-                * In addition, if @file_on_disk_fp is not NULL, it will be an
-                * open FILE * to the file. */
-               RESOURCE_IN_FILE_ON_DISK,
-
-               /* The stream resource is located in an external file in the
-                * staging directory for a read-write mount.  */
-               RESOURCE_IN_STAGING_FILE,
-
-               /* The stream resource is directly attached in an in-memory
-                * buffer pointed to by @attached_buffer. */
-               RESOURCE_IN_ATTACHED_BUFFER,
-
-               /* The stream resource is located in an NTFS volume.  It is
-                * identified by volume, filename, data stream name, and by
-                * whether it is a reparse point or not. @ntfs_loc points to a
-                * structure containing this information. */
-               RESOURCE_IN_NTFS_VOLUME,
-       } resource_location;
+       /* See enum resource_location above */
+       u16 resource_location;
 
        /* (On-disk field)
         * Number of times this lookup table entry is referenced by dentries.
@@ -130,6 +133,10 @@ struct lookup_table_entry {
                size_t hash_short;
        };
 
+       #ifdef WITH_FUSE
+       u16 num_opened_fds;
+       #endif
+
        /* Pointers to somewhere where the stream is actually located.  See the
         * comments for the @resource_location field above. */
        union {
@@ -157,9 +164,6 @@ struct lookup_table_entry {
                 * RESOURCE_IN_STAGING_FILE) */
                struct inode *lte_inode;
        };
-#ifdef WITH_FUSE
-       u16 num_opened_fds;
-#endif
 
        /* When a WIM file is written, out_refcnt starts at 0 and is incremented
         * whenever the file resource pointed to by this lookup table entry
@@ -170,29 +174,34 @@ struct lookup_table_entry {
 
        u32 real_refcnt;
 
-       /* When a WIM file is written, @output_resource_entry is filled
-        * in with the resource entry for the output WIM.  This will not
-        * necessarily be the same as the @resource_entry since:
-        *      - The stream may have a different offset in the new WIM
-        *      - The stream may have a different compressed size in the
-        *      new WIM if the compression type changed
-        */
-       struct resource_entry output_resource_entry;
-
-       /* This field is used for the special hardlink or symlink image
-        * extraction mode.   In these mode, all identical files are linked
-        * together, and @extracted_file will be set to the filename of the
-        * first extracted file containing this stream.  */
-       char *extracted_file;
+       union {
+               /* When a WIM file is written, @output_resource_entry is filled
+                * in with the resource entry for the output WIM.  This will not
+                * necessarily be the same as the @resource_entry since: - The
+                * stream may have a different offset in the new WIM - The
+                * stream may have a different compressed size in the new WIM if
+                * the compression type changed
+                */
+               struct resource_entry output_resource_entry;
+
+               struct list_head msg_list;
+               struct list_head dentry_list;
+       };
 
        union {
+               /* This field is used for the special hardlink or symlink image
+                * extraction mode.   In these mode, all identical files are linked
+                * together, and @extracted_file will be set to the filename of the
+                * first extracted file containing this stream.  */
+               struct {
+                       char *extracted_file;
+                       bool extracted;
+               };
+
                /* List of lookup table entries that correspond to streams that have
                 * been extracted to the staging directory when modifying a read-write
                 * mounted WIM. */
                struct list_head staging_list;
-
-               /* Temporary field for creating a singly linked list. */
-               struct lookup_table_entry *next_lte_in_swm;
        };
 };
 
@@ -201,6 +210,11 @@ static inline u64 wim_resource_size(const struct lookup_table_entry *lte)
        return lte->resource_entry.original_size;
 }
 
+static inline u64 wim_resource_chunks(const struct lookup_table_entry *lte)
+{
+       return (wim_resource_size(lte) + WIM_CHUNK_SIZE - 1) / WIM_CHUNK_SIZE;
+}
+
 static inline u64
 wim_resource_compressed_size(const struct lookup_table_entry *lte)
 {
@@ -223,11 +237,11 @@ wim_resource_compression_type(const struct lookup_table_entry *lte)
 
 extern struct lookup_table *new_lookup_table(size_t capacity);
 
-extern void lookup_table_insert(struct lookup_table *table, 
+extern void lookup_table_insert(struct lookup_table *table,
                                struct lookup_table_entry *lte);
 
 /* Unlinks a lookup table entry from the table; does not free it. */
-static inline void lookup_table_unlink(struct lookup_table *table, 
+static inline void lookup_table_unlink(struct lookup_table *table,
                                       struct lookup_table_entry *lte)
 {
        hlist_del(&lte->hash_list);
@@ -236,8 +250,11 @@ static inline void lookup_table_unlink(struct lookup_table *table,
 
 extern struct lookup_table_entry *new_lookup_table_entry();
 
-extern int for_lookup_table_entry(struct lookup_table *table, 
-                                 int (*visitor)(struct lookup_table_entry *, void *), 
+extern struct lookup_table_entry *
+clone_lookup_table_entry(const struct lookup_table_entry *lte);
+
+extern int for_lookup_table_entry(struct lookup_table *table,
+                                 int (*visitor)(struct lookup_table_entry *, void *),
                                  void *arg);
 
 extern struct lookup_table_entry *
@@ -250,12 +267,14 @@ extern int lookup_resource(WIMStruct *w, const char *path,
 
 extern void lte_decrement_refcnt(struct lookup_table_entry *lte,
                                 struct lookup_table *table);
-extern void lte_decrement_num_opened_fds(struct lookup_table_entry *lte,
-                                        struct lookup_table *table);
+#ifdef WITH_FUSE
+extern void lte_decrement_num_opened_fds(struct lookup_table_entry *lte);
+#endif
 
 extern int lte_zero_out_refcnt(struct lookup_table_entry *entry, void *ignore);
 extern int lte_zero_real_refcnt(struct lookup_table_entry *entry, void *ignore);
-extern int lte_free_extracted_file(struct lookup_table_entry *lte, void *ignone);
+extern int lte_zero_extracted_file(struct lookup_table_entry *lte, void *ignore);
+extern int lte_free_extracted_file(struct lookup_table_entry *lte, void *ignore);
 
 extern void print_lookup_table_entry(const struct lookup_table_entry *entry);
 
@@ -268,20 +287,10 @@ extern int write_lookup_table_entry(struct lookup_table_entry *lte, void *__out)
 extern void free_lookup_table_entry(struct lookup_table_entry *lte);
 
 extern int dentry_resolve_ltes(struct dentry *dentry, void *__table);
+extern int dentry_unresolve_ltes(struct dentry *dentry, void *ignore);
 
-/* Writes the lookup table to the output file. */
-static inline int write_lookup_table(struct lookup_table *table, FILE *out)
-{
-       return for_lookup_table_entry(table, write_lookup_table_entry, out);
-}
-
-/* Unlinks and frees an entry from a lookup table. */
-static inline void lookup_table_remove(struct lookup_table *table, 
-                                      struct lookup_table_entry *lte)
-{
-       lookup_table_unlink(table, lte);
-       free_lookup_table_entry(lte);
-}
+int write_lookup_table(struct lookup_table *table, FILE *out,
+                      struct resource_entry *out_res_entry);
 
 static inline struct resource_entry* wim_metadata_resource_entry(WIMStruct *w)
 {
@@ -302,7 +311,7 @@ inode_stream_lte_resolved(const struct inode *inode, unsigned stream_idx)
 
 static inline struct lookup_table_entry *
 inode_stream_lte_unresolved(const struct inode *inode, unsigned stream_idx,
-                            const struct lookup_table *table)
+                           const struct lookup_table *table)
 {
        wimlib_assert(!inode->resolved);
        wimlib_assert(stream_idx <= inode->num_ads);
@@ -315,7 +324,7 @@ inode_stream_lte_unresolved(const struct inode *inode, unsigned stream_idx,
                                         inode->ads_entries[
                                                stream_idx - 1].hash);
 }
-/* 
+/*
  * Returns the lookup table entry for stream @stream_idx of the inode, where
  * stream_idx = 0 means the default un-named file stream, and stream_idx >= 1
  * corresponds to an alternate data stream.
@@ -356,7 +365,7 @@ static inline const u8 *inode_stream_hash_resolved(const struct inode *inode,
                return zero_hash;
 }
 
-/* 
+/*
  * Returns the hash for stream @stream_idx of the inode, where stream_idx = 0
  * means the default un-named file stream, and stream_idx >= 1 corresponds to an
  * alternate data stream.