Merge branch 'jk/for-each-object-iteration'
[git] / dir.h
1 #ifndef DIR_H
2 #define DIR_H
3
4 /* See Documentation/technical/api-directory-listing.txt */
5
6 #include "cache.h"
7 #include "strbuf.h"
8
9 struct dir_entry {
10         unsigned int len;
11         char name[FLEX_ARRAY]; /* more */
12 };
13
14 #define EXC_FLAG_NODIR 1
15 #define EXC_FLAG_ENDSWITH 4
16 #define EXC_FLAG_MUSTBEDIR 8
17 #define EXC_FLAG_NEGATIVE 16
18
19 struct exclude {
20         /*
21          * This allows callers of last_exclude_matching() etc.
22          * to determine the origin of the matching pattern.
23          */
24         struct exclude_list *el;
25
26         const char *pattern;
27         int patternlen;
28         int nowildcardlen;
29         const char *base;
30         int baselen;
31         unsigned flags;         /* EXC_FLAG_* */
32
33         /*
34          * Counting starts from 1 for line numbers in ignore files,
35          * and from -1 decrementing for patterns from CLI args.
36          */
37         int srcpos;
38 };
39
40 /*
41  * Each excludes file will be parsed into a fresh exclude_list which
42  * is appended to the relevant exclude_list_group (either EXC_DIRS or
43  * EXC_FILE).  An exclude_list within the EXC_CMDL exclude_list_group
44  * can also be used to represent the list of --exclude values passed
45  * via CLI args.
46  */
47 struct exclude_list {
48         int nr;
49         int alloc;
50
51         /* remember pointer to exclude file contents so we can free() */
52         char *filebuf;
53
54         /* origin of list, e.g. path to filename, or descriptive string */
55         const char *src;
56
57         struct exclude **excludes;
58 };
59
60 /*
61  * The contents of the per-directory exclude files are lazily read on
62  * demand and then cached in memory, one per exclude_stack struct, in
63  * order to avoid opening and parsing each one every time that
64  * directory is traversed.
65  */
66 struct exclude_stack {
67         struct exclude_stack *prev; /* the struct exclude_stack for the parent directory */
68         int baselen;
69         int exclude_ix; /* index of exclude_list within EXC_DIRS exclude_list_group */
70         struct untracked_cache_dir *ucd;
71 };
72
73 struct exclude_list_group {
74         int nr, alloc;
75         struct exclude_list *el;
76 };
77
78 struct oid_stat {
79         struct stat_data stat;
80         struct object_id oid;
81         int valid;
82 };
83
84 /*
85  *  Untracked cache
86  *
87  *  The following inputs are sufficient to determine what files in a
88  *  directory are excluded:
89  *
90  *   - The list of files and directories of the directory in question
91  *   - The $GIT_DIR/index
92  *   - dir_struct flags
93  *   - The content of $GIT_DIR/info/exclude
94  *   - The content of core.excludesfile
95  *   - The content (or the lack) of .gitignore of all parent directories
96  *     from $GIT_WORK_TREE
97  *   - The check_only flag in read_directory_recursive (for
98  *     DIR_HIDE_EMPTY_DIRECTORIES)
99  *
100  *  The first input can be checked using directory mtime. In many
101  *  filesystems, directory mtime (stat_data field) is updated when its
102  *  files or direct subdirs are added or removed.
103  *
104  *  The second one can be hooked from cache_tree_invalidate_path().
105  *  Whenever a file (or a submodule) is added or removed from a
106  *  directory, we invalidate that directory.
107  *
108  *  The remaining inputs are easy, their SHA-1 could be used to verify
109  *  their contents (exclude_sha1[], info_exclude_sha1[] and
110  *  excludes_file_sha1[])
111  */
112 struct untracked_cache_dir {
113         struct untracked_cache_dir **dirs;
114         char **untracked;
115         struct stat_data stat_data;
116         unsigned int untracked_alloc, dirs_nr, dirs_alloc;
117         unsigned int untracked_nr;
118         unsigned int check_only : 1;
119         /* all data except 'dirs' in this struct are good */
120         unsigned int valid : 1;
121         unsigned int recurse : 1;
122         /* null object ID means this directory does not have .gitignore */
123         struct object_id exclude_oid;
124         char name[FLEX_ARRAY];
125 };
126
127 struct untracked_cache {
128         struct oid_stat ss_info_exclude;
129         struct oid_stat ss_excludes_file;
130         const char *exclude_per_dir;
131         struct strbuf ident;
132         /*
133          * dir_struct#flags must match dir_flags or the untracked
134          * cache is ignored.
135          */
136         unsigned dir_flags;
137         struct untracked_cache_dir *root;
138         /* Statistics */
139         int dir_created;
140         int gitignore_invalidated;
141         int dir_invalidated;
142         int dir_opened;
143         /* fsmonitor invalidation data */
144         unsigned int use_fsmonitor : 1;
145 };
146
147 struct dir_struct {
148         int nr, alloc;
149         int ignored_nr, ignored_alloc;
150         enum {
151                 DIR_SHOW_IGNORED = 1<<0,
152                 DIR_SHOW_OTHER_DIRECTORIES = 1<<1,
153                 DIR_HIDE_EMPTY_DIRECTORIES = 1<<2,
154                 DIR_NO_GITLINKS = 1<<3,
155                 DIR_COLLECT_IGNORED = 1<<4,
156                 DIR_SHOW_IGNORED_TOO = 1<<5,
157                 DIR_COLLECT_KILLED_ONLY = 1<<6,
158                 DIR_KEEP_UNTRACKED_CONTENTS = 1<<7,
159                 DIR_SHOW_IGNORED_TOO_MODE_MATCHING = 1<<8
160         } flags;
161         struct dir_entry **entries;
162         struct dir_entry **ignored;
163
164         /* Exclude info */
165         const char *exclude_per_dir;
166
167         /*
168          * We maintain three groups of exclude pattern lists:
169          *
170          * EXC_CMDL lists patterns explicitly given on the command line.
171          * EXC_DIRS lists patterns obtained from per-directory ignore files.
172          * EXC_FILE lists patterns from fallback ignore files, e.g.
173          *   - .git/info/exclude
174          *   - core.excludesfile
175          *
176          * Each group contains multiple exclude lists, a single list
177          * per source.
178          */
179 #define EXC_CMDL 0
180 #define EXC_DIRS 1
181 #define EXC_FILE 2
182         struct exclude_list_group exclude_list_group[3];
183
184         /*
185          * Temporary variables which are used during loading of the
186          * per-directory exclude lists.
187          *
188          * exclude_stack points to the top of the exclude_stack, and
189          * basebuf contains the full path to the current
190          * (sub)directory in the traversal. Exclude points to the
191          * matching exclude struct if the directory is excluded.
192          */
193         struct exclude_stack *exclude_stack;
194         struct exclude *exclude;
195         struct strbuf basebuf;
196
197         /* Enable untracked file cache if set */
198         struct untracked_cache *untracked;
199         struct oid_stat ss_info_exclude;
200         struct oid_stat ss_excludes_file;
201         unsigned unmanaged_exclude_files;
202 };
203
204 /*Count the number of slashes for string s*/
205 extern int count_slashes(const char *s);
206
207 /*
208  * The ordering of these constants is significant, with
209  * higher-numbered match types signifying "closer" (i.e. more
210  * specific) matches which will override lower-numbered match types
211  * when populating the seen[] array.
212  */
213 #define MATCHED_RECURSIVELY 1
214 #define MATCHED_FNMATCH 2
215 #define MATCHED_EXACTLY 3
216 extern int simple_length(const char *match);
217 extern int no_wildcard(const char *string);
218 extern char *common_prefix(const struct pathspec *pathspec);
219 extern int match_pathspec(const struct pathspec *pathspec,
220                           const char *name, int namelen,
221                           int prefix, char *seen, int is_dir);
222 extern int report_path_error(const char *ps_matched, const struct pathspec *pathspec, const char *prefix);
223 extern int within_depth(const char *name, int namelen, int depth, int max_depth);
224
225 extern int fill_directory(struct dir_struct *dir,
226                           struct index_state *istate,
227                           const struct pathspec *pathspec);
228 extern int read_directory(struct dir_struct *, struct index_state *istate,
229                           const char *path, int len,
230                           const struct pathspec *pathspec);
231
232 extern int is_excluded_from_list(const char *pathname, int pathlen,
233                                  const char *basename, int *dtype,
234                                  struct exclude_list *el,
235                                  struct index_state *istate);
236 struct dir_entry *dir_add_ignored(struct dir_struct *dir,
237                                   struct index_state *istate,
238                                   const char *pathname, int len);
239
240 /*
241  * these implement the matching logic for dir.c:excluded_from_list and
242  * attr.c:path_matches()
243  */
244 extern int match_basename(const char *, int,
245                           const char *, int, int, unsigned);
246 extern int match_pathname(const char *, int,
247                           const char *, int,
248                           const char *, int, int, unsigned);
249
250 extern struct exclude *last_exclude_matching(struct dir_struct *dir,
251                                              struct index_state *istate,
252                                              const char *name, int *dtype);
253
254 extern int is_excluded(struct dir_struct *dir,
255                        struct index_state *istate,
256                        const char *name, int *dtype);
257
258 extern struct exclude_list *add_exclude_list(struct dir_struct *dir,
259                                              int group_type, const char *src);
260 extern int add_excludes_from_file_to_list(const char *fname, const char *base, int baselen,
261                                           struct exclude_list *el, struct  index_state *istate);
262 extern void add_excludes_from_file(struct dir_struct *, const char *fname);
263 extern int add_excludes_from_blob_to_list(struct object_id *oid,
264                                           const char *base, int baselen,
265                                           struct exclude_list *el);
266 extern void parse_exclude_pattern(const char **string, int *patternlen, unsigned *flags, int *nowildcardlen);
267 extern void add_exclude(const char *string, const char *base,
268                         int baselen, struct exclude_list *el, int srcpos);
269 extern void clear_exclude_list(struct exclude_list *el);
270 extern void clear_directory(struct dir_struct *dir);
271 extern int file_exists(const char *);
272
273 extern int is_inside_dir(const char *dir);
274 extern int dir_inside_of(const char *subdir, const char *dir);
275
276 static inline int is_dot_or_dotdot(const char *name)
277 {
278         return (name[0] == '.' &&
279                 (name[1] == '\0' ||
280                  (name[1] == '.' && name[2] == '\0')));
281 }
282
283 extern int is_empty_dir(const char *dir);
284
285 extern void setup_standard_excludes(struct dir_struct *dir);
286
287
288 /* Constants for remove_dir_recursively: */
289
290 /*
291  * If a non-directory is found within path, stop and return an error.
292  * (In this case some empty directories might already have been
293  * removed.)
294  */
295 #define REMOVE_DIR_EMPTY_ONLY 01
296
297 /*
298  * If any Git work trees are found within path, skip them without
299  * considering it an error.
300  */
301 #define REMOVE_DIR_KEEP_NESTED_GIT 02
302
303 /* Remove the contents of path, but leave path itself. */
304 #define REMOVE_DIR_KEEP_TOPLEVEL 04
305
306 /*
307  * Remove path and its contents, recursively. flags is a combination
308  * of the above REMOVE_DIR_* constants. Return 0 on success.
309  *
310  * This function uses path as temporary scratch space, but restores it
311  * before returning.
312  */
313 extern int remove_dir_recursively(struct strbuf *path, int flag);
314
315 /* tries to remove the path with empty directories along it, ignores ENOENT */
316 extern int remove_path(const char *path);
317
318 extern int fspathcmp(const char *a, const char *b);
319 extern int fspathncmp(const char *a, const char *b, size_t count);
320
321 /*
322  * The prefix part of pattern must not contains wildcards.
323  */
324 struct pathspec_item;
325 extern int git_fnmatch(const struct pathspec_item *item,
326                        const char *pattern, const char *string,
327                        int prefix);
328
329 extern int submodule_path_match(const struct pathspec *ps,
330                                 const char *submodule_name,
331                                 char *seen);
332
333 static inline int ce_path_match(const struct cache_entry *ce,
334                                 const struct pathspec *pathspec,
335                                 char *seen)
336 {
337         return match_pathspec(pathspec, ce->name, ce_namelen(ce), 0, seen,
338                               S_ISDIR(ce->ce_mode) || S_ISGITLINK(ce->ce_mode));
339 }
340
341 static inline int dir_path_match(const struct dir_entry *ent,
342                                  const struct pathspec *pathspec,
343                                  int prefix, char *seen)
344 {
345         int has_trailing_dir = ent->len && ent->name[ent->len - 1] == '/';
346         int len = has_trailing_dir ? ent->len - 1 : ent->len;
347         return match_pathspec(pathspec, ent->name, len, prefix, seen,
348                               has_trailing_dir);
349 }
350
351 int cmp_dir_entry(const void *p1, const void *p2);
352 int check_dir_entry_contains(const struct dir_entry *out, const struct dir_entry *in);
353
354 void untracked_cache_invalidate_path(struct index_state *, const char *, int safe_path);
355 void untracked_cache_remove_from_index(struct index_state *, const char *);
356 void untracked_cache_add_to_index(struct index_state *, const char *);
357
358 void free_untracked_cache(struct untracked_cache *);
359 struct untracked_cache *read_untracked_extension(const void *data, unsigned long sz);
360 void write_untracked_extension(struct strbuf *out, struct untracked_cache *untracked);
361 void add_untracked_cache(struct index_state *istate);
362 void remove_untracked_cache(struct index_state *istate);
363
364 /*
365  * Connect a worktree to a git directory by creating (or overwriting) a
366  * '.git' file containing the location of the git directory. In the git
367  * directory set the core.worktree setting to indicate where the worktree is.
368  * When `recurse_into_nested` is set, recurse into any nested submodules,
369  * connecting them as well.
370  */
371 extern void connect_work_tree_and_git_dir(const char *work_tree,
372                                           const char *git_dir,
373                                           int recurse_into_nested);
374 extern void relocate_gitdir(const char *path,
375                             const char *old_git_dir,
376                             const char *new_git_dir);
377 #endif