Git 2.22.4
[git] / compat / mingw.c
1 #include "../git-compat-util.h"
2 #include "win32.h"
3 #include <conio.h>
4 #include <wchar.h>
5 #include "../strbuf.h"
6 #include "../run-command.h"
7 #include "../cache.h"
8 #include "win32/lazyload.h"
9 #include "../config.h"
10 #include "dir.h"
11
12 #define HCAST(type, handle) ((type)(intptr_t)handle)
13
14 static const int delay[] = { 0, 1, 10, 20, 40 };
15
16 int err_win_to_posix(DWORD winerr)
17 {
18         int error = ENOSYS;
19         switch(winerr) {
20         case ERROR_ACCESS_DENIED: error = EACCES; break;
21         case ERROR_ACCOUNT_DISABLED: error = EACCES; break;
22         case ERROR_ACCOUNT_RESTRICTION: error = EACCES; break;
23         case ERROR_ALREADY_ASSIGNED: error = EBUSY; break;
24         case ERROR_ALREADY_EXISTS: error = EEXIST; break;
25         case ERROR_ARITHMETIC_OVERFLOW: error = ERANGE; break;
26         case ERROR_BAD_COMMAND: error = EIO; break;
27         case ERROR_BAD_DEVICE: error = ENODEV; break;
28         case ERROR_BAD_DRIVER_LEVEL: error = ENXIO; break;
29         case ERROR_BAD_EXE_FORMAT: error = ENOEXEC; break;
30         case ERROR_BAD_FORMAT: error = ENOEXEC; break;
31         case ERROR_BAD_LENGTH: error = EINVAL; break;
32         case ERROR_BAD_PATHNAME: error = ENOENT; break;
33         case ERROR_BAD_PIPE: error = EPIPE; break;
34         case ERROR_BAD_UNIT: error = ENODEV; break;
35         case ERROR_BAD_USERNAME: error = EINVAL; break;
36         case ERROR_BROKEN_PIPE: error = EPIPE; break;
37         case ERROR_BUFFER_OVERFLOW: error = ENAMETOOLONG; break;
38         case ERROR_BUSY: error = EBUSY; break;
39         case ERROR_BUSY_DRIVE: error = EBUSY; break;
40         case ERROR_CALL_NOT_IMPLEMENTED: error = ENOSYS; break;
41         case ERROR_CANNOT_MAKE: error = EACCES; break;
42         case ERROR_CANTOPEN: error = EIO; break;
43         case ERROR_CANTREAD: error = EIO; break;
44         case ERROR_CANTWRITE: error = EIO; break;
45         case ERROR_CRC: error = EIO; break;
46         case ERROR_CURRENT_DIRECTORY: error = EACCES; break;
47         case ERROR_DEVICE_IN_USE: error = EBUSY; break;
48         case ERROR_DEV_NOT_EXIST: error = ENODEV; break;
49         case ERROR_DIRECTORY: error = EINVAL; break;
50         case ERROR_DIR_NOT_EMPTY: error = ENOTEMPTY; break;
51         case ERROR_DISK_CHANGE: error = EIO; break;
52         case ERROR_DISK_FULL: error = ENOSPC; break;
53         case ERROR_DRIVE_LOCKED: error = EBUSY; break;
54         case ERROR_ENVVAR_NOT_FOUND: error = EINVAL; break;
55         case ERROR_EXE_MARKED_INVALID: error = ENOEXEC; break;
56         case ERROR_FILENAME_EXCED_RANGE: error = ENAMETOOLONG; break;
57         case ERROR_FILE_EXISTS: error = EEXIST; break;
58         case ERROR_FILE_INVALID: error = ENODEV; break;
59         case ERROR_FILE_NOT_FOUND: error = ENOENT; break;
60         case ERROR_GEN_FAILURE: error = EIO; break;
61         case ERROR_HANDLE_DISK_FULL: error = ENOSPC; break;
62         case ERROR_INSUFFICIENT_BUFFER: error = ENOMEM; break;
63         case ERROR_INVALID_ACCESS: error = EACCES; break;
64         case ERROR_INVALID_ADDRESS: error = EFAULT; break;
65         case ERROR_INVALID_BLOCK: error = EFAULT; break;
66         case ERROR_INVALID_DATA: error = EINVAL; break;
67         case ERROR_INVALID_DRIVE: error = ENODEV; break;
68         case ERROR_INVALID_EXE_SIGNATURE: error = ENOEXEC; break;
69         case ERROR_INVALID_FLAGS: error = EINVAL; break;
70         case ERROR_INVALID_FUNCTION: error = ENOSYS; break;
71         case ERROR_INVALID_HANDLE: error = EBADF; break;
72         case ERROR_INVALID_LOGON_HOURS: error = EACCES; break;
73         case ERROR_INVALID_NAME: error = EINVAL; break;
74         case ERROR_INVALID_OWNER: error = EINVAL; break;
75         case ERROR_INVALID_PARAMETER: error = EINVAL; break;
76         case ERROR_INVALID_PASSWORD: error = EPERM; break;
77         case ERROR_INVALID_PRIMARY_GROUP: error = EINVAL; break;
78         case ERROR_INVALID_SIGNAL_NUMBER: error = EINVAL; break;
79         case ERROR_INVALID_TARGET_HANDLE: error = EIO; break;
80         case ERROR_INVALID_WORKSTATION: error = EACCES; break;
81         case ERROR_IO_DEVICE: error = EIO; break;
82         case ERROR_IO_INCOMPLETE: error = EINTR; break;
83         case ERROR_LOCKED: error = EBUSY; break;
84         case ERROR_LOCK_VIOLATION: error = EACCES; break;
85         case ERROR_LOGON_FAILURE: error = EACCES; break;
86         case ERROR_MAPPED_ALIGNMENT: error = EINVAL; break;
87         case ERROR_META_EXPANSION_TOO_LONG: error = E2BIG; break;
88         case ERROR_MORE_DATA: error = EPIPE; break;
89         case ERROR_NEGATIVE_SEEK: error = ESPIPE; break;
90         case ERROR_NOACCESS: error = EFAULT; break;
91         case ERROR_NONE_MAPPED: error = EINVAL; break;
92         case ERROR_NOT_ENOUGH_MEMORY: error = ENOMEM; break;
93         case ERROR_NOT_READY: error = EAGAIN; break;
94         case ERROR_NOT_SAME_DEVICE: error = EXDEV; break;
95         case ERROR_NO_DATA: error = EPIPE; break;
96         case ERROR_NO_MORE_SEARCH_HANDLES: error = EIO; break;
97         case ERROR_NO_PROC_SLOTS: error = EAGAIN; break;
98         case ERROR_NO_SUCH_PRIVILEGE: error = EACCES; break;
99         case ERROR_OPEN_FAILED: error = EIO; break;
100         case ERROR_OPEN_FILES: error = EBUSY; break;
101         case ERROR_OPERATION_ABORTED: error = EINTR; break;
102         case ERROR_OUTOFMEMORY: error = ENOMEM; break;
103         case ERROR_PASSWORD_EXPIRED: error = EACCES; break;
104         case ERROR_PATH_BUSY: error = EBUSY; break;
105         case ERROR_PATH_NOT_FOUND: error = ENOENT; break;
106         case ERROR_PIPE_BUSY: error = EBUSY; break;
107         case ERROR_PIPE_CONNECTED: error = EPIPE; break;
108         case ERROR_PIPE_LISTENING: error = EPIPE; break;
109         case ERROR_PIPE_NOT_CONNECTED: error = EPIPE; break;
110         case ERROR_PRIVILEGE_NOT_HELD: error = EACCES; break;
111         case ERROR_READ_FAULT: error = EIO; break;
112         case ERROR_SEEK: error = EIO; break;
113         case ERROR_SEEK_ON_DEVICE: error = ESPIPE; break;
114         case ERROR_SHARING_BUFFER_EXCEEDED: error = ENFILE; break;
115         case ERROR_SHARING_VIOLATION: error = EACCES; break;
116         case ERROR_STACK_OVERFLOW: error = ENOMEM; break;
117         case ERROR_SWAPERROR: error = ENOENT; break;
118         case ERROR_TOO_MANY_MODULES: error = EMFILE; break;
119         case ERROR_TOO_MANY_OPEN_FILES: error = EMFILE; break;
120         case ERROR_UNRECOGNIZED_MEDIA: error = ENXIO; break;
121         case ERROR_UNRECOGNIZED_VOLUME: error = ENODEV; break;
122         case ERROR_WAIT_NO_CHILDREN: error = ECHILD; break;
123         case ERROR_WRITE_FAULT: error = EIO; break;
124         case ERROR_WRITE_PROTECT: error = EROFS; break;
125         }
126         return error;
127 }
128
129 static inline int is_file_in_use_error(DWORD errcode)
130 {
131         switch (errcode) {
132         case ERROR_SHARING_VIOLATION:
133         case ERROR_ACCESS_DENIED:
134                 return 1;
135         }
136
137         return 0;
138 }
139
140 static int read_yes_no_answer(void)
141 {
142         char answer[1024];
143
144         if (fgets(answer, sizeof(answer), stdin)) {
145                 size_t answer_len = strlen(answer);
146                 int got_full_line = 0, c;
147
148                 /* remove the newline */
149                 if (answer_len >= 2 && answer[answer_len-2] == '\r') {
150                         answer[answer_len-2] = '\0';
151                         got_full_line = 1;
152                 } else if (answer_len >= 1 && answer[answer_len-1] == '\n') {
153                         answer[answer_len-1] = '\0';
154                         got_full_line = 1;
155                 }
156                 /* flush the buffer in case we did not get the full line */
157                 if (!got_full_line)
158                         while ((c = getchar()) != EOF && c != '\n')
159                                 ;
160         } else
161                 /* we could not read, return the
162                  * default answer which is no */
163                 return 0;
164
165         if (tolower(answer[0]) == 'y' && !answer[1])
166                 return 1;
167         if (!strncasecmp(answer, "yes", sizeof(answer)))
168                 return 1;
169         if (tolower(answer[0]) == 'n' && !answer[1])
170                 return 0;
171         if (!strncasecmp(answer, "no", sizeof(answer)))
172                 return 0;
173
174         /* did not find an answer we understand */
175         return -1;
176 }
177
178 static int ask_yes_no_if_possible(const char *format, ...)
179 {
180         char question[4096];
181         const char *retry_hook[] = { NULL, NULL, NULL };
182         va_list args;
183
184         va_start(args, format);
185         vsnprintf(question, sizeof(question), format, args);
186         va_end(args);
187
188         if ((retry_hook[0] = mingw_getenv("GIT_ASK_YESNO"))) {
189                 retry_hook[1] = question;
190                 return !run_command_v_opt(retry_hook, 0);
191         }
192
193         if (!isatty(_fileno(stdin)) || !isatty(_fileno(stderr)))
194                 return 0;
195
196         while (1) {
197                 int answer;
198                 fprintf(stderr, "%s (y/n) ", question);
199
200                 if ((answer = read_yes_no_answer()) >= 0)
201                         return answer;
202
203                 fprintf(stderr, "Sorry, I did not understand your answer. "
204                                 "Please type 'y' or 'n'\n");
205         }
206 }
207
208 /* Windows only */
209 enum hide_dotfiles_type {
210         HIDE_DOTFILES_FALSE = 0,
211         HIDE_DOTFILES_TRUE,
212         HIDE_DOTFILES_DOTGITONLY
213 };
214
215 static enum hide_dotfiles_type hide_dotfiles = HIDE_DOTFILES_DOTGITONLY;
216 static char *unset_environment_variables;
217
218 int mingw_core_config(const char *var, const char *value, void *cb)
219 {
220         if (!strcmp(var, "core.hidedotfiles")) {
221                 if (value && !strcasecmp(value, "dotgitonly"))
222                         hide_dotfiles = HIDE_DOTFILES_DOTGITONLY;
223                 else
224                         hide_dotfiles = git_config_bool(var, value);
225                 return 0;
226         }
227
228         if (!strcmp(var, "core.unsetenvvars")) {
229                 free(unset_environment_variables);
230                 unset_environment_variables = xstrdup(value);
231                 return 0;
232         }
233
234         return 0;
235 }
236
237 /* Normalizes NT paths as returned by some low-level APIs. */
238 static wchar_t *normalize_ntpath(wchar_t *wbuf)
239 {
240         int i;
241         /* fix absolute path prefixes */
242         if (wbuf[0] == '\\') {
243                 /* strip NT namespace prefixes */
244                 if (!wcsncmp(wbuf, L"\\??\\", 4) ||
245                     !wcsncmp(wbuf, L"\\\\?\\", 4))
246                         wbuf += 4;
247                 else if (!wcsnicmp(wbuf, L"\\DosDevices\\", 12))
248                         wbuf += 12;
249                 /* replace remaining '...UNC\' with '\\' */
250                 if (!wcsnicmp(wbuf, L"UNC\\", 4)) {
251                         wbuf += 2;
252                         *wbuf = '\\';
253                 }
254         }
255         /* convert backslashes to slashes */
256         for (i = 0; wbuf[i]; i++)
257                 if (wbuf[i] == '\\')
258                         wbuf[i] = '/';
259         return wbuf;
260 }
261
262 int mingw_unlink(const char *pathname)
263 {
264         int ret, tries = 0;
265         wchar_t wpathname[MAX_PATH];
266         if (xutftowcs_path(wpathname, pathname) < 0)
267                 return -1;
268
269         /* read-only files cannot be removed */
270         _wchmod(wpathname, 0666);
271         while ((ret = _wunlink(wpathname)) == -1 && tries < ARRAY_SIZE(delay)) {
272                 if (!is_file_in_use_error(GetLastError()))
273                         break;
274                 /*
275                  * We assume that some other process had the source or
276                  * destination file open at the wrong moment and retry.
277                  * In order to give the other process a higher chance to
278                  * complete its operation, we give up our time slice now.
279                  * If we have to retry again, we do sleep a bit.
280                  */
281                 Sleep(delay[tries]);
282                 tries++;
283         }
284         while (ret == -1 && is_file_in_use_error(GetLastError()) &&
285                ask_yes_no_if_possible("Unlink of file '%s' failed. "
286                         "Should I try again?", pathname))
287                ret = _wunlink(wpathname);
288         return ret;
289 }
290
291 static int is_dir_empty(const wchar_t *wpath)
292 {
293         WIN32_FIND_DATAW findbuf;
294         HANDLE handle;
295         wchar_t wbuf[MAX_PATH + 2];
296         wcscpy(wbuf, wpath);
297         wcscat(wbuf, L"\\*");
298         handle = FindFirstFileW(wbuf, &findbuf);
299         if (handle == INVALID_HANDLE_VALUE)
300                 return GetLastError() == ERROR_NO_MORE_FILES;
301
302         while (!wcscmp(findbuf.cFileName, L".") ||
303                         !wcscmp(findbuf.cFileName, L".."))
304                 if (!FindNextFileW(handle, &findbuf)) {
305                         DWORD err = GetLastError();
306                         FindClose(handle);
307                         return err == ERROR_NO_MORE_FILES;
308                 }
309         FindClose(handle);
310         return 0;
311 }
312
313 int mingw_rmdir(const char *pathname)
314 {
315         int ret, tries = 0;
316         wchar_t wpathname[MAX_PATH];
317         if (xutftowcs_path(wpathname, pathname) < 0)
318                 return -1;
319
320         while ((ret = _wrmdir(wpathname)) == -1 && tries < ARRAY_SIZE(delay)) {
321                 if (!is_file_in_use_error(GetLastError()))
322                         errno = err_win_to_posix(GetLastError());
323                 if (errno != EACCES)
324                         break;
325                 if (!is_dir_empty(wpathname)) {
326                         errno = ENOTEMPTY;
327                         break;
328                 }
329                 /*
330                  * We assume that some other process had the source or
331                  * destination file open at the wrong moment and retry.
332                  * In order to give the other process a higher chance to
333                  * complete its operation, we give up our time slice now.
334                  * If we have to retry again, we do sleep a bit.
335                  */
336                 Sleep(delay[tries]);
337                 tries++;
338         }
339         while (ret == -1 && errno == EACCES && is_file_in_use_error(GetLastError()) &&
340                ask_yes_no_if_possible("Deletion of directory '%s' failed. "
341                         "Should I try again?", pathname))
342                ret = _wrmdir(wpathname);
343         return ret;
344 }
345
346 static inline int needs_hiding(const char *path)
347 {
348         const char *basename;
349
350         if (hide_dotfiles == HIDE_DOTFILES_FALSE)
351                 return 0;
352
353         /* We cannot use basename(), as it would remove trailing slashes */
354         win32_skip_dos_drive_prefix((char **)&path);
355         if (!*path)
356                 return 0;
357
358         for (basename = path; *path; path++)
359                 if (is_dir_sep(*path)) {
360                         do {
361                                 path++;
362                         } while (is_dir_sep(*path));
363                         /* ignore trailing slashes */
364                         if (*path)
365                                 basename = path;
366                 }
367
368         if (hide_dotfiles == HIDE_DOTFILES_TRUE)
369                 return *basename == '.';
370
371         assert(hide_dotfiles == HIDE_DOTFILES_DOTGITONLY);
372         return !strncasecmp(".git", basename, 4) &&
373                 (!basename[4] || is_dir_sep(basename[4]));
374 }
375
376 static int set_hidden_flag(const wchar_t *path, int set)
377 {
378         DWORD original = GetFileAttributesW(path), modified;
379         if (set)
380                 modified = original | FILE_ATTRIBUTE_HIDDEN;
381         else
382                 modified = original & ~FILE_ATTRIBUTE_HIDDEN;
383         if (original == modified || SetFileAttributesW(path, modified))
384                 return 0;
385         errno = err_win_to_posix(GetLastError());
386         return -1;
387 }
388
389 int mingw_mkdir(const char *path, int mode)
390 {
391         int ret;
392         wchar_t wpath[MAX_PATH];
393
394         if (!is_valid_win32_path(path)) {
395                 errno = EINVAL;
396                 return -1;
397         }
398
399         if (xutftowcs_path(wpath, path) < 0)
400                 return -1;
401         ret = _wmkdir(wpath);
402         if (!ret && needs_hiding(path))
403                 return set_hidden_flag(wpath, 1);
404         return ret;
405 }
406
407 /*
408  * Calling CreateFile() using FILE_APPEND_DATA and without FILE_WRITE_DATA
409  * is documented in [1] as opening a writable file handle in append mode.
410  * (It is believed that) this is atomic since it is maintained by the
411  * kernel unlike the O_APPEND flag which is racily maintained by the CRT.
412  *
413  * [1] https://docs.microsoft.com/en-us/windows/desktop/fileio/file-access-rights-constants
414  *
415  * This trick does not appear to work for named pipes.  Instead it creates
416  * a named pipe client handle that cannot be written to.  Callers should
417  * just use the regular _wopen() for them.  (And since client handle gets
418  * bound to a unique server handle, it isn't really an issue.)
419  */
420 static int mingw_open_append(wchar_t const *wfilename, int oflags, ...)
421 {
422         HANDLE handle;
423         int fd;
424         DWORD create = (oflags & O_CREAT) ? OPEN_ALWAYS : OPEN_EXISTING;
425
426         /* only these flags are supported */
427         if ((oflags & ~O_CREAT) != (O_WRONLY | O_APPEND))
428                 return errno = ENOSYS, -1;
429
430         /*
431          * FILE_SHARE_WRITE is required to permit child processes
432          * to append to the file.
433          */
434         handle = CreateFileW(wfilename, FILE_APPEND_DATA,
435                         FILE_SHARE_WRITE | FILE_SHARE_READ,
436                         NULL, create, FILE_ATTRIBUTE_NORMAL, NULL);
437         if (handle == INVALID_HANDLE_VALUE)
438                 return errno = err_win_to_posix(GetLastError()), -1;
439
440         /*
441          * No O_APPEND here, because the CRT uses it only to reset the
442          * file pointer to EOF before each write(); but that is not
443          * necessary (and may lead to races) for a file created with
444          * FILE_APPEND_DATA.
445          */
446         fd = _open_osfhandle((intptr_t)handle, O_BINARY);
447         if (fd < 0)
448                 CloseHandle(handle);
449         return fd;
450 }
451
452 /*
453  * Does the pathname map to the local named pipe filesystem?
454  * That is, does it have a "//./pipe/" prefix?
455  */
456 static int is_local_named_pipe_path(const char *filename)
457 {
458         return (is_dir_sep(filename[0]) &&
459                 is_dir_sep(filename[1]) &&
460                 filename[2] == '.'  &&
461                 is_dir_sep(filename[3]) &&
462                 !strncasecmp(filename+4, "pipe", 4) &&
463                 is_dir_sep(filename[8]) &&
464                 filename[9]);
465 }
466
467 int mingw_open (const char *filename, int oflags, ...)
468 {
469         typedef int (*open_fn_t)(wchar_t const *wfilename, int oflags, ...);
470         va_list args;
471         unsigned mode;
472         int fd, create = (oflags & (O_CREAT | O_EXCL)) == (O_CREAT | O_EXCL);
473         wchar_t wfilename[MAX_PATH];
474         open_fn_t open_fn;
475
476         va_start(args, oflags);
477         mode = va_arg(args, int);
478         va_end(args);
479
480         if (!is_valid_win32_path(filename)) {
481                 errno = create ? EINVAL : ENOENT;
482                 return -1;
483         }
484
485         if (filename && !strcmp(filename, "/dev/null"))
486                 filename = "nul";
487
488         if ((oflags & O_APPEND) && !is_local_named_pipe_path(filename))
489                 open_fn = mingw_open_append;
490         else
491                 open_fn = _wopen;
492
493         if (xutftowcs_path(wfilename, filename) < 0)
494                 return -1;
495         fd = open_fn(wfilename, oflags, mode);
496
497         if (fd < 0 && (oflags & O_ACCMODE) != O_RDONLY && errno == EACCES) {
498                 DWORD attrs = GetFileAttributesW(wfilename);
499                 if (attrs != INVALID_FILE_ATTRIBUTES && (attrs & FILE_ATTRIBUTE_DIRECTORY))
500                         errno = EISDIR;
501         }
502         if ((oflags & O_CREAT) && needs_hiding(filename)) {
503                 /*
504                  * Internally, _wopen() uses the CreateFile() API which errors
505                  * out with an ERROR_ACCESS_DENIED if CREATE_ALWAYS was
506                  * specified and an already existing file's attributes do not
507                  * match *exactly*. As there is no mode or flag we can set that
508                  * would correspond to FILE_ATTRIBUTE_HIDDEN, let's just try
509                  * again *without* the O_CREAT flag (that corresponds to the
510                  * CREATE_ALWAYS flag of CreateFile()).
511                  */
512                 if (fd < 0 && errno == EACCES)
513                         fd = open_fn(wfilename, oflags & ~O_CREAT, mode);
514                 if (fd >= 0 && set_hidden_flag(wfilename, 1))
515                         warning("could not mark '%s' as hidden.", filename);
516         }
517         return fd;
518 }
519
520 static BOOL WINAPI ctrl_ignore(DWORD type)
521 {
522         return TRUE;
523 }
524
525 #undef fgetc
526 int mingw_fgetc(FILE *stream)
527 {
528         int ch;
529         if (!isatty(_fileno(stream)))
530                 return fgetc(stream);
531
532         SetConsoleCtrlHandler(ctrl_ignore, TRUE);
533         while (1) {
534                 ch = fgetc(stream);
535                 if (ch != EOF || GetLastError() != ERROR_OPERATION_ABORTED)
536                         break;
537
538                 /* Ctrl+C was pressed, simulate SIGINT and retry */
539                 mingw_raise(SIGINT);
540         }
541         SetConsoleCtrlHandler(ctrl_ignore, FALSE);
542         return ch;
543 }
544
545 #undef fopen
546 FILE *mingw_fopen (const char *filename, const char *otype)
547 {
548         int hide = needs_hiding(filename);
549         FILE *file;
550         wchar_t wfilename[MAX_PATH], wotype[4];
551         if (!is_valid_win32_path(filename)) {
552                 int create = otype && strchr(otype, 'w');
553                 errno = create ? EINVAL : ENOENT;
554                 return NULL;
555         }
556         if (filename && !strcmp(filename, "/dev/null"))
557                 filename = "nul";
558         if (xutftowcs_path(wfilename, filename) < 0 ||
559                 xutftowcs(wotype, otype, ARRAY_SIZE(wotype)) < 0)
560                 return NULL;
561         if (hide && !access(filename, F_OK) && set_hidden_flag(wfilename, 0)) {
562                 error("could not unhide %s", filename);
563                 return NULL;
564         }
565         file = _wfopen(wfilename, wotype);
566         if (!file && GetLastError() == ERROR_INVALID_NAME)
567                 errno = ENOENT;
568         if (file && hide && set_hidden_flag(wfilename, 1))
569                 warning("could not mark '%s' as hidden.", filename);
570         return file;
571 }
572
573 FILE *mingw_freopen (const char *filename, const char *otype, FILE *stream)
574 {
575         int hide = needs_hiding(filename);
576         FILE *file;
577         wchar_t wfilename[MAX_PATH], wotype[4];
578         if (!is_valid_win32_path(filename)) {
579                 int create = otype && strchr(otype, 'w');
580                 errno = create ? EINVAL : ENOENT;
581                 return NULL;
582         }
583         if (filename && !strcmp(filename, "/dev/null"))
584                 filename = "nul";
585         if (xutftowcs_path(wfilename, filename) < 0 ||
586                 xutftowcs(wotype, otype, ARRAY_SIZE(wotype)) < 0)
587                 return NULL;
588         if (hide && !access(filename, F_OK) && set_hidden_flag(wfilename, 0)) {
589                 error("could not unhide %s", filename);
590                 return NULL;
591         }
592         file = _wfreopen(wfilename, wotype, stream);
593         if (file && hide && set_hidden_flag(wfilename, 1))
594                 warning("could not mark '%s' as hidden.", filename);
595         return file;
596 }
597
598 #undef fflush
599 int mingw_fflush(FILE *stream)
600 {
601         int ret = fflush(stream);
602
603         /*
604          * write() is used behind the scenes of stdio output functions.
605          * Since git code does not check for errors after each stdio write
606          * operation, it can happen that write() is called by a later
607          * stdio function even if an earlier write() call failed. In the
608          * case of a pipe whose readable end was closed, only the first
609          * call to write() reports EPIPE on Windows. Subsequent write()
610          * calls report EINVAL. It is impossible to notice whether this
611          * fflush invocation triggered such a case, therefore, we have to
612          * catch all EINVAL errors whole-sale.
613          */
614         if (ret && errno == EINVAL)
615                 errno = EPIPE;
616
617         return ret;
618 }
619
620 #undef write
621 ssize_t mingw_write(int fd, const void *buf, size_t len)
622 {
623         ssize_t result = write(fd, buf, len);
624
625         if (result < 0 && errno == EINVAL && buf) {
626                 /* check if fd is a pipe */
627                 HANDLE h = (HANDLE) _get_osfhandle(fd);
628                 if (GetFileType(h) == FILE_TYPE_PIPE)
629                         errno = EPIPE;
630                 else
631                         errno = EINVAL;
632         }
633
634         return result;
635 }
636
637 int mingw_access(const char *filename, int mode)
638 {
639         wchar_t wfilename[MAX_PATH];
640         if (xutftowcs_path(wfilename, filename) < 0)
641                 return -1;
642         /* X_OK is not supported by the MSVCRT version */
643         return _waccess(wfilename, mode & ~X_OK);
644 }
645
646 int mingw_chdir(const char *dirname)
647 {
648         wchar_t wdirname[MAX_PATH];
649         if (xutftowcs_path(wdirname, dirname) < 0)
650                 return -1;
651         return _wchdir(wdirname);
652 }
653
654 int mingw_chmod(const char *filename, int mode)
655 {
656         wchar_t wfilename[MAX_PATH];
657         if (xutftowcs_path(wfilename, filename) < 0)
658                 return -1;
659         return _wchmod(wfilename, mode);
660 }
661
662 /*
663  * The unit of FILETIME is 100-nanoseconds since January 1, 1601, UTC.
664  * Returns the 100-nanoseconds ("hekto nanoseconds") since the epoch.
665  */
666 static inline long long filetime_to_hnsec(const FILETIME *ft)
667 {
668         long long winTime = ((long long)ft->dwHighDateTime << 32) + ft->dwLowDateTime;
669         /* Windows to Unix Epoch conversion */
670         return winTime - 116444736000000000LL;
671 }
672
673 static inline void filetime_to_timespec(const FILETIME *ft, struct timespec *ts)
674 {
675         long long hnsec = filetime_to_hnsec(ft);
676         ts->tv_sec = (time_t)(hnsec / 10000000);
677         ts->tv_nsec = (hnsec % 10000000) * 100;
678 }
679
680 /**
681  * Verifies that safe_create_leading_directories() would succeed.
682  */
683 static int has_valid_directory_prefix(wchar_t *wfilename)
684 {
685         int n = wcslen(wfilename);
686
687         while (n > 0) {
688                 wchar_t c = wfilename[--n];
689                 DWORD attributes;
690
691                 if (!is_dir_sep(c))
692                         continue;
693
694                 wfilename[n] = L'\0';
695                 attributes = GetFileAttributesW(wfilename);
696                 wfilename[n] = c;
697                 if (attributes == FILE_ATTRIBUTE_DIRECTORY ||
698                                 attributes == FILE_ATTRIBUTE_DEVICE)
699                         return 1;
700                 if (attributes == INVALID_FILE_ATTRIBUTES)
701                         switch (GetLastError()) {
702                         case ERROR_PATH_NOT_FOUND:
703                                 continue;
704                         case ERROR_FILE_NOT_FOUND:
705                                 /* This implies parent directory exists. */
706                                 return 1;
707                         }
708                 return 0;
709         }
710         return 1;
711 }
712
713 /* We keep the do_lstat code in a separate function to avoid recursion.
714  * When a path ends with a slash, the stat will fail with ENOENT. In
715  * this case, we strip the trailing slashes and stat again.
716  *
717  * If follow is true then act like stat() and report on the link
718  * target. Otherwise report on the link itself.
719  */
720 static int do_lstat(int follow, const char *file_name, struct stat *buf)
721 {
722         WIN32_FILE_ATTRIBUTE_DATA fdata;
723         wchar_t wfilename[MAX_PATH];
724         if (xutftowcs_path(wfilename, file_name) < 0)
725                 return -1;
726
727         if (GetFileAttributesExW(wfilename, GetFileExInfoStandard, &fdata)) {
728                 buf->st_ino = 0;
729                 buf->st_gid = 0;
730                 buf->st_uid = 0;
731                 buf->st_nlink = 1;
732                 buf->st_mode = file_attr_to_st_mode(fdata.dwFileAttributes);
733                 buf->st_size = fdata.nFileSizeLow |
734                         (((off_t)fdata.nFileSizeHigh)<<32);
735                 buf->st_dev = buf->st_rdev = 0; /* not used by Git */
736                 filetime_to_timespec(&(fdata.ftLastAccessTime), &(buf->st_atim));
737                 filetime_to_timespec(&(fdata.ftLastWriteTime), &(buf->st_mtim));
738                 filetime_to_timespec(&(fdata.ftCreationTime), &(buf->st_ctim));
739                 if (fdata.dwFileAttributes & FILE_ATTRIBUTE_REPARSE_POINT) {
740                         WIN32_FIND_DATAW findbuf;
741                         HANDLE handle = FindFirstFileW(wfilename, &findbuf);
742                         if (handle != INVALID_HANDLE_VALUE) {
743                                 if ((findbuf.dwFileAttributes & FILE_ATTRIBUTE_REPARSE_POINT) &&
744                                                 (findbuf.dwReserved0 == IO_REPARSE_TAG_SYMLINK)) {
745                                         if (follow) {
746                                                 char buffer[MAXIMUM_REPARSE_DATA_BUFFER_SIZE];
747                                                 buf->st_size = readlink(file_name, buffer, MAXIMUM_REPARSE_DATA_BUFFER_SIZE);
748                                         } else {
749                                                 buf->st_mode = S_IFLNK;
750                                         }
751                                         buf->st_mode |= S_IREAD;
752                                         if (!(findbuf.dwFileAttributes & FILE_ATTRIBUTE_READONLY))
753                                                 buf->st_mode |= S_IWRITE;
754                                 }
755                                 FindClose(handle);
756                         }
757                 }
758                 return 0;
759         }
760         switch (GetLastError()) {
761         case ERROR_ACCESS_DENIED:
762         case ERROR_SHARING_VIOLATION:
763         case ERROR_LOCK_VIOLATION:
764         case ERROR_SHARING_BUFFER_EXCEEDED:
765                 errno = EACCES;
766                 break;
767         case ERROR_BUFFER_OVERFLOW:
768                 errno = ENAMETOOLONG;
769                 break;
770         case ERROR_NOT_ENOUGH_MEMORY:
771                 errno = ENOMEM;
772                 break;
773         case ERROR_PATH_NOT_FOUND:
774                 if (!has_valid_directory_prefix(wfilename)) {
775                         errno = ENOTDIR;
776                         break;
777                 }
778                 /* fallthru */
779         default:
780                 errno = ENOENT;
781                 break;
782         }
783         return -1;
784 }
785
786 /* We provide our own lstat/fstat functions, since the provided
787  * lstat/fstat functions are so slow. These stat functions are
788  * tailored for Git's usage (read: fast), and are not meant to be
789  * complete. Note that Git stat()s are redirected to mingw_lstat()
790  * too, since Windows doesn't really handle symlinks that well.
791  */
792 static int do_stat_internal(int follow, const char *file_name, struct stat *buf)
793 {
794         int namelen;
795         char alt_name[PATH_MAX];
796
797         if (!do_lstat(follow, file_name, buf))
798                 return 0;
799
800         /* if file_name ended in a '/', Windows returned ENOENT;
801          * try again without trailing slashes
802          */
803         if (errno != ENOENT)
804                 return -1;
805
806         namelen = strlen(file_name);
807         if (namelen && file_name[namelen-1] != '/')
808                 return -1;
809         while (namelen && file_name[namelen-1] == '/')
810                 --namelen;
811         if (!namelen || namelen >= PATH_MAX)
812                 return -1;
813
814         memcpy(alt_name, file_name, namelen);
815         alt_name[namelen] = 0;
816         return do_lstat(follow, alt_name, buf);
817 }
818
819 static int get_file_info_by_handle(HANDLE hnd, struct stat *buf)
820 {
821         BY_HANDLE_FILE_INFORMATION fdata;
822
823         if (!GetFileInformationByHandle(hnd, &fdata)) {
824                 errno = err_win_to_posix(GetLastError());
825                 return -1;
826         }
827
828         buf->st_ino = 0;
829         buf->st_gid = 0;
830         buf->st_uid = 0;
831         buf->st_nlink = 1;
832         buf->st_mode = file_attr_to_st_mode(fdata.dwFileAttributes);
833         buf->st_size = fdata.nFileSizeLow |
834                 (((off_t)fdata.nFileSizeHigh)<<32);
835         buf->st_dev = buf->st_rdev = 0; /* not used by Git */
836         filetime_to_timespec(&(fdata.ftLastAccessTime), &(buf->st_atim));
837         filetime_to_timespec(&(fdata.ftLastWriteTime), &(buf->st_mtim));
838         filetime_to_timespec(&(fdata.ftCreationTime), &(buf->st_ctim));
839         return 0;
840 }
841
842 int mingw_lstat(const char *file_name, struct stat *buf)
843 {
844         return do_stat_internal(0, file_name, buf);
845 }
846 int mingw_stat(const char *file_name, struct stat *buf)
847 {
848         return do_stat_internal(1, file_name, buf);
849 }
850
851 int mingw_fstat(int fd, struct stat *buf)
852 {
853         HANDLE fh = (HANDLE)_get_osfhandle(fd);
854         DWORD avail, type = GetFileType(fh) & ~FILE_TYPE_REMOTE;
855
856         switch (type) {
857         case FILE_TYPE_DISK:
858                 return get_file_info_by_handle(fh, buf);
859
860         case FILE_TYPE_CHAR:
861         case FILE_TYPE_PIPE:
862                 /* initialize stat fields */
863                 memset(buf, 0, sizeof(*buf));
864                 buf->st_nlink = 1;
865
866                 if (type == FILE_TYPE_CHAR) {
867                         buf->st_mode = _S_IFCHR;
868                 } else {
869                         buf->st_mode = _S_IFIFO;
870                         if (PeekNamedPipe(fh, NULL, 0, NULL, &avail, NULL))
871                                 buf->st_size = avail;
872                 }
873                 return 0;
874
875         default:
876                 errno = EBADF;
877                 return -1;
878         }
879 }
880
881 static inline void time_t_to_filetime(time_t t, FILETIME *ft)
882 {
883         long long winTime = t * 10000000LL + 116444736000000000LL;
884         ft->dwLowDateTime = winTime;
885         ft->dwHighDateTime = winTime >> 32;
886 }
887
888 int mingw_utime (const char *file_name, const struct utimbuf *times)
889 {
890         FILETIME mft, aft;
891         int fh, rc;
892         DWORD attrs;
893         wchar_t wfilename[MAX_PATH];
894         if (xutftowcs_path(wfilename, file_name) < 0)
895                 return -1;
896
897         /* must have write permission */
898         attrs = GetFileAttributesW(wfilename);
899         if (attrs != INVALID_FILE_ATTRIBUTES &&
900             (attrs & FILE_ATTRIBUTE_READONLY)) {
901                 /* ignore errors here; open() will report them */
902                 SetFileAttributesW(wfilename, attrs & ~FILE_ATTRIBUTE_READONLY);
903         }
904
905         if ((fh = _wopen(wfilename, O_RDWR | O_BINARY)) < 0) {
906                 rc = -1;
907                 goto revert_attrs;
908         }
909
910         if (times) {
911                 time_t_to_filetime(times->modtime, &mft);
912                 time_t_to_filetime(times->actime, &aft);
913         } else {
914                 GetSystemTimeAsFileTime(&mft);
915                 aft = mft;
916         }
917         if (!SetFileTime((HANDLE)_get_osfhandle(fh), NULL, &aft, &mft)) {
918                 errno = EINVAL;
919                 rc = -1;
920         } else
921                 rc = 0;
922         close(fh);
923
924 revert_attrs:
925         if (attrs != INVALID_FILE_ATTRIBUTES &&
926             (attrs & FILE_ATTRIBUTE_READONLY)) {
927                 /* ignore errors again */
928                 SetFileAttributesW(wfilename, attrs);
929         }
930         return rc;
931 }
932
933 #undef strftime
934 size_t mingw_strftime(char *s, size_t max,
935                       const char *format, const struct tm *tm)
936 {
937         size_t ret = strftime(s, max, format, tm);
938
939         if (!ret && errno == EINVAL)
940                 die("invalid strftime format: '%s'", format);
941         return ret;
942 }
943
944 unsigned int sleep (unsigned int seconds)
945 {
946         Sleep(seconds*1000);
947         return 0;
948 }
949
950 char *mingw_mktemp(char *template)
951 {
952         wchar_t wtemplate[MAX_PATH];
953         if (xutftowcs_path(wtemplate, template) < 0)
954                 return NULL;
955         if (!_wmktemp(wtemplate))
956                 return NULL;
957         if (xwcstoutf(template, wtemplate, strlen(template) + 1) < 0)
958                 return NULL;
959         return template;
960 }
961
962 int mkstemp(char *template)
963 {
964         char *filename = mktemp(template);
965         if (filename == NULL)
966                 return -1;
967         return open(filename, O_RDWR | O_CREAT, 0600);
968 }
969
970 int gettimeofday(struct timeval *tv, void *tz)
971 {
972         FILETIME ft;
973         long long hnsec;
974
975         GetSystemTimeAsFileTime(&ft);
976         hnsec = filetime_to_hnsec(&ft);
977         tv->tv_sec = hnsec / 10000000;
978         tv->tv_usec = (hnsec % 10000000) / 10;
979         return 0;
980 }
981
982 int pipe(int filedes[2])
983 {
984         HANDLE h[2];
985
986         /* this creates non-inheritable handles */
987         if (!CreatePipe(&h[0], &h[1], NULL, 8192)) {
988                 errno = err_win_to_posix(GetLastError());
989                 return -1;
990         }
991         filedes[0] = _open_osfhandle(HCAST(int, h[0]), O_NOINHERIT);
992         if (filedes[0] < 0) {
993                 CloseHandle(h[0]);
994                 CloseHandle(h[1]);
995                 return -1;
996         }
997         filedes[1] = _open_osfhandle(HCAST(int, h[1]), O_NOINHERIT);
998         if (filedes[1] < 0) {
999                 close(filedes[0]);
1000                 CloseHandle(h[1]);
1001                 return -1;
1002         }
1003         return 0;
1004 }
1005
1006 struct tm *gmtime_r(const time_t *timep, struct tm *result)
1007 {
1008         /* gmtime() in MSVCRT.DLL is thread-safe, but not reentrant */
1009         memcpy(result, gmtime(timep), sizeof(struct tm));
1010         return result;
1011 }
1012
1013 struct tm *localtime_r(const time_t *timep, struct tm *result)
1014 {
1015         /* localtime() in MSVCRT.DLL is thread-safe, but not reentrant */
1016         memcpy(result, localtime(timep), sizeof(struct tm));
1017         return result;
1018 }
1019
1020 char *mingw_getcwd(char *pointer, int len)
1021 {
1022         wchar_t cwd[MAX_PATH], wpointer[MAX_PATH];
1023         DWORD ret = GetCurrentDirectoryW(ARRAY_SIZE(cwd), cwd);
1024
1025         if (!ret || ret >= ARRAY_SIZE(cwd)) {
1026                 errno = ret ? ENAMETOOLONG : err_win_to_posix(GetLastError());
1027                 return NULL;
1028         }
1029         ret = GetLongPathNameW(cwd, wpointer, ARRAY_SIZE(wpointer));
1030         if (!ret && GetLastError() == ERROR_ACCESS_DENIED) {
1031                 HANDLE hnd = CreateFileW(cwd, 0,
1032                         FILE_SHARE_READ | FILE_SHARE_WRITE | FILE_SHARE_DELETE, NULL,
1033                         OPEN_EXISTING, FILE_FLAG_BACKUP_SEMANTICS, NULL);
1034                 if (hnd == INVALID_HANDLE_VALUE)
1035                         return NULL;
1036                 ret = GetFinalPathNameByHandleW(hnd, wpointer, ARRAY_SIZE(wpointer), 0);
1037                 CloseHandle(hnd);
1038                 if (!ret || ret >= ARRAY_SIZE(wpointer))
1039                         return NULL;
1040                 if (xwcstoutf(pointer, normalize_ntpath(wpointer), len) < 0)
1041                         return NULL;
1042                 return pointer;
1043         }
1044         if (!ret || ret >= ARRAY_SIZE(wpointer))
1045                 return NULL;
1046         if (xwcstoutf(pointer, wpointer, len) < 0)
1047                 return NULL;
1048         convert_slashes(pointer);
1049         return pointer;
1050 }
1051
1052 /*
1053  * See "Parsing C++ Command-Line Arguments" at Microsoft's Docs:
1054  * https://docs.microsoft.com/en-us/cpp/cpp/parsing-cpp-command-line-arguments
1055  */
1056 static const char *quote_arg_msvc(const char *arg)
1057 {
1058         /* count chars to quote */
1059         int len = 0, n = 0;
1060         int force_quotes = 0;
1061         char *q, *d;
1062         const char *p = arg;
1063         if (!*p) force_quotes = 1;
1064         while (*p) {
1065                 if (isspace(*p) || *p == '*' || *p == '?' || *p == '{' || *p == '\'')
1066                         force_quotes = 1;
1067                 else if (*p == '"')
1068                         n++;
1069                 else if (*p == '\\') {
1070                         int count = 0;
1071                         while (*p == '\\') {
1072                                 count++;
1073                                 p++;
1074                                 len++;
1075                         }
1076                         if (*p == '"' || !*p)
1077                                 n += count*2 + 1;
1078                         continue;
1079                 }
1080                 len++;
1081                 p++;
1082         }
1083         if (!force_quotes && n == 0)
1084                 return arg;
1085
1086         /* insert \ where necessary */
1087         d = q = xmalloc(st_add3(len, n, 3));
1088         *d++ = '"';
1089         while (*arg) {
1090                 if (*arg == '"')
1091                         *d++ = '\\';
1092                 else if (*arg == '\\') {
1093                         int count = 0;
1094                         while (*arg == '\\') {
1095                                 count++;
1096                                 *d++ = *arg++;
1097                         }
1098                         if (*arg == '"' || !*arg) {
1099                                 while (count-- > 0)
1100                                         *d++ = '\\';
1101                                 /* don't escape the surrounding end quote */
1102                                 if (!*arg)
1103                                         break;
1104                                 *d++ = '\\';
1105                         }
1106                 }
1107                 *d++ = *arg++;
1108         }
1109         *d++ = '"';
1110         *d++ = '\0';
1111         return q;
1112 }
1113
1114 #include "quote.h"
1115
1116 static const char *quote_arg_msys2(const char *arg)
1117 {
1118         struct strbuf buf = STRBUF_INIT;
1119         const char *p2 = arg, *p;
1120
1121         for (p = arg; *p; p++) {
1122                 int ws = isspace(*p);
1123                 if (!ws && *p != '\\' && *p != '"' && *p != '{' && *p != '\'' &&
1124                     *p != '?' && *p != '*' && *p != '~')
1125                         continue;
1126                 if (!buf.len)
1127                         strbuf_addch(&buf, '"');
1128                 if (p != p2)
1129                         strbuf_add(&buf, p2, p - p2);
1130                 if (*p == '\\' || *p == '"')
1131                         strbuf_addch(&buf, '\\');
1132                 p2 = p;
1133         }
1134
1135         if (p == arg)
1136                 strbuf_addch(&buf, '"');
1137         else if (!buf.len)
1138                 return arg;
1139         else
1140                 strbuf_add(&buf, p2, p - p2);
1141
1142         strbuf_addch(&buf, '"');
1143         return strbuf_detach(&buf, 0);
1144 }
1145
1146 static const char *parse_interpreter(const char *cmd)
1147 {
1148         static char buf[100];
1149         char *p, *opt;
1150         int n, fd;
1151
1152         /* don't even try a .exe */
1153         n = strlen(cmd);
1154         if (n >= 4 && !strcasecmp(cmd+n-4, ".exe"))
1155                 return NULL;
1156
1157         fd = open(cmd, O_RDONLY);
1158         if (fd < 0)
1159                 return NULL;
1160         n = read(fd, buf, sizeof(buf)-1);
1161         close(fd);
1162         if (n < 4)      /* at least '#!/x' and not error */
1163                 return NULL;
1164
1165         if (buf[0] != '#' || buf[1] != '!')
1166                 return NULL;
1167         buf[n] = '\0';
1168         p = buf + strcspn(buf, "\r\n");
1169         if (!*p)
1170                 return NULL;
1171
1172         *p = '\0';
1173         if (!(p = strrchr(buf+2, '/')) && !(p = strrchr(buf+2, '\\')))
1174                 return NULL;
1175         /* strip options */
1176         if ((opt = strchr(p+1, ' ')))
1177                 *opt = '\0';
1178         return p+1;
1179 }
1180
1181 /*
1182  * exe_only means that we only want to detect .exe files, but not scripts
1183  * (which do not have an extension)
1184  */
1185 static char *lookup_prog(const char *dir, int dirlen, const char *cmd,
1186                          int isexe, int exe_only)
1187 {
1188         char path[MAX_PATH];
1189         snprintf(path, sizeof(path), "%.*s\\%s.exe", dirlen, dir, cmd);
1190
1191         if (!isexe && access(path, F_OK) == 0)
1192                 return xstrdup(path);
1193         path[strlen(path)-4] = '\0';
1194         if ((!exe_only || isexe) && access(path, F_OK) == 0)
1195                 if (!(GetFileAttributes(path) & FILE_ATTRIBUTE_DIRECTORY))
1196                         return xstrdup(path);
1197         return NULL;
1198 }
1199
1200 /*
1201  * Determines the absolute path of cmd using the split path in path.
1202  * If cmd contains a slash or backslash, no lookup is performed.
1203  */
1204 static char *path_lookup(const char *cmd, int exe_only)
1205 {
1206         const char *path;
1207         char *prog = NULL;
1208         int len = strlen(cmd);
1209         int isexe = len >= 4 && !strcasecmp(cmd+len-4, ".exe");
1210
1211         if (strchr(cmd, '/') || strchr(cmd, '\\'))
1212                 return xstrdup(cmd);
1213
1214         path = mingw_getenv("PATH");
1215         if (!path)
1216                 return NULL;
1217
1218         while (!prog) {
1219                 const char *sep = strchrnul(path, ';');
1220                 int dirlen = sep - path;
1221                 if (dirlen)
1222                         prog = lookup_prog(path, dirlen, cmd, isexe, exe_only);
1223                 if (!*sep)
1224                         break;
1225                 path = sep + 1;
1226         }
1227
1228         return prog;
1229 }
1230
1231 static const wchar_t *wcschrnul(const wchar_t *s, wchar_t c)
1232 {
1233         while (*s && *s != c)
1234                 s++;
1235         return s;
1236 }
1237
1238 /* Compare only keys */
1239 static int wenvcmp(const void *a, const void *b)
1240 {
1241         wchar_t *p = *(wchar_t **)a, *q = *(wchar_t **)b;
1242         size_t p_len, q_len;
1243
1244         /* Find the keys */
1245         p_len = wcschrnul(p, L'=') - p;
1246         q_len = wcschrnul(q, L'=') - q;
1247
1248         /* If the length differs, include the shorter key's NUL */
1249         if (p_len < q_len)
1250                 p_len++;
1251         else if (p_len > q_len)
1252                 p_len = q_len + 1;
1253
1254         return _wcsnicmp(p, q, p_len);
1255 }
1256
1257 /* We need a stable sort to convert the environment between UTF-16 <-> UTF-8 */
1258 #ifndef INTERNAL_QSORT
1259 #include "qsort.c"
1260 #endif
1261
1262 /*
1263  * Build an environment block combining the inherited environment
1264  * merged with the given list of settings.
1265  *
1266  * Values of the form "KEY=VALUE" in deltaenv override inherited values.
1267  * Values of the form "KEY" in deltaenv delete inherited values.
1268  *
1269  * Multiple entries in deltaenv for the same key are explicitly allowed.
1270  *
1271  * We return a contiguous block of UNICODE strings with a final trailing
1272  * zero word.
1273  */
1274 static wchar_t *make_environment_block(char **deltaenv)
1275 {
1276         wchar_t *wenv = GetEnvironmentStringsW(), *wdeltaenv, *result, *p;
1277         size_t wlen, s, delta_size, size;
1278
1279         wchar_t **array = NULL;
1280         size_t alloc = 0, nr = 0, i;
1281
1282         size = 1; /* for extra NUL at the end */
1283
1284         /* If there is no deltaenv to apply, simply return a copy. */
1285         if (!deltaenv || !*deltaenv) {
1286                 for (p = wenv; p && *p; ) {
1287                         size_t s = wcslen(p) + 1;
1288                         size += s;
1289                         p += s;
1290                 }
1291
1292                 ALLOC_ARRAY(result, size);
1293                 memcpy(result, wenv, size * sizeof(*wenv));
1294                 FreeEnvironmentStringsW(wenv);
1295                 return result;
1296         }
1297
1298         /*
1299          * If there is a deltaenv, let's accumulate all keys into `array`,
1300          * sort them using the stable git_qsort() and then copy, skipping
1301          * duplicate keys
1302          */
1303         for (p = wenv; p && *p; ) {
1304                 ALLOC_GROW(array, nr + 1, alloc);
1305                 s = wcslen(p) + 1;
1306                 array[nr++] = p;
1307                 p += s;
1308                 size += s;
1309         }
1310
1311         /* (over-)assess size needed for wchar version of deltaenv */
1312         for (delta_size = 0, i = 0; deltaenv[i]; i++)
1313                 delta_size += strlen(deltaenv[i]) * 2 + 1;
1314         ALLOC_ARRAY(wdeltaenv, delta_size);
1315
1316         /* convert the deltaenv, appending to array */
1317         for (i = 0, p = wdeltaenv; deltaenv[i]; i++) {
1318                 ALLOC_GROW(array, nr + 1, alloc);
1319                 wlen = xutftowcs(p, deltaenv[i], wdeltaenv + delta_size - p);
1320                 array[nr++] = p;
1321                 p += wlen + 1;
1322         }
1323
1324         git_qsort(array, nr, sizeof(*array), wenvcmp);
1325         ALLOC_ARRAY(result, size + delta_size);
1326
1327         for (p = result, i = 0; i < nr; i++) {
1328                 /* Skip any duplicate keys; last one wins */
1329                 while (i + 1 < nr && !wenvcmp(array + i, array + i + 1))
1330                        i++;
1331
1332                 /* Skip "to delete" entry */
1333                 if (!wcschr(array[i], L'='))
1334                         continue;
1335
1336                 size = wcslen(array[i]) + 1;
1337                 memcpy(p, array[i], size * sizeof(*p));
1338                 p += size;
1339         }
1340         *p = L'\0';
1341
1342         free(array);
1343         free(wdeltaenv);
1344         FreeEnvironmentStringsW(wenv);
1345         return result;
1346 }
1347
1348 static void do_unset_environment_variables(void)
1349 {
1350         static int done;
1351         char *p = unset_environment_variables;
1352
1353         if (done || !p)
1354                 return;
1355         done = 1;
1356
1357         for (;;) {
1358                 char *comma = strchr(p, ',');
1359
1360                 if (comma)
1361                         *comma = '\0';
1362                 unsetenv(p);
1363                 if (!comma)
1364                         break;
1365                 p = comma + 1;
1366         }
1367 }
1368
1369 struct pinfo_t {
1370         struct pinfo_t *next;
1371         pid_t pid;
1372         HANDLE proc;
1373 };
1374 static struct pinfo_t *pinfo = NULL;
1375 CRITICAL_SECTION pinfo_cs;
1376
1377 /* Used to match and chomp off path components */
1378 static inline int match_last_path_component(const char *path, size_t *len,
1379                                             const char *component)
1380 {
1381         size_t component_len = strlen(component);
1382         if (*len < component_len + 1 ||
1383             !is_dir_sep(path[*len - component_len - 1]) ||
1384             fspathncmp(path + *len - component_len, component, component_len))
1385                 return 0;
1386         *len -= component_len + 1;
1387         /* chomp off repeated dir separators */
1388         while (*len > 0 && is_dir_sep(path[*len - 1]))
1389                 (*len)--;
1390         return 1;
1391 }
1392
1393 static int is_msys2_sh(const char *cmd)
1394 {
1395         if (!cmd)
1396                 return 0;
1397
1398         if (!strcmp(cmd, "sh")) {
1399                 static int ret = -1;
1400                 char *p;
1401
1402                 if (ret >= 0)
1403                         return ret;
1404
1405                 p = path_lookup(cmd, 0);
1406                 if (!p)
1407                         ret = 0;
1408                 else {
1409                         size_t len = strlen(p);
1410
1411                         ret = match_last_path_component(p, &len, "sh.exe") &&
1412                                 match_last_path_component(p, &len, "bin") &&
1413                                 match_last_path_component(p, &len, "usr");
1414                         free(p);
1415                 }
1416                 return ret;
1417         }
1418
1419         if (ends_with(cmd, "\\sh.exe")) {
1420                 static char *sh;
1421
1422                 if (!sh)
1423                         sh = path_lookup("sh", 0);
1424
1425                 return !fspathcmp(cmd, sh);
1426         }
1427
1428         return 0;
1429 }
1430
1431 static pid_t mingw_spawnve_fd(const char *cmd, const char **argv, char **deltaenv,
1432                               const char *dir,
1433                               int prepend_cmd, int fhin, int fhout, int fherr)
1434 {
1435         STARTUPINFOW si;
1436         PROCESS_INFORMATION pi;
1437         struct strbuf args;
1438         wchar_t wcmd[MAX_PATH], wdir[MAX_PATH], *wargs, *wenvblk = NULL;
1439         unsigned flags = CREATE_UNICODE_ENVIRONMENT;
1440         BOOL ret;
1441         HANDLE cons;
1442         const char *(*quote_arg)(const char *arg) =
1443                 is_msys2_sh(cmd ? cmd : *argv) ?
1444                 quote_arg_msys2 : quote_arg_msvc;
1445
1446         do_unset_environment_variables();
1447
1448         /* Determine whether or not we are associated to a console */
1449         cons = CreateFile("CONOUT$", GENERIC_WRITE,
1450                         FILE_SHARE_WRITE, NULL, OPEN_EXISTING,
1451                         FILE_ATTRIBUTE_NORMAL, NULL);
1452         if (cons == INVALID_HANDLE_VALUE) {
1453                 /* There is no console associated with this process.
1454                  * Since the child is a console process, Windows
1455                  * would normally create a console window. But
1456                  * since we'll be redirecting std streams, we do
1457                  * not need the console.
1458                  * It is necessary to use DETACHED_PROCESS
1459                  * instead of CREATE_NO_WINDOW to make ssh
1460                  * recognize that it has no console.
1461                  */
1462                 flags |= DETACHED_PROCESS;
1463         } else {
1464                 /* There is already a console. If we specified
1465                  * DETACHED_PROCESS here, too, Windows would
1466                  * disassociate the child from the console.
1467                  * The same is true for CREATE_NO_WINDOW.
1468                  * Go figure!
1469                  */
1470                 CloseHandle(cons);
1471         }
1472         memset(&si, 0, sizeof(si));
1473         si.cb = sizeof(si);
1474         si.dwFlags = STARTF_USESTDHANDLES;
1475         si.hStdInput = winansi_get_osfhandle(fhin);
1476         si.hStdOutput = winansi_get_osfhandle(fhout);
1477         si.hStdError = winansi_get_osfhandle(fherr);
1478
1479         if (*argv && !strcmp(cmd, *argv))
1480                 wcmd[0] = L'\0';
1481         else if (xutftowcs_path(wcmd, cmd) < 0)
1482                 return -1;
1483         if (dir && xutftowcs_path(wdir, dir) < 0)
1484                 return -1;
1485
1486         /* concatenate argv, quoting args as we go */
1487         strbuf_init(&args, 0);
1488         if (prepend_cmd) {
1489                 char *quoted = (char *)quote_arg(cmd);
1490                 strbuf_addstr(&args, quoted);
1491                 if (quoted != cmd)
1492                         free(quoted);
1493         }
1494         for (; *argv; argv++) {
1495                 char *quoted = (char *)quote_arg(*argv);
1496                 if (*args.buf)
1497                         strbuf_addch(&args, ' ');
1498                 strbuf_addstr(&args, quoted);
1499                 if (quoted != *argv)
1500                         free(quoted);
1501         }
1502
1503         ALLOC_ARRAY(wargs, st_add(st_mult(2, args.len), 1));
1504         xutftowcs(wargs, args.buf, 2 * args.len + 1);
1505         strbuf_release(&args);
1506
1507         wenvblk = make_environment_block(deltaenv);
1508
1509         memset(&pi, 0, sizeof(pi));
1510         ret = CreateProcessW(*wcmd ? wcmd : NULL, wargs, NULL, NULL, TRUE,
1511                 flags, wenvblk, dir ? wdir : NULL, &si, &pi);
1512
1513         free(wenvblk);
1514         free(wargs);
1515
1516         if (!ret) {
1517                 errno = ENOENT;
1518                 return -1;
1519         }
1520         CloseHandle(pi.hThread);
1521
1522         /*
1523          * The process ID is the human-readable identifier of the process
1524          * that we want to present in log and error messages. The handle
1525          * is not useful for this purpose. But we cannot close it, either,
1526          * because it is not possible to turn a process ID into a process
1527          * handle after the process terminated.
1528          * Keep the handle in a list for waitpid.
1529          */
1530         EnterCriticalSection(&pinfo_cs);
1531         {
1532                 struct pinfo_t *info = xmalloc(sizeof(struct pinfo_t));
1533                 info->pid = pi.dwProcessId;
1534                 info->proc = pi.hProcess;
1535                 info->next = pinfo;
1536                 pinfo = info;
1537         }
1538         LeaveCriticalSection(&pinfo_cs);
1539
1540         return (pid_t)pi.dwProcessId;
1541 }
1542
1543 static pid_t mingw_spawnv(const char *cmd, const char **argv, int prepend_cmd)
1544 {
1545         return mingw_spawnve_fd(cmd, argv, NULL, NULL, prepend_cmd, 0, 1, 2);
1546 }
1547
1548 pid_t mingw_spawnvpe(const char *cmd, const char **argv, char **deltaenv,
1549                      const char *dir,
1550                      int fhin, int fhout, int fherr)
1551 {
1552         pid_t pid;
1553         char *prog = path_lookup(cmd, 0);
1554
1555         if (!prog) {
1556                 errno = ENOENT;
1557                 pid = -1;
1558         }
1559         else {
1560                 const char *interpr = parse_interpreter(prog);
1561
1562                 if (interpr) {
1563                         const char *argv0 = argv[0];
1564                         char *iprog = path_lookup(interpr, 1);
1565                         argv[0] = prog;
1566                         if (!iprog) {
1567                                 errno = ENOENT;
1568                                 pid = -1;
1569                         }
1570                         else {
1571                                 pid = mingw_spawnve_fd(iprog, argv, deltaenv, dir, 1,
1572                                                        fhin, fhout, fherr);
1573                                 free(iprog);
1574                         }
1575                         argv[0] = argv0;
1576                 }
1577                 else
1578                         pid = mingw_spawnve_fd(prog, argv, deltaenv, dir, 0,
1579                                                fhin, fhout, fherr);
1580                 free(prog);
1581         }
1582         return pid;
1583 }
1584
1585 static int try_shell_exec(const char *cmd, char *const *argv)
1586 {
1587         const char *interpr = parse_interpreter(cmd);
1588         char *prog;
1589         int pid = 0;
1590
1591         if (!interpr)
1592                 return 0;
1593         prog = path_lookup(interpr, 1);
1594         if (prog) {
1595                 int exec_id;
1596                 int argc = 0;
1597                 const char **argv2;
1598                 while (argv[argc]) argc++;
1599                 ALLOC_ARRAY(argv2, argc + 1);
1600                 argv2[0] = (char *)cmd; /* full path to the script file */
1601                 memcpy(&argv2[1], &argv[1], sizeof(*argv) * argc);
1602                 exec_id = trace2_exec(prog, argv2);
1603                 pid = mingw_spawnv(prog, argv2, 1);
1604                 if (pid >= 0) {
1605                         int status;
1606                         if (waitpid(pid, &status, 0) < 0)
1607                                 status = 255;
1608                         trace2_exec_result(exec_id, status);
1609                         exit(status);
1610                 }
1611                 trace2_exec_result(exec_id, -1);
1612                 pid = 1;        /* indicate that we tried but failed */
1613                 free(prog);
1614                 free(argv2);
1615         }
1616         return pid;
1617 }
1618
1619 int mingw_execv(const char *cmd, char *const *argv)
1620 {
1621         /* check if git_command is a shell script */
1622         if (!try_shell_exec(cmd, argv)) {
1623                 int pid, status;
1624                 int exec_id;
1625
1626                 exec_id = trace2_exec(cmd, (const char **)argv);
1627                 pid = mingw_spawnv(cmd, (const char **)argv, 0);
1628                 if (pid < 0) {
1629                         trace2_exec_result(exec_id, -1);
1630                         return -1;
1631                 }
1632                 if (waitpid(pid, &status, 0) < 0)
1633                         status = 255;
1634                 trace2_exec_result(exec_id, status);
1635                 exit(status);
1636         }
1637         return -1;
1638 }
1639
1640 int mingw_execvp(const char *cmd, char *const *argv)
1641 {
1642         char *prog = path_lookup(cmd, 0);
1643
1644         if (prog) {
1645                 mingw_execv(prog, argv);
1646                 free(prog);
1647         } else
1648                 errno = ENOENT;
1649
1650         return -1;
1651 }
1652
1653 int mingw_kill(pid_t pid, int sig)
1654 {
1655         if (pid > 0 && sig == SIGTERM) {
1656                 HANDLE h = OpenProcess(PROCESS_TERMINATE, FALSE, pid);
1657
1658                 if (TerminateProcess(h, -1)) {
1659                         CloseHandle(h);
1660                         return 0;
1661                 }
1662
1663                 errno = err_win_to_posix(GetLastError());
1664                 CloseHandle(h);
1665                 return -1;
1666         } else if (pid > 0 && sig == 0) {
1667                 HANDLE h = OpenProcess(PROCESS_QUERY_INFORMATION, FALSE, pid);
1668                 if (h) {
1669                         CloseHandle(h);
1670                         return 0;
1671                 }
1672         }
1673
1674         errno = EINVAL;
1675         return -1;
1676 }
1677
1678 /*
1679  * UTF-8 versions of getenv(), putenv() and unsetenv().
1680  * Internally, they use the CRT's stock UNICODE routines
1681  * to avoid data loss.
1682  */
1683 char *mingw_getenv(const char *name)
1684 {
1685 #define GETENV_MAX_RETAIN 64
1686         static char *values[GETENV_MAX_RETAIN];
1687         static int value_counter;
1688         int len_key, len_value;
1689         wchar_t *w_key;
1690         char *value;
1691         wchar_t w_value[32768];
1692
1693         if (!name || !*name)
1694                 return NULL;
1695
1696         len_key = strlen(name) + 1;
1697         /* We cannot use xcalloc() here because that uses getenv() itself */
1698         w_key = calloc(len_key, sizeof(wchar_t));
1699         if (!w_key)
1700                 die("Out of memory, (tried to allocate %u wchar_t's)", len_key);
1701         xutftowcs(w_key, name, len_key);
1702         len_value = GetEnvironmentVariableW(w_key, w_value, ARRAY_SIZE(w_value));
1703         if (!len_value && GetLastError() == ERROR_ENVVAR_NOT_FOUND) {
1704                 free(w_key);
1705                 return NULL;
1706         }
1707         free(w_key);
1708
1709         len_value = len_value * 3 + 1;
1710         /* We cannot use xcalloc() here because that uses getenv() itself */
1711         value = calloc(len_value, sizeof(char));
1712         if (!value)
1713                 die("Out of memory, (tried to allocate %u bytes)", len_value);
1714         xwcstoutf(value, w_value, len_value);
1715
1716         /*
1717          * We return `value` which is an allocated value and the caller is NOT
1718          * expecting to have to free it, so we keep a round-robin array,
1719          * invalidating the buffer after GETENV_MAX_RETAIN getenv() calls.
1720          */
1721         free(values[value_counter]);
1722         values[value_counter++] = value;
1723         if (value_counter >= ARRAY_SIZE(values))
1724                 value_counter = 0;
1725
1726         return value;
1727 }
1728
1729 int mingw_putenv(const char *namevalue)
1730 {
1731         int size;
1732         wchar_t *wide, *equal;
1733         BOOL result;
1734
1735         if (!namevalue || !*namevalue)
1736                 return 0;
1737
1738         size = strlen(namevalue) * 2 + 1;
1739         wide = calloc(size, sizeof(wchar_t));
1740         if (!wide)
1741                 die("Out of memory, (tried to allocate %u wchar_t's)", size);
1742         xutftowcs(wide, namevalue, size);
1743         equal = wcschr(wide, L'=');
1744         if (!equal)
1745                 result = SetEnvironmentVariableW(wide, NULL);
1746         else {
1747                 *equal = L'\0';
1748                 result = SetEnvironmentVariableW(wide, equal + 1);
1749         }
1750         free(wide);
1751
1752         if (!result)
1753                 errno = err_win_to_posix(GetLastError());
1754
1755         return result ? 0 : -1;
1756 }
1757
1758 static void ensure_socket_initialization(void)
1759 {
1760         WSADATA wsa;
1761         static int initialized = 0;
1762
1763         if (initialized)
1764                 return;
1765
1766         if (WSAStartup(MAKEWORD(2,2), &wsa))
1767                 die("unable to initialize winsock subsystem, error %d",
1768                         WSAGetLastError());
1769
1770         atexit((void(*)(void)) WSACleanup);
1771         initialized = 1;
1772 }
1773
1774 #undef gethostname
1775 int mingw_gethostname(char *name, int namelen)
1776 {
1777     ensure_socket_initialization();
1778     return gethostname(name, namelen);
1779 }
1780
1781 #undef gethostbyname
1782 struct hostent *mingw_gethostbyname(const char *host)
1783 {
1784         ensure_socket_initialization();
1785         return gethostbyname(host);
1786 }
1787
1788 #undef getaddrinfo
1789 int mingw_getaddrinfo(const char *node, const char *service,
1790                       const struct addrinfo *hints, struct addrinfo **res)
1791 {
1792         ensure_socket_initialization();
1793         return getaddrinfo(node, service, hints, res);
1794 }
1795
1796 int mingw_socket(int domain, int type, int protocol)
1797 {
1798         int sockfd;
1799         SOCKET s;
1800
1801         ensure_socket_initialization();
1802         s = WSASocket(domain, type, protocol, NULL, 0, 0);
1803         if (s == INVALID_SOCKET) {
1804                 /*
1805                  * WSAGetLastError() values are regular BSD error codes
1806                  * biased by WSABASEERR.
1807                  * However, strerror() does not know about networking
1808                  * specific errors, which are values beginning at 38 or so.
1809                  * Therefore, we choose to leave the biased error code
1810                  * in errno so that _if_ someone looks up the code somewhere,
1811                  * then it is at least the number that are usually listed.
1812                  */
1813                 errno = WSAGetLastError();
1814                 return -1;
1815         }
1816         /* convert into a file descriptor */
1817         if ((sockfd = _open_osfhandle(s, O_RDWR|O_BINARY)) < 0) {
1818                 closesocket(s);
1819                 return error("unable to make a socket file descriptor: %s",
1820                         strerror(errno));
1821         }
1822         return sockfd;
1823 }
1824
1825 #undef connect
1826 int mingw_connect(int sockfd, struct sockaddr *sa, size_t sz)
1827 {
1828         SOCKET s = (SOCKET)_get_osfhandle(sockfd);
1829         return connect(s, sa, sz);
1830 }
1831
1832 #undef bind
1833 int mingw_bind(int sockfd, struct sockaddr *sa, size_t sz)
1834 {
1835         SOCKET s = (SOCKET)_get_osfhandle(sockfd);
1836         return bind(s, sa, sz);
1837 }
1838
1839 #undef setsockopt
1840 int mingw_setsockopt(int sockfd, int lvl, int optname, void *optval, int optlen)
1841 {
1842         SOCKET s = (SOCKET)_get_osfhandle(sockfd);
1843         return setsockopt(s, lvl, optname, (const char*)optval, optlen);
1844 }
1845
1846 #undef shutdown
1847 int mingw_shutdown(int sockfd, int how)
1848 {
1849         SOCKET s = (SOCKET)_get_osfhandle(sockfd);
1850         return shutdown(s, how);
1851 }
1852
1853 #undef listen
1854 int mingw_listen(int sockfd, int backlog)
1855 {
1856         SOCKET s = (SOCKET)_get_osfhandle(sockfd);
1857         return listen(s, backlog);
1858 }
1859
1860 #undef accept
1861 int mingw_accept(int sockfd1, struct sockaddr *sa, socklen_t *sz)
1862 {
1863         int sockfd2;
1864
1865         SOCKET s1 = (SOCKET)_get_osfhandle(sockfd1);
1866         SOCKET s2 = accept(s1, sa, sz);
1867
1868         /* convert into a file descriptor */
1869         if ((sockfd2 = _open_osfhandle(s2, O_RDWR|O_BINARY)) < 0) {
1870                 int err = errno;
1871                 closesocket(s2);
1872                 return error("unable to make a socket file descriptor: %s",
1873                         strerror(err));
1874         }
1875         return sockfd2;
1876 }
1877
1878 #undef rename
1879 int mingw_rename(const char *pold, const char *pnew)
1880 {
1881         DWORD attrs, gle;
1882         int tries = 0;
1883         wchar_t wpold[MAX_PATH], wpnew[MAX_PATH];
1884         if (xutftowcs_path(wpold, pold) < 0 || xutftowcs_path(wpnew, pnew) < 0)
1885                 return -1;
1886
1887         /*
1888          * Try native rename() first to get errno right.
1889          * It is based on MoveFile(), which cannot overwrite existing files.
1890          */
1891         if (!_wrename(wpold, wpnew))
1892                 return 0;
1893         if (errno != EEXIST)
1894                 return -1;
1895 repeat:
1896         if (MoveFileExW(wpold, wpnew, MOVEFILE_REPLACE_EXISTING))
1897                 return 0;
1898         /* TODO: translate more errors */
1899         gle = GetLastError();
1900         if (gle == ERROR_ACCESS_DENIED &&
1901             (attrs = GetFileAttributesW(wpnew)) != INVALID_FILE_ATTRIBUTES) {
1902                 if (attrs & FILE_ATTRIBUTE_DIRECTORY) {
1903                         DWORD attrsold = GetFileAttributesW(wpold);
1904                         if (attrsold == INVALID_FILE_ATTRIBUTES ||
1905                             !(attrsold & FILE_ATTRIBUTE_DIRECTORY))
1906                                 errno = EISDIR;
1907                         else if (!_wrmdir(wpnew))
1908                                 goto repeat;
1909                         return -1;
1910                 }
1911                 if ((attrs & FILE_ATTRIBUTE_READONLY) &&
1912                     SetFileAttributesW(wpnew, attrs & ~FILE_ATTRIBUTE_READONLY)) {
1913                         if (MoveFileExW(wpold, wpnew, MOVEFILE_REPLACE_EXISTING))
1914                                 return 0;
1915                         gle = GetLastError();
1916                         /* revert file attributes on failure */
1917                         SetFileAttributesW(wpnew, attrs);
1918                 }
1919         }
1920         if (tries < ARRAY_SIZE(delay) && gle == ERROR_ACCESS_DENIED) {
1921                 /*
1922                  * We assume that some other process had the source or
1923                  * destination file open at the wrong moment and retry.
1924                  * In order to give the other process a higher chance to
1925                  * complete its operation, we give up our time slice now.
1926                  * If we have to retry again, we do sleep a bit.
1927                  */
1928                 Sleep(delay[tries]);
1929                 tries++;
1930                 goto repeat;
1931         }
1932         if (gle == ERROR_ACCESS_DENIED &&
1933                ask_yes_no_if_possible("Rename from '%s' to '%s' failed. "
1934                        "Should I try again?", pold, pnew))
1935                 goto repeat;
1936
1937         errno = EACCES;
1938         return -1;
1939 }
1940
1941 /*
1942  * Note that this doesn't return the actual pagesize, but
1943  * the allocation granularity. If future Windows specific git code
1944  * needs the real getpagesize function, we need to find another solution.
1945  */
1946 int mingw_getpagesize(void)
1947 {
1948         SYSTEM_INFO si;
1949         GetSystemInfo(&si);
1950         return si.dwAllocationGranularity;
1951 }
1952
1953 /* See https://msdn.microsoft.com/en-us/library/windows/desktop/ms724435.aspx */
1954 enum EXTENDED_NAME_FORMAT {
1955         NameDisplay = 3,
1956         NameUserPrincipal = 8
1957 };
1958
1959 static char *get_extended_user_info(enum EXTENDED_NAME_FORMAT type)
1960 {
1961         DECLARE_PROC_ADDR(secur32.dll, BOOL, GetUserNameExW,
1962                 enum EXTENDED_NAME_FORMAT, LPCWSTR, PULONG);
1963         static wchar_t wbuffer[1024];
1964         DWORD len;
1965
1966         if (!INIT_PROC_ADDR(GetUserNameExW))
1967                 return NULL;
1968
1969         len = ARRAY_SIZE(wbuffer);
1970         if (GetUserNameExW(type, wbuffer, &len)) {
1971                 char *converted = xmalloc((len *= 3));
1972                 if (xwcstoutf(converted, wbuffer, len) >= 0)
1973                         return converted;
1974                 free(converted);
1975         }
1976
1977         return NULL;
1978 }
1979
1980 char *mingw_query_user_email(void)
1981 {
1982         return get_extended_user_info(NameUserPrincipal);
1983 }
1984
1985 struct passwd *getpwuid(int uid)
1986 {
1987         static unsigned initialized;
1988         static char user_name[100];
1989         static struct passwd *p;
1990         DWORD len;
1991
1992         if (initialized)
1993                 return p;
1994
1995         len = sizeof(user_name);
1996         if (!GetUserName(user_name, &len)) {
1997                 initialized = 1;
1998                 return NULL;
1999         }
2000
2001         p = xmalloc(sizeof(*p));
2002         p->pw_name = user_name;
2003         p->pw_gecos = get_extended_user_info(NameDisplay);
2004         if (!p->pw_gecos)
2005                 p->pw_gecos = "unknown";
2006         p->pw_dir = NULL;
2007
2008         initialized = 1;
2009         return p;
2010 }
2011
2012 static HANDLE timer_event;
2013 static HANDLE timer_thread;
2014 static int timer_interval;
2015 static int one_shot;
2016 static sig_handler_t timer_fn = SIG_DFL, sigint_fn = SIG_DFL;
2017
2018 /* The timer works like this:
2019  * The thread, ticktack(), is a trivial routine that most of the time
2020  * only waits to receive the signal to terminate. The main thread tells
2021  * the thread to terminate by setting the timer_event to the signalled
2022  * state.
2023  * But ticktack() interrupts the wait state after the timer's interval
2024  * length to call the signal handler.
2025  */
2026
2027 static unsigned __stdcall ticktack(void *dummy)
2028 {
2029         while (WaitForSingleObject(timer_event, timer_interval) == WAIT_TIMEOUT) {
2030                 mingw_raise(SIGALRM);
2031                 if (one_shot)
2032                         break;
2033         }
2034         return 0;
2035 }
2036
2037 static int start_timer_thread(void)
2038 {
2039         timer_event = CreateEvent(NULL, FALSE, FALSE, NULL);
2040         if (timer_event) {
2041                 timer_thread = (HANDLE) _beginthreadex(NULL, 0, ticktack, NULL, 0, NULL);
2042                 if (!timer_thread )
2043                         return errno = ENOMEM,
2044                                 error("cannot start timer thread");
2045         } else
2046                 return errno = ENOMEM,
2047                         error("cannot allocate resources for timer");
2048         return 0;
2049 }
2050
2051 static void stop_timer_thread(void)
2052 {
2053         if (timer_event)
2054                 SetEvent(timer_event);  /* tell thread to terminate */
2055         if (timer_thread) {
2056                 int rc = WaitForSingleObject(timer_thread, 10000);
2057                 if (rc == WAIT_TIMEOUT)
2058                         error("timer thread did not terminate timely");
2059                 else if (rc != WAIT_OBJECT_0)
2060                         error("waiting for timer thread failed: %lu",
2061                               GetLastError());
2062                 CloseHandle(timer_thread);
2063         }
2064         if (timer_event)
2065                 CloseHandle(timer_event);
2066         timer_event = NULL;
2067         timer_thread = NULL;
2068 }
2069
2070 static inline int is_timeval_eq(const struct timeval *i1, const struct timeval *i2)
2071 {
2072         return i1->tv_sec == i2->tv_sec && i1->tv_usec == i2->tv_usec;
2073 }
2074
2075 int setitimer(int type, struct itimerval *in, struct itimerval *out)
2076 {
2077         static const struct timeval zero;
2078         static int atexit_done;
2079
2080         if (out != NULL)
2081                 return errno = EINVAL,
2082                         error("setitimer param 3 != NULL not implemented");
2083         if (!is_timeval_eq(&in->it_interval, &zero) &&
2084             !is_timeval_eq(&in->it_interval, &in->it_value))
2085                 return errno = EINVAL,
2086                         error("setitimer: it_interval must be zero or eq it_value");
2087
2088         if (timer_thread)
2089                 stop_timer_thread();
2090
2091         if (is_timeval_eq(&in->it_value, &zero) &&
2092             is_timeval_eq(&in->it_interval, &zero))
2093                 return 0;
2094
2095         timer_interval = in->it_value.tv_sec * 1000 + in->it_value.tv_usec / 1000;
2096         one_shot = is_timeval_eq(&in->it_interval, &zero);
2097         if (!atexit_done) {
2098                 atexit(stop_timer_thread);
2099                 atexit_done = 1;
2100         }
2101         return start_timer_thread();
2102 }
2103
2104 int sigaction(int sig, struct sigaction *in, struct sigaction *out)
2105 {
2106         if (sig != SIGALRM)
2107                 return errno = EINVAL,
2108                         error("sigaction only implemented for SIGALRM");
2109         if (out != NULL)
2110                 return errno = EINVAL,
2111                         error("sigaction: param 3 != NULL not implemented");
2112
2113         timer_fn = in->sa_handler;
2114         return 0;
2115 }
2116
2117 #undef signal
2118 sig_handler_t mingw_signal(int sig, sig_handler_t handler)
2119 {
2120         sig_handler_t old;
2121
2122         switch (sig) {
2123         case SIGALRM:
2124                 old = timer_fn;
2125                 timer_fn = handler;
2126                 break;
2127
2128         case SIGINT:
2129                 old = sigint_fn;
2130                 sigint_fn = handler;
2131                 break;
2132
2133         default:
2134                 return signal(sig, handler);
2135         }
2136
2137         return old;
2138 }
2139
2140 #undef raise
2141 int mingw_raise(int sig)
2142 {
2143         switch (sig) {
2144         case SIGALRM:
2145                 if (timer_fn == SIG_DFL) {
2146                         if (isatty(STDERR_FILENO))
2147                                 fputs("Alarm clock\n", stderr);
2148                         exit(128 + SIGALRM);
2149                 } else if (timer_fn != SIG_IGN)
2150                         timer_fn(SIGALRM);
2151                 return 0;
2152
2153         case SIGINT:
2154                 if (sigint_fn == SIG_DFL)
2155                         exit(128 + SIGINT);
2156                 else if (sigint_fn != SIG_IGN)
2157                         sigint_fn(SIGINT);
2158                 return 0;
2159
2160         default:
2161                 return raise(sig);
2162         }
2163 }
2164
2165 int link(const char *oldpath, const char *newpath)
2166 {
2167         wchar_t woldpath[MAX_PATH], wnewpath[MAX_PATH];
2168         if (xutftowcs_path(woldpath, oldpath) < 0 ||
2169                 xutftowcs_path(wnewpath, newpath) < 0)
2170                 return -1;
2171
2172         if (!CreateHardLinkW(wnewpath, woldpath, NULL)) {
2173                 errno = err_win_to_posix(GetLastError());
2174                 return -1;
2175         }
2176         return 0;
2177 }
2178
2179 pid_t waitpid(pid_t pid, int *status, int options)
2180 {
2181         HANDLE h = OpenProcess(SYNCHRONIZE | PROCESS_QUERY_INFORMATION,
2182             FALSE, pid);
2183         if (!h) {
2184                 errno = ECHILD;
2185                 return -1;
2186         }
2187
2188         if (pid > 0 && options & WNOHANG) {
2189                 if (WAIT_OBJECT_0 != WaitForSingleObject(h, 0)) {
2190                         CloseHandle(h);
2191                         return 0;
2192                 }
2193                 options &= ~WNOHANG;
2194         }
2195
2196         if (options == 0) {
2197                 struct pinfo_t **ppinfo;
2198                 if (WaitForSingleObject(h, INFINITE) != WAIT_OBJECT_0) {
2199                         CloseHandle(h);
2200                         return 0;
2201                 }
2202
2203                 if (status)
2204                         GetExitCodeProcess(h, (LPDWORD)status);
2205
2206                 EnterCriticalSection(&pinfo_cs);
2207
2208                 ppinfo = &pinfo;
2209                 while (*ppinfo) {
2210                         struct pinfo_t *info = *ppinfo;
2211                         if (info->pid == pid) {
2212                                 CloseHandle(info->proc);
2213                                 *ppinfo = info->next;
2214                                 free(info);
2215                                 break;
2216                         }
2217                         ppinfo = &info->next;
2218                 }
2219
2220                 LeaveCriticalSection(&pinfo_cs);
2221
2222                 CloseHandle(h);
2223                 return pid;
2224         }
2225         CloseHandle(h);
2226
2227         errno = EINVAL;
2228         return -1;
2229 }
2230
2231 int xutftowcsn(wchar_t *wcs, const char *utfs, size_t wcslen, int utflen)
2232 {
2233         int upos = 0, wpos = 0;
2234         const unsigned char *utf = (const unsigned char*) utfs;
2235         if (!utf || !wcs || wcslen < 1) {
2236                 errno = EINVAL;
2237                 return -1;
2238         }
2239         /* reserve space for \0 */
2240         wcslen--;
2241         if (utflen < 0)
2242                 utflen = INT_MAX;
2243
2244         while (upos < utflen) {
2245                 int c = utf[upos++] & 0xff;
2246                 if (utflen == INT_MAX && c == 0)
2247                         break;
2248
2249                 if (wpos >= wcslen) {
2250                         wcs[wpos] = 0;
2251                         errno = ERANGE;
2252                         return -1;
2253                 }
2254
2255                 if (c < 0x80) {
2256                         /* ASCII */
2257                         wcs[wpos++] = c;
2258                 } else if (c >= 0xc2 && c < 0xe0 && upos < utflen &&
2259                                 (utf[upos] & 0xc0) == 0x80) {
2260                         /* 2-byte utf-8 */
2261                         c = ((c & 0x1f) << 6);
2262                         c |= (utf[upos++] & 0x3f);
2263                         wcs[wpos++] = c;
2264                 } else if (c >= 0xe0 && c < 0xf0 && upos + 1 < utflen &&
2265                                 !(c == 0xe0 && utf[upos] < 0xa0) && /* over-long encoding */
2266                                 (utf[upos] & 0xc0) == 0x80 &&
2267                                 (utf[upos + 1] & 0xc0) == 0x80) {
2268                         /* 3-byte utf-8 */
2269                         c = ((c & 0x0f) << 12);
2270                         c |= ((utf[upos++] & 0x3f) << 6);
2271                         c |= (utf[upos++] & 0x3f);
2272                         wcs[wpos++] = c;
2273                 } else if (c >= 0xf0 && c < 0xf5 && upos + 2 < utflen &&
2274                                 wpos + 1 < wcslen &&
2275                                 !(c == 0xf0 && utf[upos] < 0x90) && /* over-long encoding */
2276                                 !(c == 0xf4 && utf[upos] >= 0x90) && /* > \u10ffff */
2277                                 (utf[upos] & 0xc0) == 0x80 &&
2278                                 (utf[upos + 1] & 0xc0) == 0x80 &&
2279                                 (utf[upos + 2] & 0xc0) == 0x80) {
2280                         /* 4-byte utf-8: convert to \ud8xx \udcxx surrogate pair */
2281                         c = ((c & 0x07) << 18);
2282                         c |= ((utf[upos++] & 0x3f) << 12);
2283                         c |= ((utf[upos++] & 0x3f) << 6);
2284                         c |= (utf[upos++] & 0x3f);
2285                         c -= 0x10000;
2286                         wcs[wpos++] = 0xd800 | (c >> 10);
2287                         wcs[wpos++] = 0xdc00 | (c & 0x3ff);
2288                 } else if (c >= 0xa0) {
2289                         /* invalid utf-8 byte, printable unicode char: convert 1:1 */
2290                         wcs[wpos++] = c;
2291                 } else {
2292                         /* invalid utf-8 byte, non-printable unicode: convert to hex */
2293                         static const char *hex = "0123456789abcdef";
2294                         wcs[wpos++] = hex[c >> 4];
2295                         if (wpos < wcslen)
2296                                 wcs[wpos++] = hex[c & 0x0f];
2297                 }
2298         }
2299         wcs[wpos] = 0;
2300         return wpos;
2301 }
2302
2303 int xwcstoutf(char *utf, const wchar_t *wcs, size_t utflen)
2304 {
2305         if (!wcs || !utf || utflen < 1) {
2306                 errno = EINVAL;
2307                 return -1;
2308         }
2309         utflen = WideCharToMultiByte(CP_UTF8, 0, wcs, -1, utf, utflen, NULL, NULL);
2310         if (utflen)
2311                 return utflen - 1;
2312         errno = ERANGE;
2313         return -1;
2314 }
2315
2316 static void setup_windows_environment(void)
2317 {
2318         char *tmp = getenv("TMPDIR");
2319
2320         /* on Windows it is TMP and TEMP */
2321         if (!tmp) {
2322                 if (!(tmp = getenv("TMP")))
2323                         tmp = getenv("TEMP");
2324                 if (tmp) {
2325                         setenv("TMPDIR", tmp, 1);
2326                         tmp = getenv("TMPDIR");
2327                 }
2328         }
2329
2330         if (tmp) {
2331                 /*
2332                  * Convert all dir separators to forward slashes,
2333                  * to help shell commands called from the Git
2334                  * executable (by not mistaking the dir separators
2335                  * for escape characters).
2336                  */
2337                 convert_slashes(tmp);
2338         }
2339
2340         /* simulate TERM to enable auto-color (see color.c) */
2341         if (!getenv("TERM"))
2342                 setenv("TERM", "cygwin", 1);
2343 }
2344
2345 int is_valid_win32_path(const char *path)
2346 {
2347         int preceding_space_or_period = 0, i = 0, periods = 0;
2348
2349         if (!protect_ntfs)
2350                 return 1;
2351
2352         skip_dos_drive_prefix((char **)&path);
2353
2354         for (;;) {
2355                 char c = *(path++);
2356                 switch (c) {
2357                 case '\0':
2358                 case '/': case '\\':
2359                         /* cannot end in ` ` or `.`, except for `.` and `..` */
2360                         if (preceding_space_or_period &&
2361                             (i != periods || periods > 2))
2362                                 return 0;
2363                         if (!c)
2364                                 return 1;
2365
2366                         i = periods = preceding_space_or_period = 0;
2367                         continue;
2368                 case '.':
2369                         periods++;
2370                         /* fallthru */
2371                 case ' ':
2372                         preceding_space_or_period = 1;
2373                         i++;
2374                         continue;
2375                 case ':': /* DOS drive prefix was already skipped */
2376                 case '<': case '>': case '"': case '|': case '?': case '*':
2377                         /* illegal character */
2378                         return 0;
2379                 default:
2380                         if (c > '\0' && c < '\x20')
2381                                 /* illegal character */
2382                                 return 0;
2383                 }
2384                 preceding_space_or_period = 0;
2385                 i++;
2386         }
2387 }
2388
2389 /*
2390  * Disable MSVCRT command line wildcard expansion (__getmainargs called from
2391  * mingw startup code, see init.c in mingw runtime).
2392  */
2393 int _CRT_glob = 0;
2394
2395 typedef struct {
2396         int newmode;
2397 } _startupinfo;
2398
2399 extern int __wgetmainargs(int *argc, wchar_t ***argv, wchar_t ***env, int glob,
2400                 _startupinfo *si);
2401
2402 static NORETURN void die_startup(void)
2403 {
2404         fputs("fatal: not enough memory for initialization", stderr);
2405         exit(128);
2406 }
2407
2408 static void *malloc_startup(size_t size)
2409 {
2410         void *result = malloc(size);
2411         if (!result)
2412                 die_startup();
2413         return result;
2414 }
2415
2416 static char *wcstoutfdup_startup(char *buffer, const wchar_t *wcs, size_t len)
2417 {
2418         len = xwcstoutf(buffer, wcs, len) + 1;
2419         return memcpy(malloc_startup(len), buffer, len);
2420 }
2421
2422 static void maybe_redirect_std_handle(const wchar_t *key, DWORD std_id, int fd,
2423                                       DWORD desired_access, DWORD flags)
2424 {
2425         DWORD create_flag = fd ? OPEN_ALWAYS : OPEN_EXISTING;
2426         wchar_t buf[MAX_PATH];
2427         DWORD max = ARRAY_SIZE(buf);
2428         HANDLE handle;
2429         DWORD ret = GetEnvironmentVariableW(key, buf, max);
2430
2431         if (!ret || ret >= max)
2432                 return;
2433
2434         /* make sure this does not leak into child processes */
2435         SetEnvironmentVariableW(key, NULL);
2436         if (!wcscmp(buf, L"off")) {
2437                 close(fd);
2438                 handle = GetStdHandle(std_id);
2439                 if (handle != INVALID_HANDLE_VALUE)
2440                         CloseHandle(handle);
2441                 return;
2442         }
2443         if (std_id == STD_ERROR_HANDLE && !wcscmp(buf, L"2>&1")) {
2444                 handle = GetStdHandle(STD_OUTPUT_HANDLE);
2445                 if (handle == INVALID_HANDLE_VALUE) {
2446                         close(fd);
2447                         handle = GetStdHandle(std_id);
2448                         if (handle != INVALID_HANDLE_VALUE)
2449                                 CloseHandle(handle);
2450                 } else {
2451                         int new_fd = _open_osfhandle((intptr_t)handle, O_BINARY);
2452                         SetStdHandle(std_id, handle);
2453                         dup2(new_fd, fd);
2454                         /* do *not* close the new_fd: that would close stdout */
2455                 }
2456                 return;
2457         }
2458         handle = CreateFileW(buf, desired_access, 0, NULL, create_flag,
2459                              flags, NULL);
2460         if (handle != INVALID_HANDLE_VALUE) {
2461                 int new_fd = _open_osfhandle((intptr_t)handle, O_BINARY);
2462                 SetStdHandle(std_id, handle);
2463                 dup2(new_fd, fd);
2464                 close(new_fd);
2465         }
2466 }
2467
2468 static void maybe_redirect_std_handles(void)
2469 {
2470         maybe_redirect_std_handle(L"GIT_REDIRECT_STDIN", STD_INPUT_HANDLE, 0,
2471                                   GENERIC_READ, FILE_ATTRIBUTE_NORMAL);
2472         maybe_redirect_std_handle(L"GIT_REDIRECT_STDOUT", STD_OUTPUT_HANDLE, 1,
2473                                   GENERIC_WRITE, FILE_ATTRIBUTE_NORMAL);
2474         maybe_redirect_std_handle(L"GIT_REDIRECT_STDERR", STD_ERROR_HANDLE, 2,
2475                                   GENERIC_WRITE, FILE_FLAG_NO_BUFFERING);
2476 }
2477
2478 void mingw_startup(void)
2479 {
2480         int i, maxlen, argc;
2481         char *buffer;
2482         wchar_t **wenv, **wargv;
2483         _startupinfo si;
2484
2485         trace2_initialize_clock();
2486
2487         maybe_redirect_std_handles();
2488
2489         /* get wide char arguments and environment */
2490         si.newmode = 0;
2491         if (__wgetmainargs(&argc, &wargv, &wenv, _CRT_glob, &si) < 0)
2492                 die_startup();
2493
2494         /* determine size of argv and environ conversion buffer */
2495         maxlen = wcslen(wargv[0]);
2496         for (i = 1; i < argc; i++)
2497                 maxlen = max(maxlen, wcslen(wargv[i]));
2498
2499         /* allocate buffer (wchar_t encodes to max 3 UTF-8 bytes) */
2500         maxlen = 3 * maxlen + 1;
2501         buffer = malloc_startup(maxlen);
2502
2503         /* convert command line arguments and environment to UTF-8 */
2504         for (i = 0; i < argc; i++)
2505                 __argv[i] = wcstoutfdup_startup(buffer, wargv[i], maxlen);
2506         free(buffer);
2507
2508         /* fix Windows specific environment settings */
2509         setup_windows_environment();
2510
2511         unset_environment_variables = xstrdup("PERL5LIB");
2512
2513         /* initialize critical section for waitpid pinfo_t list */
2514         InitializeCriticalSection(&pinfo_cs);
2515
2516         /* set up default file mode and file modes for stdin/out/err */
2517         _fmode = _O_BINARY;
2518         _setmode(_fileno(stdin), _O_BINARY);
2519         _setmode(_fileno(stdout), _O_BINARY);
2520         _setmode(_fileno(stderr), _O_BINARY);
2521
2522         /* initialize Unicode console */
2523         winansi_init();
2524 }
2525
2526 int uname(struct utsname *buf)
2527 {
2528         unsigned v = (unsigned)GetVersion();
2529         memset(buf, 0, sizeof(*buf));
2530         xsnprintf(buf->sysname, sizeof(buf->sysname), "Windows");
2531         xsnprintf(buf->release, sizeof(buf->release),
2532                  "%u.%u", v & 0xff, (v >> 8) & 0xff);
2533         /* assuming NT variants only.. */
2534         xsnprintf(buf->version, sizeof(buf->version),
2535                   "%u", (v >> 16) & 0x7fff);
2536         return 0;
2537 }