Merge branch 'kw/patch-ids-optim'
[git] / pretty.c
1 #include "cache.h"
2 #include "commit.h"
3 #include "utf8.h"
4 #include "diff.h"
5 #include "revision.h"
6 #include "string-list.h"
7 #include "mailmap.h"
8 #include "log-tree.h"
9 #include "notes.h"
10 #include "color.h"
11 #include "reflog-walk.h"
12 #include "gpg-interface.h"
13
14 static char *user_format;
15 static struct cmt_fmt_map {
16         const char *name;
17         enum cmit_fmt format;
18         int is_tformat;
19         int expand_tabs_in_log;
20         int is_alias;
21         const char *user_format;
22 } *commit_formats;
23 static size_t builtin_formats_len;
24 static size_t commit_formats_len;
25 static size_t commit_formats_alloc;
26 static struct cmt_fmt_map *find_commit_format(const char *sought);
27
28 int commit_format_is_empty(enum cmit_fmt fmt)
29 {
30         return fmt == CMIT_FMT_USERFORMAT && !*user_format;
31 }
32
33 static void save_user_format(struct rev_info *rev, const char *cp, int is_tformat)
34 {
35         free(user_format);
36         user_format = xstrdup(cp);
37         if (is_tformat)
38                 rev->use_terminator = 1;
39         rev->commit_format = CMIT_FMT_USERFORMAT;
40 }
41
42 static int git_pretty_formats_config(const char *var, const char *value, void *cb)
43 {
44         struct cmt_fmt_map *commit_format = NULL;
45         const char *name;
46         const char *fmt;
47         int i;
48
49         if (!skip_prefix(var, "pretty.", &name))
50                 return 0;
51
52         for (i = 0; i < builtin_formats_len; i++) {
53                 if (!strcmp(commit_formats[i].name, name))
54                         return 0;
55         }
56
57         for (i = builtin_formats_len; i < commit_formats_len; i++) {
58                 if (!strcmp(commit_formats[i].name, name)) {
59                         commit_format = &commit_formats[i];
60                         break;
61                 }
62         }
63
64         if (!commit_format) {
65                 ALLOC_GROW(commit_formats, commit_formats_len+1,
66                            commit_formats_alloc);
67                 commit_format = &commit_formats[commit_formats_len];
68                 memset(commit_format, 0, sizeof(*commit_format));
69                 commit_formats_len++;
70         }
71
72         commit_format->name = xstrdup(name);
73         commit_format->format = CMIT_FMT_USERFORMAT;
74         if (git_config_string(&fmt, var, value))
75                 return -1;
76
77         if (skip_prefix(fmt, "format:", &fmt))
78                 commit_format->is_tformat = 0;
79         else if (skip_prefix(fmt, "tformat:", &fmt) || strchr(fmt, '%'))
80                 commit_format->is_tformat = 1;
81         else
82                 commit_format->is_alias = 1;
83         commit_format->user_format = fmt;
84
85         return 0;
86 }
87
88 static void setup_commit_formats(void)
89 {
90         struct cmt_fmt_map builtin_formats[] = {
91                 { "raw",        CMIT_FMT_RAW,           0,      0 },
92                 { "medium",     CMIT_FMT_MEDIUM,        0,      8 },
93                 { "short",      CMIT_FMT_SHORT,         0,      0 },
94                 { "email",      CMIT_FMT_EMAIL,         0,      0 },
95                 { "mboxrd",     CMIT_FMT_MBOXRD,        0,      0 },
96                 { "fuller",     CMIT_FMT_FULLER,        0,      8 },
97                 { "full",       CMIT_FMT_FULL,          0,      8 },
98                 { "oneline",    CMIT_FMT_ONELINE,       1,      0 }
99         };
100         commit_formats_len = ARRAY_SIZE(builtin_formats);
101         builtin_formats_len = commit_formats_len;
102         ALLOC_GROW(commit_formats, commit_formats_len, commit_formats_alloc);
103         memcpy(commit_formats, builtin_formats,
104                sizeof(*builtin_formats)*ARRAY_SIZE(builtin_formats));
105
106         git_config(git_pretty_formats_config, NULL);
107 }
108
109 static struct cmt_fmt_map *find_commit_format_recursive(const char *sought,
110                                                         const char *original,
111                                                         int num_redirections)
112 {
113         struct cmt_fmt_map *found = NULL;
114         size_t found_match_len = 0;
115         int i;
116
117         if (num_redirections >= commit_formats_len)
118                 die("invalid --pretty format: "
119                     "'%s' references an alias which points to itself",
120                     original);
121
122         for (i = 0; i < commit_formats_len; i++) {
123                 size_t match_len;
124
125                 if (!starts_with(commit_formats[i].name, sought))
126                         continue;
127
128                 match_len = strlen(commit_formats[i].name);
129                 if (found == NULL || found_match_len > match_len) {
130                         found = &commit_formats[i];
131                         found_match_len = match_len;
132                 }
133         }
134
135         if (found && found->is_alias) {
136                 found = find_commit_format_recursive(found->user_format,
137                                                      original,
138                                                      num_redirections+1);
139         }
140
141         return found;
142 }
143
144 static struct cmt_fmt_map *find_commit_format(const char *sought)
145 {
146         if (!commit_formats)
147                 setup_commit_formats();
148
149         return find_commit_format_recursive(sought, sought, 0);
150 }
151
152 void get_commit_format(const char *arg, struct rev_info *rev)
153 {
154         struct cmt_fmt_map *commit_format;
155
156         rev->use_terminator = 0;
157         if (!arg) {
158                 rev->commit_format = CMIT_FMT_DEFAULT;
159                 return;
160         }
161         if (skip_prefix(arg, "format:", &arg)) {
162                 save_user_format(rev, arg, 0);
163                 return;
164         }
165
166         if (!*arg || skip_prefix(arg, "tformat:", &arg) || strchr(arg, '%')) {
167                 save_user_format(rev, arg, 1);
168                 return;
169         }
170
171         commit_format = find_commit_format(arg);
172         if (!commit_format)
173                 die("invalid --pretty format: %s", arg);
174
175         rev->commit_format = commit_format->format;
176         rev->use_terminator = commit_format->is_tformat;
177         rev->expand_tabs_in_log_default = commit_format->expand_tabs_in_log;
178         if (commit_format->format == CMIT_FMT_USERFORMAT) {
179                 save_user_format(rev, commit_format->user_format,
180                                  commit_format->is_tformat);
181         }
182 }
183
184 /*
185  * Generic support for pretty-printing the header
186  */
187 static int get_one_line(const char *msg)
188 {
189         int ret = 0;
190
191         for (;;) {
192                 char c = *msg++;
193                 if (!c)
194                         break;
195                 ret++;
196                 if (c == '\n')
197                         break;
198         }
199         return ret;
200 }
201
202 /* High bit set, or ISO-2022-INT */
203 static int non_ascii(int ch)
204 {
205         return !isascii(ch) || ch == '\033';
206 }
207
208 int has_non_ascii(const char *s)
209 {
210         int ch;
211         if (!s)
212                 return 0;
213         while ((ch = *s++) != '\0') {
214                 if (non_ascii(ch))
215                         return 1;
216         }
217         return 0;
218 }
219
220 static int is_rfc822_special(char ch)
221 {
222         switch (ch) {
223         case '(':
224         case ')':
225         case '<':
226         case '>':
227         case '[':
228         case ']':
229         case ':':
230         case ';':
231         case '@':
232         case ',':
233         case '.':
234         case '"':
235         case '\\':
236                 return 1;
237         default:
238                 return 0;
239         }
240 }
241
242 static int needs_rfc822_quoting(const char *s, int len)
243 {
244         int i;
245         for (i = 0; i < len; i++)
246                 if (is_rfc822_special(s[i]))
247                         return 1;
248         return 0;
249 }
250
251 static int last_line_length(struct strbuf *sb)
252 {
253         int i;
254
255         /* How many bytes are already used on the last line? */
256         for (i = sb->len - 1; i >= 0; i--)
257                 if (sb->buf[i] == '\n')
258                         break;
259         return sb->len - (i + 1);
260 }
261
262 static void add_rfc822_quoted(struct strbuf *out, const char *s, int len)
263 {
264         int i;
265
266         /* just a guess, we may have to also backslash-quote */
267         strbuf_grow(out, len + 2);
268
269         strbuf_addch(out, '"');
270         for (i = 0; i < len; i++) {
271                 switch (s[i]) {
272                 case '"':
273                 case '\\':
274                         strbuf_addch(out, '\\');
275                         /* fall through */
276                 default:
277                         strbuf_addch(out, s[i]);
278                 }
279         }
280         strbuf_addch(out, '"');
281 }
282
283 enum rfc2047_type {
284         RFC2047_SUBJECT,
285         RFC2047_ADDRESS
286 };
287
288 static int is_rfc2047_special(char ch, enum rfc2047_type type)
289 {
290         /*
291          * rfc2047, section 4.2:
292          *
293          *    8-bit values which correspond to printable ASCII characters other
294          *    than "=", "?", and "_" (underscore), MAY be represented as those
295          *    characters.  (But see section 5 for restrictions.)  In
296          *    particular, SPACE and TAB MUST NOT be represented as themselves
297          *    within encoded words.
298          */
299
300         /*
301          * rule out non-ASCII characters and non-printable characters (the
302          * non-ASCII check should be redundant as isprint() is not localized
303          * and only knows about ASCII, but be defensive about that)
304          */
305         if (non_ascii(ch) || !isprint(ch))
306                 return 1;
307
308         /*
309          * rule out special printable characters (' ' should be the only
310          * whitespace character considered printable, but be defensive and use
311          * isspace())
312          */
313         if (isspace(ch) || ch == '=' || ch == '?' || ch == '_')
314                 return 1;
315
316         /*
317          * rfc2047, section 5.3:
318          *
319          *    As a replacement for a 'word' entity within a 'phrase', for example,
320          *    one that precedes an address in a From, To, or Cc header.  The ABNF
321          *    definition for 'phrase' from RFC 822 thus becomes:
322          *
323          *    phrase = 1*( encoded-word / word )
324          *
325          *    In this case the set of characters that may be used in a "Q"-encoded
326          *    'encoded-word' is restricted to: <upper and lower case ASCII
327          *    letters, decimal digits, "!", "*", "+", "-", "/", "=", and "_"
328          *    (underscore, ASCII 95.)>.  An 'encoded-word' that appears within a
329          *    'phrase' MUST be separated from any adjacent 'word', 'text' or
330          *    'special' by 'linear-white-space'.
331          */
332
333         if (type != RFC2047_ADDRESS)
334                 return 0;
335
336         /* '=' and '_' are special cases and have been checked above */
337         return !(isalnum(ch) || ch == '!' || ch == '*' || ch == '+' || ch == '-' || ch == '/');
338 }
339
340 static int needs_rfc2047_encoding(const char *line, int len,
341                                   enum rfc2047_type type)
342 {
343         int i;
344
345         for (i = 0; i < len; i++) {
346                 int ch = line[i];
347                 if (non_ascii(ch) || ch == '\n')
348                         return 1;
349                 if ((i + 1 < len) && (ch == '=' && line[i+1] == '?'))
350                         return 1;
351         }
352
353         return 0;
354 }
355
356 static void add_rfc2047(struct strbuf *sb, const char *line, size_t len,
357                        const char *encoding, enum rfc2047_type type)
358 {
359         static const int max_encoded_length = 76; /* per rfc2047 */
360         int i;
361         int line_len = last_line_length(sb);
362
363         strbuf_grow(sb, len * 3 + strlen(encoding) + 100);
364         strbuf_addf(sb, "=?%s?q?", encoding);
365         line_len += strlen(encoding) + 5; /* 5 for =??q? */
366
367         while (len) {
368                 /*
369                  * RFC 2047, section 5 (3):
370                  *
371                  * Each 'encoded-word' MUST represent an integral number of
372                  * characters.  A multi-octet character may not be split across
373                  * adjacent 'encoded- word's.
374                  */
375                 const unsigned char *p = (const unsigned char *)line;
376                 int chrlen = mbs_chrlen(&line, &len, encoding);
377                 int is_special = (chrlen > 1) || is_rfc2047_special(*p, type);
378
379                 /* "=%02X" * chrlen, or the byte itself */
380                 const char *encoded_fmt = is_special ? "=%02X"    : "%c";
381                 int         encoded_len = is_special ? 3 * chrlen : 1;
382
383                 /*
384                  * According to RFC 2047, we could encode the special character
385                  * ' ' (space) with '_' (underscore) for readability. But many
386                  * programs do not understand this and just leave the
387                  * underscore in place. Thus, we do nothing special here, which
388                  * causes ' ' to be encoded as '=20', avoiding this problem.
389                  */
390
391                 if (line_len + encoded_len + 2 > max_encoded_length) {
392                         /* It won't fit with trailing "?=" --- break the line */
393                         strbuf_addf(sb, "?=\n =?%s?q?", encoding);
394                         line_len = strlen(encoding) + 5 + 1; /* =??q? plus SP */
395                 }
396
397                 for (i = 0; i < chrlen; i++)
398                         strbuf_addf(sb, encoded_fmt, p[i]);
399                 line_len += encoded_len;
400         }
401         strbuf_addstr(sb, "?=");
402 }
403
404 const char *show_ident_date(const struct ident_split *ident,
405                             const struct date_mode *mode)
406 {
407         unsigned long date = 0;
408         long tz = 0;
409
410         if (ident->date_begin && ident->date_end)
411                 date = strtoul(ident->date_begin, NULL, 10);
412         if (date_overflows(date))
413                 date = 0;
414         else {
415                 if (ident->tz_begin && ident->tz_end)
416                         tz = strtol(ident->tz_begin, NULL, 10);
417                 if (tz >= INT_MAX || tz <= INT_MIN)
418                         tz = 0;
419         }
420         return show_date(date, tz, mode);
421 }
422
423 void pp_user_info(struct pretty_print_context *pp,
424                   const char *what, struct strbuf *sb,
425                   const char *line, const char *encoding)
426 {
427         struct ident_split ident;
428         char *line_end;
429         const char *mailbuf, *namebuf;
430         size_t namelen, maillen;
431         int max_length = 78; /* per rfc2822 */
432
433         if (pp->fmt == CMIT_FMT_ONELINE)
434                 return;
435
436         line_end = strchrnul(line, '\n');
437         if (split_ident_line(&ident, line, line_end - line))
438                 return;
439
440         mailbuf = ident.mail_begin;
441         maillen = ident.mail_end - ident.mail_begin;
442         namebuf = ident.name_begin;
443         namelen = ident.name_end - ident.name_begin;
444
445         if (pp->mailmap)
446                 map_user(pp->mailmap, &mailbuf, &maillen, &namebuf, &namelen);
447
448         if (cmit_fmt_is_mail(pp->fmt)) {
449                 if (pp->from_ident && ident_cmp(pp->from_ident, &ident)) {
450                         struct strbuf buf = STRBUF_INIT;
451
452                         strbuf_addstr(&buf, "From: ");
453                         strbuf_add(&buf, namebuf, namelen);
454                         strbuf_addstr(&buf, " <");
455                         strbuf_add(&buf, mailbuf, maillen);
456                         strbuf_addstr(&buf, ">\n");
457                         string_list_append(&pp->in_body_headers,
458                                            strbuf_detach(&buf, NULL));
459
460                         mailbuf = pp->from_ident->mail_begin;
461                         maillen = pp->from_ident->mail_end - mailbuf;
462                         namebuf = pp->from_ident->name_begin;
463                         namelen = pp->from_ident->name_end - namebuf;
464                 }
465
466                 strbuf_addstr(sb, "From: ");
467                 if (needs_rfc2047_encoding(namebuf, namelen, RFC2047_ADDRESS)) {
468                         add_rfc2047(sb, namebuf, namelen,
469                                     encoding, RFC2047_ADDRESS);
470                         max_length = 76; /* per rfc2047 */
471                 } else if (needs_rfc822_quoting(namebuf, namelen)) {
472                         struct strbuf quoted = STRBUF_INIT;
473                         add_rfc822_quoted(&quoted, namebuf, namelen);
474                         strbuf_add_wrapped_bytes(sb, quoted.buf, quoted.len,
475                                                         -6, 1, max_length);
476                         strbuf_release(&quoted);
477                 } else {
478                         strbuf_add_wrapped_bytes(sb, namebuf, namelen,
479                                                  -6, 1, max_length);
480                 }
481
482                 if (max_length <
483                     last_line_length(sb) + strlen(" <") + maillen + strlen(">"))
484                         strbuf_addch(sb, '\n');
485                 strbuf_addf(sb, " <%.*s>\n", (int)maillen, mailbuf);
486         } else {
487                 strbuf_addf(sb, "%s: %.*s%.*s <%.*s>\n", what,
488                             (pp->fmt == CMIT_FMT_FULLER) ? 4 : 0, "    ",
489                             (int)namelen, namebuf, (int)maillen, mailbuf);
490         }
491
492         switch (pp->fmt) {
493         case CMIT_FMT_MEDIUM:
494                 strbuf_addf(sb, "Date:   %s\n",
495                             show_ident_date(&ident, &pp->date_mode));
496                 break;
497         case CMIT_FMT_EMAIL:
498         case CMIT_FMT_MBOXRD:
499                 strbuf_addf(sb, "Date: %s\n",
500                             show_ident_date(&ident, DATE_MODE(RFC2822)));
501                 break;
502         case CMIT_FMT_FULLER:
503                 strbuf_addf(sb, "%sDate: %s\n", what,
504                             show_ident_date(&ident, &pp->date_mode));
505                 break;
506         default:
507                 /* notin' */
508                 break;
509         }
510 }
511
512 static int is_blank_line(const char *line, int *len_p)
513 {
514         int len = *len_p;
515         while (len && isspace(line[len - 1]))
516                 len--;
517         *len_p = len;
518         return !len;
519 }
520
521 const char *skip_blank_lines(const char *msg)
522 {
523         for (;;) {
524                 int linelen = get_one_line(msg);
525                 int ll = linelen;
526                 if (!linelen)
527                         break;
528                 if (!is_blank_line(msg, &ll))
529                         break;
530                 msg += linelen;
531         }
532         return msg;
533 }
534
535 static void add_merge_info(const struct pretty_print_context *pp,
536                            struct strbuf *sb, const struct commit *commit)
537 {
538         struct commit_list *parent = commit->parents;
539
540         if ((pp->fmt == CMIT_FMT_ONELINE) || (cmit_fmt_is_mail(pp->fmt)) ||
541             !parent || !parent->next)
542                 return;
543
544         strbuf_addstr(sb, "Merge:");
545
546         while (parent) {
547                 struct commit *p = parent->item;
548                 const char *hex = NULL;
549                 if (pp->abbrev)
550                         hex = find_unique_abbrev(p->object.oid.hash, pp->abbrev);
551                 if (!hex)
552                         hex = oid_to_hex(&p->object.oid);
553                 parent = parent->next;
554
555                 strbuf_addf(sb, " %s", hex);
556         }
557         strbuf_addch(sb, '\n');
558 }
559
560 static char *get_header(const char *msg, const char *key)
561 {
562         size_t len;
563         const char *v = find_commit_header(msg, key, &len);
564         return v ? xmemdupz(v, len) : NULL;
565 }
566
567 static char *replace_encoding_header(char *buf, const char *encoding)
568 {
569         struct strbuf tmp = STRBUF_INIT;
570         size_t start, len;
571         char *cp = buf;
572
573         /* guess if there is an encoding header before a \n\n */
574         while (!starts_with(cp, "encoding ")) {
575                 cp = strchr(cp, '\n');
576                 if (!cp || *++cp == '\n')
577                         return buf;
578         }
579         start = cp - buf;
580         cp = strchr(cp, '\n');
581         if (!cp)
582                 return buf; /* should not happen but be defensive */
583         len = cp + 1 - (buf + start);
584
585         strbuf_attach(&tmp, buf, strlen(buf), strlen(buf) + 1);
586         if (is_encoding_utf8(encoding)) {
587                 /* we have re-coded to UTF-8; drop the header */
588                 strbuf_remove(&tmp, start, len);
589         } else {
590                 /* just replaces XXXX in 'encoding XXXX\n' */
591                 strbuf_splice(&tmp, start + strlen("encoding "),
592                                           len - strlen("encoding \n"),
593                                           encoding, strlen(encoding));
594         }
595         return strbuf_detach(&tmp, NULL);
596 }
597
598 const char *logmsg_reencode(const struct commit *commit,
599                             char **commit_encoding,
600                             const char *output_encoding)
601 {
602         static const char *utf8 = "UTF-8";
603         const char *use_encoding;
604         char *encoding;
605         const char *msg = get_commit_buffer(commit, NULL);
606         char *out;
607
608         if (!output_encoding || !*output_encoding) {
609                 if (commit_encoding)
610                         *commit_encoding = get_header(msg, "encoding");
611                 return msg;
612         }
613         encoding = get_header(msg, "encoding");
614         if (commit_encoding)
615                 *commit_encoding = encoding;
616         use_encoding = encoding ? encoding : utf8;
617         if (same_encoding(use_encoding, output_encoding)) {
618                 /*
619                  * No encoding work to be done. If we have no encoding header
620                  * at all, then there's nothing to do, and we can return the
621                  * message verbatim (whether newly allocated or not).
622                  */
623                 if (!encoding)
624                         return msg;
625
626                 /*
627                  * Otherwise, we still want to munge the encoding header in the
628                  * result, which will be done by modifying the buffer. If we
629                  * are using a fresh copy, we can reuse it. But if we are using
630                  * the cached copy from get_commit_buffer, we need to duplicate it
631                  * to avoid munging the cached copy.
632                  */
633                 if (msg == get_cached_commit_buffer(commit, NULL))
634                         out = xstrdup(msg);
635                 else
636                         out = (char *)msg;
637         }
638         else {
639                 /*
640                  * There's actual encoding work to do. Do the reencoding, which
641                  * still leaves the header to be replaced in the next step. At
642                  * this point, we are done with msg. If we allocated a fresh
643                  * copy, we can free it.
644                  */
645                 out = reencode_string(msg, output_encoding, use_encoding);
646                 if (out)
647                         unuse_commit_buffer(commit, msg);
648         }
649
650         /*
651          * This replacement actually consumes the buffer we hand it, so we do
652          * not have to worry about freeing the old "out" here.
653          */
654         if (out)
655                 out = replace_encoding_header(out, output_encoding);
656
657         if (!commit_encoding)
658                 free(encoding);
659         /*
660          * If the re-encoding failed, out might be NULL here; in that
661          * case we just return the commit message verbatim.
662          */
663         return out ? out : msg;
664 }
665
666 static int mailmap_name(const char **email, size_t *email_len,
667                         const char **name, size_t *name_len)
668 {
669         static struct string_list *mail_map;
670         if (!mail_map) {
671                 mail_map = xcalloc(1, sizeof(*mail_map));
672                 read_mailmap(mail_map, NULL);
673         }
674         return mail_map->nr && map_user(mail_map, email, email_len, name, name_len);
675 }
676
677 static size_t format_person_part(struct strbuf *sb, char part,
678                                  const char *msg, int len,
679                                  const struct date_mode *dmode)
680 {
681         /* currently all placeholders have same length */
682         const int placeholder_len = 2;
683         struct ident_split s;
684         const char *name, *mail;
685         size_t maillen, namelen;
686
687         if (split_ident_line(&s, msg, len) < 0)
688                 goto skip;
689
690         name = s.name_begin;
691         namelen = s.name_end - s.name_begin;
692         mail = s.mail_begin;
693         maillen = s.mail_end - s.mail_begin;
694
695         if (part == 'N' || part == 'E') /* mailmap lookup */
696                 mailmap_name(&mail, &maillen, &name, &namelen);
697         if (part == 'n' || part == 'N') {       /* name */
698                 strbuf_add(sb, name, namelen);
699                 return placeholder_len;
700         }
701         if (part == 'e' || part == 'E') {       /* email */
702                 strbuf_add(sb, mail, maillen);
703                 return placeholder_len;
704         }
705
706         if (!s.date_begin)
707                 goto skip;
708
709         if (part == 't') {      /* date, UNIX timestamp */
710                 strbuf_add(sb, s.date_begin, s.date_end - s.date_begin);
711                 return placeholder_len;
712         }
713
714         switch (part) {
715         case 'd':       /* date */
716                 strbuf_addstr(sb, show_ident_date(&s, dmode));
717                 return placeholder_len;
718         case 'D':       /* date, RFC2822 style */
719                 strbuf_addstr(sb, show_ident_date(&s, DATE_MODE(RFC2822)));
720                 return placeholder_len;
721         case 'r':       /* date, relative */
722                 strbuf_addstr(sb, show_ident_date(&s, DATE_MODE(RELATIVE)));
723                 return placeholder_len;
724         case 'i':       /* date, ISO 8601-like */
725                 strbuf_addstr(sb, show_ident_date(&s, DATE_MODE(ISO8601)));
726                 return placeholder_len;
727         case 'I':       /* date, ISO 8601 strict */
728                 strbuf_addstr(sb, show_ident_date(&s, DATE_MODE(ISO8601_STRICT)));
729                 return placeholder_len;
730         }
731
732 skip:
733         /*
734          * reading from either a bogus commit, or a reflog entry with
735          * %gn, %ge, etc.; 'sb' cannot be updated, but we still need
736          * to compute a valid return value.
737          */
738         if (part == 'n' || part == 'e' || part == 't' || part == 'd'
739             || part == 'D' || part == 'r' || part == 'i')
740                 return placeholder_len;
741
742         return 0; /* unknown placeholder */
743 }
744
745 struct chunk {
746         size_t off;
747         size_t len;
748 };
749
750 enum flush_type {
751         no_flush,
752         flush_right,
753         flush_left,
754         flush_left_and_steal,
755         flush_both
756 };
757
758 enum trunc_type {
759         trunc_none,
760         trunc_left,
761         trunc_middle,
762         trunc_right
763 };
764
765 struct format_commit_context {
766         const struct commit *commit;
767         const struct pretty_print_context *pretty_ctx;
768         unsigned commit_header_parsed:1;
769         unsigned commit_message_parsed:1;
770         struct signature_check signature_check;
771         enum flush_type flush_type;
772         enum trunc_type truncate;
773         const char *message;
774         char *commit_encoding;
775         size_t width, indent1, indent2;
776         int auto_color;
777         int padding;
778
779         /* These offsets are relative to the start of the commit message. */
780         struct chunk author;
781         struct chunk committer;
782         size_t message_off;
783         size_t subject_off;
784         size_t body_off;
785
786         /* The following ones are relative to the result struct strbuf. */
787         struct chunk abbrev_commit_hash;
788         struct chunk abbrev_tree_hash;
789         struct chunk abbrev_parent_hashes;
790         size_t wrap_start;
791 };
792
793 static int add_again(struct strbuf *sb, struct chunk *chunk)
794 {
795         if (chunk->len) {
796                 strbuf_adddup(sb, chunk->off, chunk->len);
797                 return 1;
798         }
799
800         /*
801          * We haven't seen this chunk before.  Our caller is surely
802          * going to add it the hard way now.  Remember the most likely
803          * start of the to-be-added chunk: the current end of the
804          * struct strbuf.
805          */
806         chunk->off = sb->len;
807         return 0;
808 }
809
810 static void parse_commit_header(struct format_commit_context *context)
811 {
812         const char *msg = context->message;
813         int i;
814
815         for (i = 0; msg[i]; i++) {
816                 const char *name;
817                 int eol;
818                 for (eol = i; msg[eol] && msg[eol] != '\n'; eol++)
819                         ; /* do nothing */
820
821                 if (i == eol) {
822                         break;
823                 } else if (skip_prefix(msg + i, "author ", &name)) {
824                         context->author.off = name - msg;
825                         context->author.len = msg + eol - name;
826                 } else if (skip_prefix(msg + i, "committer ", &name)) {
827                         context->committer.off = name - msg;
828                         context->committer.len = msg + eol - name;
829                 }
830                 i = eol;
831         }
832         context->message_off = i;
833         context->commit_header_parsed = 1;
834 }
835
836 static int istitlechar(char c)
837 {
838         return (c >= 'a' && c <= 'z') || (c >= 'A' && c <= 'Z') ||
839                 (c >= '0' && c <= '9') || c == '.' || c == '_';
840 }
841
842 static void format_sanitized_subject(struct strbuf *sb, const char *msg)
843 {
844         size_t trimlen;
845         size_t start_len = sb->len;
846         int space = 2;
847
848         for (; *msg && *msg != '\n'; msg++) {
849                 if (istitlechar(*msg)) {
850                         if (space == 1)
851                                 strbuf_addch(sb, '-');
852                         space = 0;
853                         strbuf_addch(sb, *msg);
854                         if (*msg == '.')
855                                 while (*(msg+1) == '.')
856                                         msg++;
857                 } else
858                         space |= 1;
859         }
860
861         /* trim any trailing '.' or '-' characters */
862         trimlen = 0;
863         while (sb->len - trimlen > start_len &&
864                 (sb->buf[sb->len - 1 - trimlen] == '.'
865                 || sb->buf[sb->len - 1 - trimlen] == '-'))
866                 trimlen++;
867         strbuf_remove(sb, sb->len - trimlen, trimlen);
868 }
869
870 const char *format_subject(struct strbuf *sb, const char *msg,
871                            const char *line_separator)
872 {
873         int first = 1;
874
875         for (;;) {
876                 const char *line = msg;
877                 int linelen = get_one_line(line);
878
879                 msg += linelen;
880                 if (!linelen || is_blank_line(line, &linelen))
881                         break;
882
883                 if (!sb)
884                         continue;
885                 strbuf_grow(sb, linelen + 2);
886                 if (!first)
887                         strbuf_addstr(sb, line_separator);
888                 strbuf_add(sb, line, linelen);
889                 first = 0;
890         }
891         return msg;
892 }
893
894 static void parse_commit_message(struct format_commit_context *c)
895 {
896         const char *msg = c->message + c->message_off;
897         const char *start = c->message;
898
899         msg = skip_blank_lines(msg);
900         c->subject_off = msg - start;
901
902         msg = format_subject(NULL, msg, NULL);
903         msg = skip_blank_lines(msg);
904         c->body_off = msg - start;
905
906         c->commit_message_parsed = 1;
907 }
908
909 static void strbuf_wrap(struct strbuf *sb, size_t pos,
910                         size_t width, size_t indent1, size_t indent2)
911 {
912         struct strbuf tmp = STRBUF_INIT;
913
914         if (pos)
915                 strbuf_add(&tmp, sb->buf, pos);
916         strbuf_add_wrapped_text(&tmp, sb->buf + pos,
917                                 (int) indent1, (int) indent2, (int) width);
918         strbuf_swap(&tmp, sb);
919         strbuf_release(&tmp);
920 }
921
922 static void rewrap_message_tail(struct strbuf *sb,
923                                 struct format_commit_context *c,
924                                 size_t new_width, size_t new_indent1,
925                                 size_t new_indent2)
926 {
927         if (c->width == new_width && c->indent1 == new_indent1 &&
928             c->indent2 == new_indent2)
929                 return;
930         if (c->wrap_start < sb->len)
931                 strbuf_wrap(sb, c->wrap_start, c->width, c->indent1, c->indent2);
932         c->wrap_start = sb->len;
933         c->width = new_width;
934         c->indent1 = new_indent1;
935         c->indent2 = new_indent2;
936 }
937
938 static int format_reflog_person(struct strbuf *sb,
939                                 char part,
940                                 struct reflog_walk_info *log,
941                                 const struct date_mode *dmode)
942 {
943         const char *ident;
944
945         if (!log)
946                 return 2;
947
948         ident = get_reflog_ident(log);
949         if (!ident)
950                 return 2;
951
952         return format_person_part(sb, part, ident, strlen(ident), dmode);
953 }
954
955 static size_t parse_color(struct strbuf *sb, /* in UTF-8 */
956                           const char *placeholder,
957                           struct format_commit_context *c)
958 {
959         const char *rest = placeholder;
960
961         if (placeholder[1] == '(') {
962                 const char *begin = placeholder + 2;
963                 const char *end = strchr(begin, ')');
964                 char color[COLOR_MAXLEN];
965
966                 if (!end)
967                         return 0;
968                 if (skip_prefix(begin, "auto,", &begin)) {
969                         if (!want_color(c->pretty_ctx->color))
970                                 return end - placeholder + 1;
971                 }
972                 if (color_parse_mem(begin, end - begin, color) < 0)
973                         die(_("unable to parse --pretty format"));
974                 strbuf_addstr(sb, color);
975                 return end - placeholder + 1;
976         }
977         if (skip_prefix(placeholder + 1, "red", &rest))
978                 strbuf_addstr(sb, GIT_COLOR_RED);
979         else if (skip_prefix(placeholder + 1, "green", &rest))
980                 strbuf_addstr(sb, GIT_COLOR_GREEN);
981         else if (skip_prefix(placeholder + 1, "blue", &rest))
982                 strbuf_addstr(sb, GIT_COLOR_BLUE);
983         else if (skip_prefix(placeholder + 1, "reset", &rest))
984                 strbuf_addstr(sb, GIT_COLOR_RESET);
985         return rest - placeholder;
986 }
987
988 static size_t parse_padding_placeholder(struct strbuf *sb,
989                                         const char *placeholder,
990                                         struct format_commit_context *c)
991 {
992         const char *ch = placeholder;
993         enum flush_type flush_type;
994         int to_column = 0;
995
996         switch (*ch++) {
997         case '<':
998                 flush_type = flush_right;
999                 break;
1000         case '>':
1001                 if (*ch == '<') {
1002                         flush_type = flush_both;
1003                         ch++;
1004                 } else if (*ch == '>') {
1005                         flush_type = flush_left_and_steal;
1006                         ch++;
1007                 } else
1008                         flush_type = flush_left;
1009                 break;
1010         default:
1011                 return 0;
1012         }
1013
1014         /* the next value means "wide enough to that column" */
1015         if (*ch == '|') {
1016                 to_column = 1;
1017                 ch++;
1018         }
1019
1020         if (*ch == '(') {
1021                 const char *start = ch + 1;
1022                 const char *end = start + strcspn(start, ",)");
1023                 char *next;
1024                 int width;
1025                 if (!end || end == start)
1026                         return 0;
1027                 width = strtol(start, &next, 10);
1028                 if (next == start || width == 0)
1029                         return 0;
1030                 if (width < 0) {
1031                         if (to_column)
1032                                 width += term_columns();
1033                         if (width < 0)
1034                                 return 0;
1035                 }
1036                 c->padding = to_column ? -width : width;
1037                 c->flush_type = flush_type;
1038
1039                 if (*end == ',') {
1040                         start = end + 1;
1041                         end = strchr(start, ')');
1042                         if (!end || end == start)
1043                                 return 0;
1044                         if (starts_with(start, "trunc)"))
1045                                 c->truncate = trunc_right;
1046                         else if (starts_with(start, "ltrunc)"))
1047                                 c->truncate = trunc_left;
1048                         else if (starts_with(start, "mtrunc)"))
1049                                 c->truncate = trunc_middle;
1050                         else
1051                                 return 0;
1052                 } else
1053                         c->truncate = trunc_none;
1054
1055                 return end - placeholder + 1;
1056         }
1057         return 0;
1058 }
1059
1060 static size_t format_commit_one(struct strbuf *sb, /* in UTF-8 */
1061                                 const char *placeholder,
1062                                 void *context)
1063 {
1064         struct format_commit_context *c = context;
1065         const struct commit *commit = c->commit;
1066         const char *msg = c->message;
1067         struct commit_list *p;
1068         int h1, h2;
1069
1070         /* these are independent of the commit */
1071         switch (placeholder[0]) {
1072         case 'C':
1073                 if (starts_with(placeholder + 1, "(auto)")) {
1074                         c->auto_color = want_color(c->pretty_ctx->color);
1075                         return 7; /* consumed 7 bytes, "C(auto)" */
1076                 } else {
1077                         int ret = parse_color(sb, placeholder, c);
1078                         if (ret)
1079                                 c->auto_color = 0;
1080                         /*
1081                          * Otherwise, we decided to treat %C<unknown>
1082                          * as a literal string, and the previous
1083                          * %C(auto) is still valid.
1084                          */
1085                         return ret;
1086                 }
1087         case 'n':               /* newline */
1088                 strbuf_addch(sb, '\n');
1089                 return 1;
1090         case 'x':
1091                 /* %x00 == NUL, %x0a == LF, etc. */
1092                 if (0 <= (h1 = hexval_table[0xff & placeholder[1]]) &&
1093                     h1 <= 16 &&
1094                     0 <= (h2 = hexval_table[0xff & placeholder[2]]) &&
1095                     h2 <= 16) {
1096                         strbuf_addch(sb, (h1<<4)|h2);
1097                         return 3;
1098                 } else
1099                         return 0;
1100         case 'w':
1101                 if (placeholder[1] == '(') {
1102                         unsigned long width = 0, indent1 = 0, indent2 = 0;
1103                         char *next;
1104                         const char *start = placeholder + 2;
1105                         const char *end = strchr(start, ')');
1106                         if (!end)
1107                                 return 0;
1108                         if (end > start) {
1109                                 width = strtoul(start, &next, 10);
1110                                 if (*next == ',') {
1111                                         indent1 = strtoul(next + 1, &next, 10);
1112                                         if (*next == ',') {
1113                                                 indent2 = strtoul(next + 1,
1114                                                                  &next, 10);
1115                                         }
1116                                 }
1117                                 if (*next != ')')
1118                                         return 0;
1119                         }
1120                         rewrap_message_tail(sb, c, width, indent1, indent2);
1121                         return end - placeholder + 1;
1122                 } else
1123                         return 0;
1124
1125         case '<':
1126         case '>':
1127                 return parse_padding_placeholder(sb, placeholder, c);
1128         }
1129
1130         /* these depend on the commit */
1131         if (!commit->object.parsed)
1132                 parse_object(commit->object.oid.hash);
1133
1134         switch (placeholder[0]) {
1135         case 'H':               /* commit hash */
1136                 strbuf_addstr(sb, diff_get_color(c->auto_color, DIFF_COMMIT));
1137                 strbuf_addstr(sb, oid_to_hex(&commit->object.oid));
1138                 strbuf_addstr(sb, diff_get_color(c->auto_color, DIFF_RESET));
1139                 return 1;
1140         case 'h':               /* abbreviated commit hash */
1141                 strbuf_addstr(sb, diff_get_color(c->auto_color, DIFF_COMMIT));
1142                 if (add_again(sb, &c->abbrev_commit_hash)) {
1143                         strbuf_addstr(sb, diff_get_color(c->auto_color, DIFF_RESET));
1144                         return 1;
1145                 }
1146                 strbuf_add_unique_abbrev(sb, commit->object.oid.hash,
1147                                          c->pretty_ctx->abbrev);
1148                 strbuf_addstr(sb, diff_get_color(c->auto_color, DIFF_RESET));
1149                 c->abbrev_commit_hash.len = sb->len - c->abbrev_commit_hash.off;
1150                 return 1;
1151         case 'T':               /* tree hash */
1152                 strbuf_addstr(sb, oid_to_hex(&commit->tree->object.oid));
1153                 return 1;
1154         case 't':               /* abbreviated tree hash */
1155                 if (add_again(sb, &c->abbrev_tree_hash))
1156                         return 1;
1157                 strbuf_add_unique_abbrev(sb, commit->tree->object.oid.hash,
1158                                          c->pretty_ctx->abbrev);
1159                 c->abbrev_tree_hash.len = sb->len - c->abbrev_tree_hash.off;
1160                 return 1;
1161         case 'P':               /* parent hashes */
1162                 for (p = commit->parents; p; p = p->next) {
1163                         if (p != commit->parents)
1164                                 strbuf_addch(sb, ' ');
1165                         strbuf_addstr(sb, oid_to_hex(&p->item->object.oid));
1166                 }
1167                 return 1;
1168         case 'p':               /* abbreviated parent hashes */
1169                 if (add_again(sb, &c->abbrev_parent_hashes))
1170                         return 1;
1171                 for (p = commit->parents; p; p = p->next) {
1172                         if (p != commit->parents)
1173                                 strbuf_addch(sb, ' ');
1174                         strbuf_add_unique_abbrev(sb, p->item->object.oid.hash,
1175                                                  c->pretty_ctx->abbrev);
1176                 }
1177                 c->abbrev_parent_hashes.len = sb->len -
1178                                               c->abbrev_parent_hashes.off;
1179                 return 1;
1180         case 'm':               /* left/right/bottom */
1181                 strbuf_addstr(sb, get_revision_mark(NULL, commit));
1182                 return 1;
1183         case 'd':
1184                 load_ref_decorations(DECORATE_SHORT_REFS);
1185                 format_decorations(sb, commit, c->auto_color);
1186                 return 1;
1187         case 'D':
1188                 load_ref_decorations(DECORATE_SHORT_REFS);
1189                 format_decorations_extended(sb, commit, c->auto_color, "", ", ", "");
1190                 return 1;
1191         case 'g':               /* reflog info */
1192                 switch(placeholder[1]) {
1193                 case 'd':       /* reflog selector */
1194                 case 'D':
1195                         if (c->pretty_ctx->reflog_info)
1196                                 get_reflog_selector(sb,
1197                                                     c->pretty_ctx->reflog_info,
1198                                                     &c->pretty_ctx->date_mode,
1199                                                     c->pretty_ctx->date_mode_explicit,
1200                                                     (placeholder[1] == 'd'));
1201                         return 2;
1202                 case 's':       /* reflog message */
1203                         if (c->pretty_ctx->reflog_info)
1204                                 get_reflog_message(sb, c->pretty_ctx->reflog_info);
1205                         return 2;
1206                 case 'n':
1207                 case 'N':
1208                 case 'e':
1209                 case 'E':
1210                         return format_reflog_person(sb,
1211                                                     placeholder[1],
1212                                                     c->pretty_ctx->reflog_info,
1213                                                     &c->pretty_ctx->date_mode);
1214                 }
1215                 return 0;       /* unknown %g placeholder */
1216         case 'N':
1217                 if (c->pretty_ctx->notes_message) {
1218                         strbuf_addstr(sb, c->pretty_ctx->notes_message);
1219                         return 1;
1220                 }
1221                 return 0;
1222         }
1223
1224         if (placeholder[0] == 'G') {
1225                 if (!c->signature_check.result)
1226                         check_commit_signature(c->commit, &(c->signature_check));
1227                 switch (placeholder[1]) {
1228                 case 'G':
1229                         if (c->signature_check.gpg_output)
1230                                 strbuf_addstr(sb, c->signature_check.gpg_output);
1231                         break;
1232                 case '?':
1233                         switch (c->signature_check.result) {
1234                         case 'G':
1235                         case 'B':
1236                         case 'U':
1237                         case 'N':
1238                                 strbuf_addch(sb, c->signature_check.result);
1239                         }
1240                         break;
1241                 case 'S':
1242                         if (c->signature_check.signer)
1243                                 strbuf_addstr(sb, c->signature_check.signer);
1244                         break;
1245                 case 'K':
1246                         if (c->signature_check.key)
1247                                 strbuf_addstr(sb, c->signature_check.key);
1248                         break;
1249                 default:
1250                         return 0;
1251                 }
1252                 return 2;
1253         }
1254
1255
1256         /* For the rest we have to parse the commit header. */
1257         if (!c->commit_header_parsed)
1258                 parse_commit_header(c);
1259
1260         switch (placeholder[0]) {
1261         case 'a':       /* author ... */
1262                 return format_person_part(sb, placeholder[1],
1263                                    msg + c->author.off, c->author.len,
1264                                    &c->pretty_ctx->date_mode);
1265         case 'c':       /* committer ... */
1266                 return format_person_part(sb, placeholder[1],
1267                                    msg + c->committer.off, c->committer.len,
1268                                    &c->pretty_ctx->date_mode);
1269         case 'e':       /* encoding */
1270                 if (c->commit_encoding)
1271                         strbuf_addstr(sb, c->commit_encoding);
1272                 return 1;
1273         case 'B':       /* raw body */
1274                 /* message_off is always left at the initial newline */
1275                 strbuf_addstr(sb, msg + c->message_off + 1);
1276                 return 1;
1277         }
1278
1279         /* Now we need to parse the commit message. */
1280         if (!c->commit_message_parsed)
1281                 parse_commit_message(c);
1282
1283         switch (placeholder[0]) {
1284         case 's':       /* subject */
1285                 format_subject(sb, msg + c->subject_off, " ");
1286                 return 1;
1287         case 'f':       /* sanitized subject */
1288                 format_sanitized_subject(sb, msg + c->subject_off);
1289                 return 1;
1290         case 'b':       /* body */
1291                 strbuf_addstr(sb, msg + c->body_off);
1292                 return 1;
1293         }
1294         return 0;       /* unknown placeholder */
1295 }
1296
1297 static size_t format_and_pad_commit(struct strbuf *sb, /* in UTF-8 */
1298                                     const char *placeholder,
1299                                     struct format_commit_context *c)
1300 {
1301         struct strbuf local_sb = STRBUF_INIT;
1302         int total_consumed = 0, len, padding = c->padding;
1303         if (padding < 0) {
1304                 const char *start = strrchr(sb->buf, '\n');
1305                 int occupied;
1306                 if (!start)
1307                         start = sb->buf;
1308                 occupied = utf8_strnwidth(start, -1, 1);
1309                 occupied += c->pretty_ctx->graph_width;
1310                 padding = (-padding) - occupied;
1311         }
1312         while (1) {
1313                 int modifier = *placeholder == 'C';
1314                 int consumed = format_commit_one(&local_sb, placeholder, c);
1315                 total_consumed += consumed;
1316
1317                 if (!modifier)
1318                         break;
1319
1320                 placeholder += consumed;
1321                 if (*placeholder != '%')
1322                         break;
1323                 placeholder++;
1324                 total_consumed++;
1325         }
1326         len = utf8_strnwidth(local_sb.buf, -1, 1);
1327
1328         if (c->flush_type == flush_left_and_steal) {
1329                 const char *ch = sb->buf + sb->len - 1;
1330                 while (len > padding && ch > sb->buf) {
1331                         const char *p;
1332                         if (*ch == ' ') {
1333                                 ch--;
1334                                 padding++;
1335                                 continue;
1336                         }
1337                         /* check for trailing ansi sequences */
1338                         if (*ch != 'm')
1339                                 break;
1340                         p = ch - 1;
1341                         while (ch - p < 10 && *p != '\033')
1342                                 p--;
1343                         if (*p != '\033' ||
1344                             ch + 1 - p != display_mode_esc_sequence_len(p))
1345                                 break;
1346                         /*
1347                          * got a good ansi sequence, put it back to
1348                          * local_sb as we're cutting sb
1349                          */
1350                         strbuf_insert(&local_sb, 0, p, ch + 1 - p);
1351                         ch = p - 1;
1352                 }
1353                 strbuf_setlen(sb, ch + 1 - sb->buf);
1354                 c->flush_type = flush_left;
1355         }
1356
1357         if (len > padding) {
1358                 switch (c->truncate) {
1359                 case trunc_left:
1360                         strbuf_utf8_replace(&local_sb,
1361                                             0, len - (padding - 2),
1362                                             "..");
1363                         break;
1364                 case trunc_middle:
1365                         strbuf_utf8_replace(&local_sb,
1366                                             padding / 2 - 1,
1367                                             len - (padding - 2),
1368                                             "..");
1369                         break;
1370                 case trunc_right:
1371                         strbuf_utf8_replace(&local_sb,
1372                                             padding - 2, len - (padding - 2),
1373                                             "..");
1374                         break;
1375                 case trunc_none:
1376                         break;
1377                 }
1378                 strbuf_addbuf(sb, &local_sb);
1379         } else {
1380                 int sb_len = sb->len, offset = 0;
1381                 if (c->flush_type == flush_left)
1382                         offset = padding - len;
1383                 else if (c->flush_type == flush_both)
1384                         offset = (padding - len) / 2;
1385                 /*
1386                  * we calculate padding in columns, now
1387                  * convert it back to chars
1388                  */
1389                 padding = padding - len + local_sb.len;
1390                 strbuf_addchars(sb, ' ', padding);
1391                 memcpy(sb->buf + sb_len + offset, local_sb.buf,
1392                        local_sb.len);
1393         }
1394         strbuf_release(&local_sb);
1395         c->flush_type = no_flush;
1396         return total_consumed;
1397 }
1398
1399 static size_t format_commit_item(struct strbuf *sb, /* in UTF-8 */
1400                                  const char *placeholder,
1401                                  void *context)
1402 {
1403         int consumed;
1404         size_t orig_len;
1405         enum {
1406                 NO_MAGIC,
1407                 ADD_LF_BEFORE_NON_EMPTY,
1408                 DEL_LF_BEFORE_EMPTY,
1409                 ADD_SP_BEFORE_NON_EMPTY
1410         } magic = NO_MAGIC;
1411
1412         switch (placeholder[0]) {
1413         case '-':
1414                 magic = DEL_LF_BEFORE_EMPTY;
1415                 break;
1416         case '+':
1417                 magic = ADD_LF_BEFORE_NON_EMPTY;
1418                 break;
1419         case ' ':
1420                 magic = ADD_SP_BEFORE_NON_EMPTY;
1421                 break;
1422         default:
1423                 break;
1424         }
1425         if (magic != NO_MAGIC)
1426                 placeholder++;
1427
1428         orig_len = sb->len;
1429         if (((struct format_commit_context *)context)->flush_type != no_flush)
1430                 consumed = format_and_pad_commit(sb, placeholder, context);
1431         else
1432                 consumed = format_commit_one(sb, placeholder, context);
1433         if (magic == NO_MAGIC)
1434                 return consumed;
1435
1436         if ((orig_len == sb->len) && magic == DEL_LF_BEFORE_EMPTY) {
1437                 while (sb->len && sb->buf[sb->len - 1] == '\n')
1438                         strbuf_setlen(sb, sb->len - 1);
1439         } else if (orig_len != sb->len) {
1440                 if (magic == ADD_LF_BEFORE_NON_EMPTY)
1441                         strbuf_insert(sb, orig_len, "\n", 1);
1442                 else if (magic == ADD_SP_BEFORE_NON_EMPTY)
1443                         strbuf_insert(sb, orig_len, " ", 1);
1444         }
1445         return consumed + 1;
1446 }
1447
1448 static size_t userformat_want_item(struct strbuf *sb, const char *placeholder,
1449                                    void *context)
1450 {
1451         struct userformat_want *w = context;
1452
1453         if (*placeholder == '+' || *placeholder == '-' || *placeholder == ' ')
1454                 placeholder++;
1455
1456         switch (*placeholder) {
1457         case 'N':
1458                 w->notes = 1;
1459                 break;
1460         }
1461         return 0;
1462 }
1463
1464 void userformat_find_requirements(const char *fmt, struct userformat_want *w)
1465 {
1466         struct strbuf dummy = STRBUF_INIT;
1467
1468         if (!fmt) {
1469                 if (!user_format)
1470                         return;
1471                 fmt = user_format;
1472         }
1473         strbuf_expand(&dummy, fmt, userformat_want_item, w);
1474         strbuf_release(&dummy);
1475 }
1476
1477 void format_commit_message(const struct commit *commit,
1478                            const char *format, struct strbuf *sb,
1479                            const struct pretty_print_context *pretty_ctx)
1480 {
1481         struct format_commit_context context;
1482         const char *output_enc = pretty_ctx->output_encoding;
1483         const char *utf8 = "UTF-8";
1484
1485         memset(&context, 0, sizeof(context));
1486         context.commit = commit;
1487         context.pretty_ctx = pretty_ctx;
1488         context.wrap_start = sb->len;
1489         /*
1490          * convert a commit message to UTF-8 first
1491          * as far as 'format_commit_item' assumes it in UTF-8
1492          */
1493         context.message = logmsg_reencode(commit,
1494                                           &context.commit_encoding,
1495                                           utf8);
1496
1497         strbuf_expand(sb, format, format_commit_item, &context);
1498         rewrap_message_tail(sb, &context, 0, 0, 0);
1499
1500         /* then convert a commit message to an actual output encoding */
1501         if (output_enc) {
1502                 if (same_encoding(utf8, output_enc))
1503                         output_enc = NULL;
1504         } else {
1505                 if (context.commit_encoding &&
1506                     !same_encoding(context.commit_encoding, utf8))
1507                         output_enc = context.commit_encoding;
1508         }
1509
1510         if (output_enc) {
1511                 int outsz;
1512                 char *out = reencode_string_len(sb->buf, sb->len,
1513                                                 output_enc, utf8, &outsz);
1514                 if (out)
1515                         strbuf_attach(sb, out, outsz, outsz + 1);
1516         }
1517
1518         free(context.commit_encoding);
1519         unuse_commit_buffer(commit, context.message);
1520 }
1521
1522 static void pp_header(struct pretty_print_context *pp,
1523                       const char *encoding,
1524                       const struct commit *commit,
1525                       const char **msg_p,
1526                       struct strbuf *sb)
1527 {
1528         int parents_shown = 0;
1529
1530         for (;;) {
1531                 const char *name, *line = *msg_p;
1532                 int linelen = get_one_line(*msg_p);
1533
1534                 if (!linelen)
1535                         return;
1536                 *msg_p += linelen;
1537
1538                 if (linelen == 1)
1539                         /* End of header */
1540                         return;
1541
1542                 if (pp->fmt == CMIT_FMT_RAW) {
1543                         strbuf_add(sb, line, linelen);
1544                         continue;
1545                 }
1546
1547                 if (starts_with(line, "parent ")) {
1548                         if (linelen != 48)
1549                                 die("bad parent line in commit");
1550                         continue;
1551                 }
1552
1553                 if (!parents_shown) {
1554                         unsigned num = commit_list_count(commit->parents);
1555                         /* with enough slop */
1556                         strbuf_grow(sb, num * 50 + 20);
1557                         add_merge_info(pp, sb, commit);
1558                         parents_shown = 1;
1559                 }
1560
1561                 /*
1562                  * MEDIUM == DEFAULT shows only author with dates.
1563                  * FULL shows both authors but not dates.
1564                  * FULLER shows both authors and dates.
1565                  */
1566                 if (skip_prefix(line, "author ", &name)) {
1567                         strbuf_grow(sb, linelen + 80);
1568                         pp_user_info(pp, "Author", sb, name, encoding);
1569                 }
1570                 if (skip_prefix(line, "committer ", &name) &&
1571                     (pp->fmt == CMIT_FMT_FULL || pp->fmt == CMIT_FMT_FULLER)) {
1572                         strbuf_grow(sb, linelen + 80);
1573                         pp_user_info(pp, "Commit", sb, name, encoding);
1574                 }
1575         }
1576 }
1577
1578 void pp_title_line(struct pretty_print_context *pp,
1579                    const char **msg_p,
1580                    struct strbuf *sb,
1581                    const char *encoding,
1582                    int need_8bit_cte)
1583 {
1584         static const int max_length = 78; /* per rfc2047 */
1585         struct strbuf title;
1586
1587         strbuf_init(&title, 80);
1588         *msg_p = format_subject(&title, *msg_p,
1589                                 pp->preserve_subject ? "\n" : " ");
1590
1591         strbuf_grow(sb, title.len + 1024);
1592         if (pp->subject) {
1593                 strbuf_addstr(sb, pp->subject);
1594                 if (needs_rfc2047_encoding(title.buf, title.len, RFC2047_SUBJECT))
1595                         add_rfc2047(sb, title.buf, title.len,
1596                                                 encoding, RFC2047_SUBJECT);
1597                 else
1598                         strbuf_add_wrapped_bytes(sb, title.buf, title.len,
1599                                          -last_line_length(sb), 1, max_length);
1600         } else {
1601                 strbuf_addbuf(sb, &title);
1602         }
1603         strbuf_addch(sb, '\n');
1604
1605         if (need_8bit_cte == 0) {
1606                 int i;
1607                 for (i = 0; i < pp->in_body_headers.nr; i++) {
1608                         if (has_non_ascii(pp->in_body_headers.items[i].string)) {
1609                                 need_8bit_cte = 1;
1610                                 break;
1611                         }
1612                 }
1613         }
1614
1615         if (need_8bit_cte > 0) {
1616                 const char *header_fmt =
1617                         "MIME-Version: 1.0\n"
1618                         "Content-Type: text/plain; charset=%s\n"
1619                         "Content-Transfer-Encoding: 8bit\n";
1620                 strbuf_addf(sb, header_fmt, encoding);
1621         }
1622         if (pp->after_subject) {
1623                 strbuf_addstr(sb, pp->after_subject);
1624         }
1625         if (cmit_fmt_is_mail(pp->fmt)) {
1626                 strbuf_addch(sb, '\n');
1627         }
1628
1629         if (pp->in_body_headers.nr) {
1630                 int i;
1631                 for (i = 0; i < pp->in_body_headers.nr; i++) {
1632                         strbuf_addstr(sb, pp->in_body_headers.items[i].string);
1633                         free(pp->in_body_headers.items[i].string);
1634                 }
1635                 string_list_clear(&pp->in_body_headers, 0);
1636                 strbuf_addch(sb, '\n');
1637         }
1638
1639         strbuf_release(&title);
1640 }
1641
1642 static int pp_utf8_width(const char *start, const char *end)
1643 {
1644         int width = 0;
1645         size_t remain = end - start;
1646
1647         while (remain) {
1648                 int n = utf8_width(&start, &remain);
1649                 if (n < 0 || !start)
1650                         return -1;
1651                 width += n;
1652         }
1653         return width;
1654 }
1655
1656 static void strbuf_add_tabexpand(struct strbuf *sb, int tabwidth,
1657                                  const char *line, int linelen)
1658 {
1659         const char *tab;
1660
1661         while ((tab = memchr(line, '\t', linelen)) != NULL) {
1662                 int width = pp_utf8_width(line, tab);
1663
1664                 /*
1665                  * If it wasn't well-formed utf8, or it
1666                  * had characters with badly defined
1667                  * width (control characters etc), just
1668                  * give up on trying to align things.
1669                  */
1670                 if (width < 0)
1671                         break;
1672
1673                 /* Output the data .. */
1674                 strbuf_add(sb, line, tab - line);
1675
1676                 /* .. and the de-tabified tab */
1677                 strbuf_addchars(sb, ' ', tabwidth - (width % tabwidth));
1678
1679                 /* Skip over the printed part .. */
1680                 linelen -= tab + 1 - line;
1681                 line = tab + 1;
1682         }
1683
1684         /*
1685          * Print out everything after the last tab without
1686          * worrying about width - there's nothing more to
1687          * align.
1688          */
1689         strbuf_add(sb, line, linelen);
1690 }
1691
1692 /*
1693  * pp_handle_indent() prints out the intendation, and
1694  * the whole line (without the final newline), after
1695  * de-tabifying.
1696  */
1697 static void pp_handle_indent(struct pretty_print_context *pp,
1698                              struct strbuf *sb, int indent,
1699                              const char *line, int linelen)
1700 {
1701         strbuf_addchars(sb, ' ', indent);
1702         if (pp->expand_tabs_in_log)
1703                 strbuf_add_tabexpand(sb, pp->expand_tabs_in_log, line, linelen);
1704         else
1705                 strbuf_add(sb, line, linelen);
1706 }
1707
1708 static int is_mboxrd_from(const char *line, int len)
1709 {
1710         /*
1711          * a line matching /^From $/ here would only have len == 4
1712          * at this point because is_empty_line would've trimmed all
1713          * trailing space
1714          */
1715         return len > 4 && starts_with(line + strspn(line, ">"), "From ");
1716 }
1717
1718 void pp_remainder(struct pretty_print_context *pp,
1719                   const char **msg_p,
1720                   struct strbuf *sb,
1721                   int indent)
1722 {
1723         int first = 1;
1724         for (;;) {
1725                 const char *line = *msg_p;
1726                 int linelen = get_one_line(line);
1727                 *msg_p += linelen;
1728
1729                 if (!linelen)
1730                         break;
1731
1732                 if (is_blank_line(line, &linelen)) {
1733                         if (first)
1734                                 continue;
1735                         if (pp->fmt == CMIT_FMT_SHORT)
1736                                 break;
1737                 }
1738                 first = 0;
1739
1740                 strbuf_grow(sb, linelen + indent + 20);
1741                 if (indent)
1742                         pp_handle_indent(pp, sb, indent, line, linelen);
1743                 else if (pp->expand_tabs_in_log)
1744                         strbuf_add_tabexpand(sb, pp->expand_tabs_in_log,
1745                                              line, linelen);
1746                 else {
1747                         if (pp->fmt == CMIT_FMT_MBOXRD &&
1748                                         is_mboxrd_from(line, linelen))
1749                                 strbuf_addch(sb, '>');
1750
1751                         strbuf_add(sb, line, linelen);
1752                 }
1753                 strbuf_addch(sb, '\n');
1754         }
1755 }
1756
1757 void pretty_print_commit(struct pretty_print_context *pp,
1758                          const struct commit *commit,
1759                          struct strbuf *sb)
1760 {
1761         unsigned long beginning_of_body;
1762         int indent = 4;
1763         const char *msg;
1764         const char *reencoded;
1765         const char *encoding;
1766         int need_8bit_cte = pp->need_8bit_cte;
1767
1768         if (pp->fmt == CMIT_FMT_USERFORMAT) {
1769                 format_commit_message(commit, user_format, sb, pp);
1770                 return;
1771         }
1772
1773         encoding = get_log_output_encoding();
1774         msg = reencoded = logmsg_reencode(commit, NULL, encoding);
1775
1776         if (pp->fmt == CMIT_FMT_ONELINE || cmit_fmt_is_mail(pp->fmt))
1777                 indent = 0;
1778
1779         /*
1780          * We need to check and emit Content-type: to mark it
1781          * as 8-bit if we haven't done so.
1782          */
1783         if (cmit_fmt_is_mail(pp->fmt) && need_8bit_cte == 0) {
1784                 int i, ch, in_body;
1785
1786                 for (in_body = i = 0; (ch = msg[i]); i++) {
1787                         if (!in_body) {
1788                                 /* author could be non 7-bit ASCII but
1789                                  * the log may be so; skip over the
1790                                  * header part first.
1791                                  */
1792                                 if (ch == '\n' && msg[i+1] == '\n')
1793                                         in_body = 1;
1794                         }
1795                         else if (non_ascii(ch)) {
1796                                 need_8bit_cte = 1;
1797                                 break;
1798                         }
1799                 }
1800         }
1801
1802         pp_header(pp, encoding, commit, &msg, sb);
1803         if (pp->fmt != CMIT_FMT_ONELINE && !pp->subject) {
1804                 strbuf_addch(sb, '\n');
1805         }
1806
1807         /* Skip excess blank lines at the beginning of body, if any... */
1808         msg = skip_blank_lines(msg);
1809
1810         /* These formats treat the title line specially. */
1811         if (pp->fmt == CMIT_FMT_ONELINE || cmit_fmt_is_mail(pp->fmt))
1812                 pp_title_line(pp, &msg, sb, encoding, need_8bit_cte);
1813
1814         beginning_of_body = sb->len;
1815         if (pp->fmt != CMIT_FMT_ONELINE)
1816                 pp_remainder(pp, &msg, sb, indent);
1817         strbuf_rtrim(sb);
1818
1819         /* Make sure there is an EOLN for the non-oneline case */
1820         if (pp->fmt != CMIT_FMT_ONELINE)
1821                 strbuf_addch(sb, '\n');
1822
1823         /*
1824          * The caller may append additional body text in e-mail
1825          * format.  Make sure we did not strip the blank line
1826          * between the header and the body.
1827          */
1828         if (cmit_fmt_is_mail(pp->fmt) && sb->len <= beginning_of_body)
1829                 strbuf_addch(sb, '\n');
1830
1831         unuse_commit_buffer(commit, reencoded);
1832 }
1833
1834 void pp_commit_easy(enum cmit_fmt fmt, const struct commit *commit,
1835                     struct strbuf *sb)
1836 {
1837         struct pretty_print_context pp = {0};
1838         pp.fmt = fmt;
1839         pretty_print_commit(&pp, commit, sb);
1840 }