git.oblomov.eu Git - git/blob - pkt-line.h

   1 #ifndef PKTLINE_H
   2 #define PKTLINE_H
   3
   4 #include "git-compat-util.h"
   5 #include "strbuf.h"
   6 #include "sideband.h"
   7
   8 /*
   9  * Write a packetized stream, where each line is preceded by
  10  * its length (including the header) as a 4-byte hex number.
  11  * A length of 'zero' means end of stream (and a length of 1-3
  12  * would be an error).
  13  *
  14  * This is all pretty stupid, but we use this packetized line
  15  * format to make a streaming format possible without ever
  16  * over-running the read buffers. That way we'll never read
  17  * into what might be the pack data (which should go to another
  18  * process entirely).
  19  *
  20  * The writing side could use stdio, but since the reading
  21  * side can't, we stay with pure read/write interfaces.
  22  */
  23 void packet_flush(int fd);
  24 void packet_delim(int fd);
  25 void packet_write_fmt(int fd, const char *fmt, ...) __attribute__((format (printf, 2, 3)));
  26 void packet_buf_flush(struct strbuf *buf);
  27 void packet_buf_delim(struct strbuf *buf);
  28 void set_packet_header(char *buf, int size);
  29 void packet_write(int fd_out, const char *buf, size_t size);
  30 void packet_buf_write(struct strbuf *buf, const char *fmt, ...) __attribute__((format (printf, 2, 3)));
  31 void packet_buf_write_len(struct strbuf *buf, const char *data, size_t len);
  32 int packet_flush_gently(int fd);
  33 int packet_write_fmt_gently(int fd, const char *fmt, ...) __attribute__((format (printf, 2, 3)));
  34 int write_packetized_from_fd(int fd_in, int fd_out);
  35 int write_packetized_from_buf(const char *src_in, size_t len, int fd_out);
  36
  37 /*
  38  * Read a packetized line into the buffer, which must be at least size bytes
  39  * long. The return value specifies the number of bytes read into the buffer.
  40  *
  41  * If src_buffer and *src_buffer are not NULL, it should point to a buffer
  42  * containing the packet data to parse, of at least *src_len bytes.  After the
  43  * function returns, src_buf will be incremented and src_len decremented by the
  44  * number of bytes consumed.
  45  *
  46  * If src_buffer (or *src_buffer) is NULL, then data is read from the
  47  * descriptor "fd".
  48  *
  49  * If options does not contain PACKET_READ_GENTLE_ON_EOF, we will die under any
  50  * of the following conditions:
  51  *
  52  *   1. Read error from descriptor.
  53  *
  54  *   2. Protocol error from the remote (e.g., bogus length characters).
  55  *
  56  *   3. Receiving a packet larger than "size" bytes.
  57  *
  58  *   4. Truncated output from the remote (e.g., we expected a packet but got
  59  *      EOF, or we got a partial packet followed by EOF).
  60  *
  61  * If options does contain PACKET_READ_GENTLE_ON_EOF, we will not die on
  62  * condition 4 (truncated input), but instead return -1. However, we will still
  63  * die for the other 3 conditions.
  64  *
  65  * If options contains PACKET_READ_CHOMP_NEWLINE, a trailing newline (if
  66  * present) is removed from the buffer before returning.
  67  *
  68  * If options contains PACKET_READ_DIE_ON_ERR_PACKET, it dies when it sees an
  69  * ERR packet.
  70  */
  71 #define PACKET_READ_GENTLE_ON_EOF     (1u<<0)
  72 #define PACKET_READ_CHOMP_NEWLINE     (1u<<1)
  73 #define PACKET_READ_DIE_ON_ERR_PACKET (1u<<2)
  74 int packet_read(int fd, char **src_buffer, size_t *src_len, char
  75                 *buffer, unsigned size, int options);
  76
  77 /*
  78  * Convert a four hex digit packet line length header into its numeric
  79  * representation.
  80  *
  81  * If lenbuf_hex contains non-hex characters, return -1. Otherwise, return the
  82  * numeric value of the length header.
  83  */
  84 int packet_length(const char lenbuf_hex[4]);
  85
  86 /*
  87  * Read a packetized line into a buffer like the 'packet_read()' function but
  88  * returns an 'enum packet_read_status' which indicates the status of the read.
  89  * The number of bytes read will be assigned to *pktlen if the status of the
  90  * read was 'PACKET_READ_NORMAL'.
  91  */
  92 enum packet_read_status {
  93         PACKET_READ_EOF,
  94         PACKET_READ_NORMAL,
  95         PACKET_READ_FLUSH,
  96         PACKET_READ_DELIM,
  97 };
  98 enum packet_read_status packet_read_with_status(int fd, char **src_buffer,
  99                                                 size_t *src_len, char *buffer,
 100                                                 unsigned size, int *pktlen,
 101                                                 int options);
 102
 103 /*
 104  * Convenience wrapper for packet_read that is not gentle, and sets the
 105  * CHOMP_NEWLINE option. The return value is NULL for a flush packet,
 106  * and otherwise points to a static buffer (that may be overwritten by
 107  * subsequent calls). If the size parameter is not NULL, the length of the
 108  * packet is written to it.
 109  */
 110 char *packet_read_line(int fd, int *size);
 111
 112 /*
 113  * Convenience wrapper for packet_read that sets the PACKET_READ_GENTLE_ON_EOF
 114  * and CHOMP_NEWLINE options. The return value specifies the number of bytes
 115  * read into the buffer or -1 on truncated input. If the *dst_line parameter
 116  * is not NULL it will return NULL for a flush packet or when the number of
 117  * bytes copied is zero and otherwise points to a static buffer (that may be
 118  * overwritten by subsequent calls). If the size parameter is not NULL, the
 119  * length of the packet is written to it.
 120  */
 121 int packet_read_line_gently(int fd, int *size, char **dst_line);
 122
 123 /*
 124  * Same as packet_read_line, but read from a buf rather than a descriptor;
 125  * see packet_read for details on how src_* is used.
 126  */
 127 char *packet_read_line_buf(char **src_buf, size_t *src_len, int *size);
 128
 129 /*
 130  * Reads a stream of variable sized packets until a flush packet is detected.
 131  */
 132 ssize_t read_packetized_to_strbuf(int fd_in, struct strbuf *sb_out);
 133
 134 /*
 135  * Receive multiplexed output stream over git native protocol.
 136  * in_stream is the input stream from the remote, which carries data
 137  * in pkt_line format with band designator.  Demultiplex it into out
 138  * and err and return error appropriately.  Band #1 carries the
 139  * primary payload.  Things coming over band #2 is not necessarily
 140  * error; they are usually informative message on the standard error
 141  * stream, aka "verbose").  A message over band #3 is a signal that
 142  * the remote died unexpectedly.  A flush() concludes the stream.
 143  *
 144  * Returns SIDEBAND_FLUSH upon a normal conclusion, and SIDEBAND_PROTOCOL_ERROR
 145  * or SIDEBAND_REMOTE_ERROR if an error occurred.
 146  */
 147 int recv_sideband(const char *me, int in_stream, int out);
 148
 149 struct packet_reader {
 150         /* source file descriptor */
 151         int fd;
 152
 153         /* source buffer and its size */
 154         char *src_buffer;
 155         size_t src_len;
 156
 157         /* buffer that pkt-lines are read into and its size */
 158         char *buffer;
 159         unsigned buffer_size;
 160
 161         /* options to be used during reads */
 162         int options;
 163
 164         /* status of the last read */
 165         enum packet_read_status status;
 166
 167         /* length of data read during the last read */
 168         int pktlen;
 169
 170         /* the last line read */
 171         const char *line;
 172
 173         /* indicates if a line has been peeked */
 174         int line_peeked;
 175
 176         unsigned use_sideband : 1;
 177         const char *me;
 178 };
 179
 180 /*
 181  * Initialize a 'struct packet_reader' object which is an
 182  * abstraction around the 'packet_read_with_status()' function.
 183  */
 184 void packet_reader_init(struct packet_reader *reader, int fd,
 185                         char *src_buffer, size_t src_len,
 186                         int options);
 187
 188 /*
 189  * Perform a packet read and return the status of the read.
 190  * The values of 'pktlen' and 'line' are updated based on the status of the
 191  * read as follows:
 192  *
 193  * PACKET_READ_ERROR: 'pktlen' is set to '-1' and 'line' is set to NULL
 194  * PACKET_READ_NORMAL: 'pktlen' is set to the number of bytes read
 195  *                     'line' is set to point at the read line
 196  * PACKET_READ_FLUSH: 'pktlen' is set to '0' and 'line' is set to NULL
 197  */
 198 enum packet_read_status packet_reader_read(struct packet_reader *reader);
 199
 200 /*
 201  * Peek the next packet line without consuming it and return the status.
 202  * The next call to 'packet_reader_read()' will perform a read of the same line
 203  * that was peeked, consuming the line.
 204  *
 205  * Peeking multiple times without calling 'packet_reader_read()' will return
 206  * the same result.
 207  */
 208 enum packet_read_status packet_reader_peek(struct packet_reader *reader);
 209
 210 #define DEFAULT_PACKET_MAX 1000
 211 #define LARGE_PACKET_MAX 65520
 212 #define LARGE_PACKET_DATA_MAX (LARGE_PACKET_MAX - 4)
 213 extern char packet_buffer[LARGE_PACKET_MAX];
 214
 215 struct packet_writer {
 216         int dest_fd;
 217         unsigned use_sideband : 1;
 218 };
 219
 220 void packet_writer_init(struct packet_writer *writer, int dest_fd);
 221
 222 /* These functions die upon failure. */
 223 __attribute__((format (printf, 2, 3)))
 224 void packet_writer_write(struct packet_writer *writer, const char *fmt, ...);
 225 __attribute__((format (printf, 2, 3)))
 226 void packet_writer_error(struct packet_writer *writer, const char *fmt, ...);
 227 void packet_writer_delim(struct packet_writer *writer);
 228 void packet_writer_flush(struct packet_writer *writer);
 229
 230 #endif