reinsert a few sprintf calls (I took lint a bit too literal)
[mplib] / src / texk / kpathsea / kpathsea.texi
1 \input texinfo
2 @setfilename kpathsea.info
3 @settitle Kpathsea: A library for path searching
4
5 @set version 3.5.6dev
6 @set month-year May 2008
7
8 @copying
9 This file documents the Kpathsea library for path searching.
10
11 Copyright @copyright{} 1996, 1997, 1998, 1999, 2000, 2001, 2002, 2003,
12 2004, 2005, 2007, 2008 Karl Berry & Olaf Weber.
13
14 Permission is granted to make and distribute verbatim copies of this
15 manual provided the copyright notice and this permission notice are
16 preserved on all copies.
17
18 @ignore
19 Permission is granted to process this file through TeX and print the
20 results, provided the printed document carries a copying permission
21 notice identical to this one except for the removal of this paragraph
22 (this paragraph not being relevant to the printed manual).
23 @end ignore
24
25 Permission is granted to copy and distribute modified versions of this
26 manual under the conditions for verbatim copying, provided that the
27 entire resulting derived work is distributed under the terms of a
28 permission notice identical to this one.
29
30 Permission is granted to copy and distribute translations of this manual
31 into another language, under the above conditions for modified versions,
32 except that this permission notice may be stated in a translation
33 approved by the Free Software Foundation.
34 @end copying
35
36 @c Define new indices for commands, filenames, and options.
37 @defcodeindex cm
38 @defcodeindex fl
39 @defcodeindex op
40
41 @c Put everything in one index (arbitrarily chosen to be the concept index).
42 @syncodeindex cm cp
43 @syncodeindex fl cp
44 @syncodeindex fn cp
45 @syncodeindex ky cp
46 @syncodeindex op cp
47 @syncodeindex pg cp
48 @syncodeindex tp cp
49 @syncodeindex vr cp
50
51 @dircategory TeX
52 @direntry
53 * Kpathsea: (kpathsea).                       File lookup along search paths.
54 * kpsewhich: (kpathsea)Invoking kpsewhich.    TeX file searching.
55 * mktexfmt: (kpathsea)mktex scripts.          Format (fmt/base/mem) generation.
56 * mktexlsr: (kpathsea)Filename database.      Update ls-R.
57 * mktexmf: (kpathsea)mktex scripts.           MF source generation.
58 * mktexpk: (kpathsea)mktex scripts.           PK bitmap generation.
59 * mktextex: (kpathsea)mktex scripts.          TeX source generation.
60 * mktextfm: (kpathsea)mktex scripts.          TeX font metric generation.
61 @end direntry
62
63
64 @titlepage
65 @title Kpathsea library
66 @subtitle for version @value{version}
67 @subtitle @value{month-year}
68 @author Karl Berry (@email{kb@@mail.tug.org})
69 @author Olaf Weber (@email{infovore@@xs4all.nl})
70
71 @page
72 @vskip 0pt plus 1filll
73 @insertcopying
74 @end titlepage
75
76
77 @contents
78
79
80 @ifnottex
81 @node Top
82 @top Kpathsea library
83
84 This manual documents how to install and use the Kpathsea library for
85 filename lookup.  It corresponds to version @value{version},
86 released in @value{month-year}.
87
88 @menu
89 * Introduction::                Overview.
90 * Installation::                Compilation, installation, and bug reporting.
91
92 * Path searching::              How filename lookups work.
93 * TeX support::                 Special support for TeX-related file lookups.
94
95 * Programming::                 How to use Kpathsea features in your program.
96
97 * Index::                       General index.
98 @end menu
99 @end ifnottex
100
101
102 @node Introduction
103 @chapter Introduction
104
105 @cindex introduction
106 @cindex fundamental purpose of Kpathsea
107
108 This manual corresponds to version @value{version} of the Kpathsea
109 library, released in @value{month-year}.
110
111 The library's fundamental purpose is to return a filename from a list of
112 directories specified by the user, similar to what shells do when
113 looking up program names to execute.
114
115 @cindex programs using the library
116 The following software, all of which we maintain, uses this library:
117
118 @itemize @bullet
119 @item Dviljk (see the @samp{dvilj} man page)
120 @item Dvipsk (@pxref{Top, , Introduction, dvips, Dvips: A DVI driver})
121 @item GNU font utilities (@pxref{Top, , Introduction, fontu, GNU font
122 utilities})
123 @item Web2c (@pxref{Top, , Introduction, web2c, Web2c: A @TeX{}
124 implementation})
125 @item Xdvik (see the @samp{xdvi} man page)
126 @end itemize
127
128 @noindent Other software that we do not maintain also uses it.
129
130 @cindex interface, not frozen
131 @cindex comments, making
132 @cindex suggestions, making
133 We are still actively maintaining the library (and probably always will
134 be, despite our hopes).  If you have comments or suggestions, please send
135 them to us (@pxref{Reporting bugs}).
136
137 @cindex conditions for use
138 @cindex license for using the library
139 @cindex GNU General Public License
140 We distribute the library under the GNU Library General Public License
141 (LGPL).  In short, this means if you write a program using the library,
142 you must (offer to) distribute the source to the library, along with any
143 changes you have made, and allow anyone to modify the library source and
144 distribute their modifications.  It does not mean you have to distribute
145 the source to your program, although we hope you will.  See the files
146 @file{GPL} and @file{LGPL} for the text of the GNU licenses.
147
148 @cindex @TeX{} Users Group
149 If you know enough about @TeX{} to be reading this manual, then you (or
150 your institution) should consider joining the @TeX{} Users Group (if
151 you're already a member, great!).  TUG produces the periodical
152 @cite{TUGboat}, sponsors an annual meeting and publishes the
153 proceedings, and arranges courses on @TeX{} for all levels of users
154 throughout the world.  Anyway, here is the address:
155
156 @flindex tug@@tug.org
157 @display
158 @TeX{} Users Group
159 P.O. Box 2311
160 Portland OR 97208-2311
161 USA
162 phone: +1 503 223-9994
163 fax:   +1 503 223-3960
164 email: @email{tug@@tug.org}
165 @end display
166
167 @menu
168 * History::
169 @end menu
170
171
172 @node History
173 @section History
174
175 @cindex history of Kpathsea
176
177 @cindex Knuth, Donald E.
178 (This section is for those people who are curious about how the library
179 came about.)  (If you like to read historical accounts of software, we
180 urge you to seek out the GNU Autoconf manual and the ``Errors of
181 @TeX{}'' paper by Don Knuth, published in @cite{Software---Practice and
182 Experience} 19(7), July 1989.)
183
184 @cindex Morgan, Tim
185 @cindex Rokicki, Tom
186 @cindex Berry, Karl
187 @cindex VAX 11/750
188 @cindex Sun 2
189 @pindex pxp @r{Pascal preprocessor}
190 @pindex pc @r{Pascal compiler}
191 [Karl writes.]  My first ChangeLog entry for Web2c seems to be February
192 1990, but I may have done some work before then.  In any case, Tim
193 Morgan and I were jointly maintaining it for a time.  (I should mention
194 here that Tim had made Web2c into a real distribution long before I had
195 ever used it or even heard of it, and Tom Rokicki did the original
196 implementation.  I was using @code{pxp} and @code{pc} on VAX 11/750's
197 and the hot new Sun 2 machines.)
198
199 It must have been later in 1990 and 1991 that I started working on
200 @cite{@TeX{} for the Impatient}. Dvips, Xdvi, Web2c, and the GNU
201 fontutils (which I was also writing at the time) all used different
202 environment variables, and, more importantly, had different bugs in
203 their path searching. This became extremely painful, as I was stressing
204 everything to the limit working on the book.  I also desperately wanted
205 to implement subdirectory searching, since I couldn't stand putting
206 everything in one big directory, and also couldn't stand having to
207 explicitly specify @file{cm}, @file{pandora}, @dots{} in a path.
208
209 @cindex Vojta, Paul
210 In the first incarnation, I just hacked separately on each
211 program---that was the original subdirectory searching code in both Xdvi
212 and Dvips, though I think Paul Vojta has completely rewritten Xdvi's
213 support by now.  That is, I tried to go with the flow in each program,
214 rather than changing the program's calling sequences to conform to
215 common routines.
216
217 Then, as bugs inevitably appeared, I found I was fixing the same thing
218 three times (Web2c and fontutils were always sharing code, since I
219 maintained those---there was no Dvipsk or Xdvik or Dviljk at this
220 point).  After a while, I finally started sharing source files.  They
221 weren't yet a library, though.  I just kept things up to date with shell
222 scripts.  (I was developing on a 386 running ISC 2.2 at the time, and so
223 didn't have symbolic links.  An awful experience.)
224
225 @cindex MacKenzie, David
226 The ChangeLogs for Xdvik and Dvipsk record initial releases of those
227 distributions in May and June 1992.  I think it was because I was tired
228 of the different configuration strategies of each program, not so much
229 because of the path searching.  (Autoconf was being developed by David
230 MacKenzie and others, and I was adapting it to @TeX{} and friends.)
231
232 @cindex zuhn, david
233 I started to make a separate library that other programs could link with
234 on my birthday in April 1993, according to the ChangeLog.  I don't
235 remember exactly why I finally took the time to make it a separate
236 library; a conversation with david zuhn that initiated it.  Just seemed
237 like it was time.
238
239 @cindex Walsh, Norman
240 @cindex Neumann, Gustaf
241 Dviljk got started in March 1994 after I bought a Laserjet 4.  (Kpathsea
242 work got suspended while Norm Walsh and I, with Gustaf Neumann's help,
243 implemented a way for @TeX{} to get at all those neat builtin LJ4 fonts
244 @dots{} such a treat to have something to typeset in besides Palatino!)
245
246 By spring of 1995, I had implemented just about all the path-searching
247 features in Kpathsea that I plan to, driven beyond my initial goals by
248 Thomas Esser and others.  I then started to integrate Web2c with
249 Kpathsea. After the release of a stable Web2c, I hope to be able to stop
250 development, and turn most of my attention back to making fonts for GNU.
251 (Always assuming Micros**t hasn't completely obliterated Unix by then,
252 or that software patents haven't stopped software development by anybody
253 smaller than a company with a million-dollar-a-year legal budget.  Which
254 is actually what I think is likely to happen, but that's another
255 story@dots{})
256
257 @cindex Weber, Olaf
258 [Olaf writes.]  At the end of 1997, UNIX is still alive and kicking,
259 individuals still develop software, and Web2c development still
260 continues.  Karl had been looking for some time for someone to take up
261 part of the burden, and I volunteered.
262
263
264 @include install.texi
265 @include hier.texi
266 @include unixtex.texi
267 @include bugs.texi
268
269
270 @node Path searching
271 @chapter Path searching
272
273 @cindex path searching
274
275 This chapter describes the generic path searching mechanism Kpathsea
276 provides.  For information about searching for particular file types
277 (e.g., @TeX{} fonts), see the next chapter.
278
279 @menu
280 * Searching overview::          Basic scheme for searching.
281 * Path sources::                Where search paths can be defined.
282 * Path expansion::              Special constructs in search paths.
283 * Filename database::           Using an externally-built list to search.
284 * Invoking kpsewhich::          Standalone path lookup.
285 @end menu
286
287
288 @node Searching overview
289 @section Searching overview
290
291 @cindex searching overview
292 @cindex path searching, overview
293 @cindex overview of path searching
294
295 @cindex search path, defined
296 A @dfn{search path} is a colon-separated list of @dfn{path elements},
297 which are directory names with a few extra frills.  A search path can
298 come from (a combination of) many sources; see below.  To look up a file
299 @samp{foo} along a path @samp{.:/dir}, Kpathsea checks each element of
300 the path in turn: first @file{./foo}, then @file{/dir/foo}, returning
301 the first match (or possibly all matches).
302
303 @cindex magic characters
304 @kindex : @r{may not be :}
305 @kindex / @r{may not be /}
306 The ``colon'' and ``slash'' mentioned here aren't necessarily @samp{:}
307 and @samp{/} on non-Unix systems.  Kpathsea tries to adapt to other
308 operating systems' conventions.
309
310 @cindex database search
311 @cindex searching the database
312 To check a particular path element @var{e}, Kpathsea first sees if a
313 prebuilt database (@pxref{Filename database}) applies to @var{e}, i.e.,
314 if the database is in a directory that is a prefix of @var{e}.  If so,
315 the path specification is matched against the contents of the database.
316
317 @cindex floating directories
318 @cindex filesystem search
319 @cindex disk search
320 @cindex searching the disk
321 If the database does not exist, or does not apply to this path element,
322 or contains no matches, the filesystem is searched (if this was not
323 forbidden by the specification with @samp{!!} and if the file being
324 searched for must exist).  Kpathsea constructs the list of directories
325 that correspond to this path element, and then checks in each for the
326 file being searched for.  (To help speed future lookups of files in the
327 same directory, the directory in which a file is found is floated to the
328 top of the directory list.)
329
330 @cindex must exist
331 @cindex VF files, not found
332 @flindex cmr10.vf
333 @findex \openin
334 The ``file must exist'' condition comes into play with VF files and
335 input files read by the @TeX{} @samp{\openin} command.  These files
336 might very well not exist (consider @file{cmr10.vf}), and so it would
337 be wrong to search the disk for them.  Therefore, if you fail to
338 update @file{ls-R} when you install a new VF file, it will not be
339 found.
340
341 Each path element is checked in turn: first the database, then the disk.
342 If a match is found, the search stops and the result is returned.  This
343 avoids possibly-expensive processing of path specifications that are
344 never needed on a particular run.  (Unless the search explicitly
345 requested all matches.)
346
347 @cindex expansion, path element
348 Although the simplest and most common path element is a directory name,
349 Kpathsea supports additional features in search paths: layered default
350 values, environment variable names, config file values, users' home
351 directories, and recursive subdirectory searching.  Thus, we say that
352 Kpathsea @dfn{expands} a path element, meaning transforming all the
353 magic specifications into the basic directory name or names.  This
354 process is described in the sections below.  It happens in the same
355 order as the sections.
356
357 @cindex absolute filenames
358 @cindex relative filenames
359 @cindex explicitly relative filenames
360 @cindex filenames, absolute or explicitly relative
361 Exception to all of the above: If the filename being searched for is
362 absolute or explicitly relative, i.e., starts with @samp{/} or @samp{./}
363 or @samp{../}, Kpathsea simply checks if that file exists.
364
365 @cindex permission denied
366 @cindex unreadable files
367 @cindex access warnings
368 @cindex warnings, file access
369 @flindex lost+found @r{directory}
370 @vindex TEX_HUSH
371 Ordinarily, if Kpathsea tries to access a file or directory that
372 cannot be read, it gives a warning.  This is so you will be alerted to
373 directories or files that accidentally lack any read permission (for
374 example, a @file{lost+found} directory).  If you prefer not to see
375 these warnings, include the value @samp{readable} in the
376 @code{TEX_HUSH} environment variable or config file value.
377
378 This generic path searching algorithm is implemented in
379 @file{kpathsea/pathsearch.c}.  It is employed by a higher-level
380 algorithm when searching for a file of a particular type (@pxref{File
381 lookup}, and @ref{Glyph lookup}).
382
383
384 @node Path sources
385 @section Path sources
386
387 @cindex path sources
388 @cindex sources for search paths
389
390 A search path can come from many sources.  In the order in which
391 Kpathsea uses them:
392
393 @enumerate
394 @item
395 @cindex environment variable, source for path
396 A user-set environment variable, e.g., @code{TEXINPUTS}.
397 Environment variables with an underscore and the program name appended
398 override; for example, @code{TEXINPUTS_latex} overrides @code{TEXINPUTS}
399 if the program being run is named @samp{latex}.
400
401 @item
402 A program-specific configuration file, e.g., an @samp{S /a:/b} line in
403 Dvips' @file{config.ps} (@pxref{Config files,,, dvips, Dvips}).
404
405 @item
406 @cindex configuration file, source for path
407 @cindex Kpathsea config file, source for path
408 @flindex texmf.cnf@r{, source for path}
409 A line in a Kpathsea configuration file @file{texmf.cnf}, e.g.,
410 @samp{TEXINPUTS=/c:/d} (see below).
411
412 @item
413 @cindex compilation value, source for path
414 The compile-time default (specified in @file{kpathsea/paths.h}).
415 @end enumerate
416
417 You can see each of these values for a given search path by using the
418 debugging options (@pxref{Debugging}).
419
420 These sources may be combined via default expansion (@pxref{Default
421 expansion}).
422
423 @menu
424 * Config files::        Kpathsea's runtime config files (texmf.cnf).
425 @end menu
426
427
428 @node Config files
429 @subsection Config files
430
431 @cindex config files
432 @flindex texmf.cnf@r{, definition for}
433
434 @cindex runtime configuration files
435 @vindex TEXMFCNF
436 As mentioned above, Kpathsea reads @dfn{runtime configuration files}
437 named @file{texmf.cnf} for search path and other definitions.  The
438 search path used to look for these configuration files is named
439 @code{TEXMFCNF}, and is constructed in the usual way, as described
440 above, except that configuration files cannot be used to define the
441 path, naturally; also, an @file{ls-R} database is not used to search for
442 them.
443
444 Kpathsea reads @emph{all} @file{texmf.cnf} files in the search path, not
445 just the first one found; definitions in earlier files override those in
446 later files.  Thus, if the search path is @samp{.:$TEXMF}, values from
447 @file{./texmf.cnf} override those from @file{$TEXMF/texmf.cnf}.
448
449 @vindex KPATHSEA_WARNING
450 @cindex warning, about missing @file{texmf.cnf}
451 @cindex @file{texmf.cnf} missing, warning about
452 If Kpathsea cannot find any @file{texmf.cnf} file, it reports a
453 warning including all the directories it checked.  If you don't want
454 to see this warning, set the environment variable
455 @env{KPATHSEA_WARNING} to the single character @samp{0} (zero, not
456 oh).
457
458 While (or instead of) reading this description, you may find it helpful
459 to look at the distributed @file{texmf.cnf}, which uses or at least
460 mentions most features.  The format of @file{texmf.cnf} files follows:
461
462 @itemize @bullet
463 @item
464 @cindex comments, in @file{texmf.cnf}
465 Comments start with @samp{%} and continue to the end of the line.
466
467 @item
468 @cindex blank lines, in @file{texmf.cnf}
469 Blank lines are ignored.
470
471 @item
472 @cindex backslash-newline
473 @cindex continuation character
474 @cindex whitespace, not ignored on continuation lines
475 @kindex \@r{, line continuation in @file{texmf.cnf}}
476 A @samp{\} at the end of a line acts as a continuation character, i.e.,
477 the next line is appended.  Whitespace at the beginning of continuation
478 lines is not ignored.
479
480 @item Each remaining line must look like
481
482 @example
483 @var{variable} @r{[}. @var{progname}@r{]} @r{[}=@r{]} @var{value}
484 @end example
485
486 @noindent where the @samp{=} and surrounding whitespace is optional.
487
488 @item 
489 @cindex identifiers, characters valid in
490 The @var{variable} name may contain any character other than whitespace,
491 @samp{=}, or @samp{.}, but sticking to @samp{A-Za-z_} is safest.
492
493 @item If @samp{.@var{progname}} is present, the definition only
494 applies if the program that is running is named (i.e., the last
495 component of @code{argv[0]} is) @var{progname} or
496 @file{@var{progname}.exe}.  This allows different flavors of @TeX{} to
497 have different search paths, for example.
498
499 @item 
500 @cindex right-hand side of variable assignments
501 @var{value} may contain any characters except @samp{%} and @samp{@@}.
502 (These restrictions are only necessary because of the processing done on
503 @file{texmf.cnf} at build time, so you can stick those characters in
504 after installation if you have to.)  The @samp{$@var{var}.@var{prog}}
505 feature is not available on the right-hand side; instead, you must use
506 an additional variable (see below for example).  A @samp{;} in
507 @var{value} is translated to @samp{:} if running under Unix; this is
508 useful to write a single @file{texmf.cnf} which can be used under both
509 Unix and NT.
510
511 @item All definitions are read before anything is expanded, so you can
512 use variables before they are defined (like Make, unlike most other
513 programs).
514 @end itemize
515
516 @noindent Here is a configuration file fragment illustrating most of
517 these points:
518
519 @example
520 % TeX input files -- i.e., anything to be found by \input or \openin ...
521 latex209_inputs = .:$TEXMF/tex/latex209//:$TEXMF/tex//
522 latex2e_inputs = .:$TEXMF/tex/latex//:$TEXMF/tex//
523 TEXINPUTS = .:$TEXMF/tex//
524 TEXINPUTS.latex209 = $latex209_inputs
525 TEXINPUTS.latex2e = $latex2e_inputs
526 TEXINPUTS.latex = $latex2e_inputs
527 @end example
528
529 @cindex shell scripts as configuration files
530 @cindex configuration files as shell scripts.
531 Although this format has obvious similarities to Bourne shell
532 scripts---change the comment character to @code{#}, disallow spaces
533 around the @code{=}, and get rid of the @code{.@var{name}} convention,
534 and it could be run through the shell.  But there seemed little
535 advantage to doing this, since all the information would have to passed
536 back to Kpathsea and parsed there anyway, since the @code{sh} process
537 couldn't affect its parent's environment.
538
539 @flindex cnf.c
540 The implementation of all this is in @file{kpathsea/cnf.c}.
541
542
543 @node Path expansion
544 @section Path expansion
545
546 @cindex path expansion
547 @cindex expansion, search path
548
549 Kpathsea recognizes certain special characters and constructions in
550 search paths, similar to that in shells.  As a general example:
551 @samp{~$USER/@{foo,bar@}//baz} expands to all subdirectories under
552 directories @file{foo} and @file{bar} in @t{$USER}'s home directory that
553 contain a directory or file @file{baz}.  These expansions are explained
554 in the sections below.
555
556 @menu
557 * Default expansion::           a: or :a or a::b expands to a default.
558 * Variable expansion::          $foo and $@{foo@} expand to environment values.
559 * Tilde expansion::             ~ and ~user expand to home directories.
560 * Brace expansion::             a@{foo,bar@}b expands to afoob abarb.
561 * KPSE_DOT expansion::          . is replaced with $KPSE_DOT if it is defined.
562 * Subdirectory expansion::      a// and a//b recursively expand to subdirs.
563 @end menu
564
565
566 @node Default expansion
567 @subsection Default expansion
568
569 @kindex :: @r{expansion}
570 @cindex doubled colons
571 @cindex leading colons
572 @cindex trailing colons
573 @cindex extra colons
574 @cindex default expansion
575 @cindex expansion, default
576
577 If the highest-priority search path (@pxref{Path sources}) contains an
578 @dfn{extra colon} (i.e., leading, trailing, or doubled), Kpathsea
579 inserts at that point the next-highest-priority search path that is
580 defined.  If that inserted path has an extra colon, the same happens
581 with the next-highest.  (An extra colon in the compile-time default
582 value has unpredictable results, so installers beware.)
583
584 For example, given an environment variable setting
585
586 @example
587 setenv TEXINPUTS /home/karl:
588 @end example
589
590 @noindent and a @code{TEXINPUTS} value from @file{texmf.cnf} of
591
592 @example
593 .:$TEXMF//tex
594 @end example
595
596 @noindent then the final value used for searching will be:
597
598 @example
599 /home/karl:.:$TEXMF//tex
600 @end example
601
602 Put another way, default expansion works on ``formats'' (search
603 paths), and not directly on environment variables.  Example, showing
604 the trailing @samp{:} ignored in the first case and expanded in the second:
605
606 @example
607 $ env TTFONTS=/tmp: kpsewhich --expand-path '$TTFONTS'
608 /tmp
609 $ env TTFONTS=/tmp: kpsewhich --show-path=.ttf
610 /tmp:.:/home/olaf/texmf/fonts/truetype//:...
611 @end example
612
613 Since Kpathsea looks for multiple configuration files, it would be
614 natural to expect that (for example) an extra colon in
615 @file{./texmf.cnf} would expand to the path in @file{$TEXMF/texmf.cnf}.
616 Or, with Dvips' configuration files, that an extra colon in
617 @file{config.$PRINTER} would expand to the path in @file{config.ps}.
618 This doesn't happen.  It's not clear this would be desirable in all
619 cases, and trying to devise a way to specify the path to which the extra
620 colon should expand seemed truly baroque.
621 @cindex Bach, Johann Sebastian
622
623 Technicality: Since it would be useless to insert the default value in
624 more than one place, Kpathsea changes only one extra @samp{:} and leaves
625 any others in place (they will eventually be ignored).  Kpathsea checks
626 first for a leading @samp{:}, then a trailing @samp{:}, then a doubled
627 @samp{:}.
628
629 @flindex kdefault.c
630 You can trace this by debugging ``paths'' (@pxref{Debugging}).
631 Default expansion is implemented in the source file
632 @file{kpathsea/kdefault.c}.
633
634
635 @node Variable expansion
636 @subsection Variable expansion
637
638 @kindex $ @r{expansion}
639 @cindex environment variables in paths
640 @cindex variable expansion
641 @cindex expansion, variable
642 @flindex texmf.cnf@r{, and variable expansion}
643
644 @samp{$foo} or @samp{$@{foo@}} in a path element is replaced by (1) the
645 value of an environment variable @samp{foo} (if defined); (2) the value
646 of @samp{foo} from @file{texmf.cnf} (if defined); (3) the empty string.
647
648 If the character after the @samp{$} is alphanumeric or @samp{_}, the
649 variable name consists of all consecutive such characters. If the
650 character after the @samp{$} is a @samp{@{}, the variable name consists
651 of everything up to the next @samp{@}} (braces may not be nested around
652 variable names).  Otherwise, Kpathsea gives a warning and ignores the
653 @samp{$} and its following character.
654
655 @cindex quoting variable values
656 @cindex shell variables
657 You must quote the @t{$}'s and braces as necessary for your shell.
658 @emph{Shell} variable values cannot be seen by Kpathsea, i.e., ones
659 defined by @code{set} in C shells and without @code{export} in Bourne
660 shells.
661
662 For example, given
663 @example
664 setenv tex /home/texmf
665 setenv TEXINPUTS .:$tex:$@{tex@}prev
666 @end example
667 @noindent the final @code{TEXINPUTS} path is the three directories:
668 @example
669 .:/home/texmf:/home/texmfprev
670 @end example
671
672 The @samp{.@var{progname}} suffix on variables and
673 @samp{_@var{progname}} on environment variable names are not implemented
674 for general variable expansions.  These are only recognized when search
675 paths are initialized (@pxref{Path sources}).
676
677 @flindex variable.c
678 Variable expansion is implemented in the source file
679 @file{kpathsea/variable.c}.
680
681
682 @node Tilde expansion
683 @subsection Tilde expansion
684
685 @kindex ~ @r{expansion}
686 @cindex home directories in paths
687 @cindex tilde expansion
688 @cindex expansion, tilde
689
690 @vindex HOME@r{, as ~ expansion}
691 @vindex USERPROFILE@r{, as ~ expansion}
692 A leading @samp{~} in a path element is replaced by the value of the
693 environment variable @code{HOME}, or @file{.} if @code{HOME} is not
694 set.  On Windows, the environment variable @code{USERPROFILE} is
695 checked instead of @code{HOME}.
696
697 A leading @samp{~@var{user}} in a path element is replaced by
698 @var{user}'s home directory from the system @file{passwd} database.
699
700 For example,
701 @example
702 setenv TEXINPUTS ~/mymacros:
703 @end example
704
705 @noindent will prepend a directory @file{mymacros} in your home
706 directory to the default path.
707
708 @cindex @t{root} user
709 @cindex trailing @samp{/} in home directory
710 @kindex /@r{, trailing in home directory}
711 As a special case, if a home directory ends in @samp{/}, the trailing
712 slash is dropped, to avoid inadvertently creating a @samp{//} construct
713 in the path.  For example, if the home directory of the user @samp{root}
714 is @samp{/}, the path element @samp{~root/mymacros} expands to just
715 @samp{/mymacros}, not @samp{//mymacros}.
716
717 @flindex tilde.c
718 Tilde expansion is implemented in the source file @file{kpathsea/tilde.c}.
719
720
721 @node Brace expansion
722 @subsection Brace expansion
723
724 @kindex @{ @r{expansion}
725 @cindex brace expansion
726
727 @samp{x@{@var{a},@var{b}@}y} expands to @samp{x@var{a}y:x@var{b}y}.
728 For example:
729
730 @example
731 foo/@{1,2@}/baz
732 @end example
733
734 @noindent expands to @samp{foo/1/baz:foo/2/baz}.  @samp{:} is the path
735 separator on the current system; e.g., on a DOS system, it's @samp{;}.
736
737 Braces can be nested; for example, @samp{x@{A,B@{1,2@}@}y} expands to
738 @samp{xAy:xB1y:xB2y}.
739
740 Multiple non-nested braces are expanded from right to left; for example,
741 @samp{x@{A,B@}@{1,2@}y} expands to @samp{x@{A,B@}1y:x@{A,B@}2y}, which
742 expands to @samp{xA1y:xB1y:xA2y:xB2y}.
743
744 @cindex multiple @TeX{} hierarchies
745 This feature can be used to implement multiple @TeX{} hierarchies, by
746 assigning a brace list to @code{$TEXMF}, as mentioned in
747 @file{texmf.in}.
748
749 You can also use the path separator in stead of the comma.  The last
750 example could have been written @samp{x@{A:B@}@{1:2@}y}.
751
752
753 @flindex expand.c
754 Brace expansion is implemented in the source file
755 @file{kpathsea/expand.c}.  It is a modification of the Bash sources, and
756 is thus covered by the GNU General Public License, rather than the
757 Library General Public License that covers the rest of Kpathsea.
758
759
760 @node KPSE_DOT expansion
761 @subsection @code{KPSE_DOT} expansion
762
763 @kindex KPSE_DOT @r{expansion}
764
765 When @code{KPSE_DOT} is defined in the environment, it names a directory
766 that should be considered the current directory for the purpose of
767 looking up files in the search paths.  This feature is needed by the
768 @samp{mktex@dots{}} scripts @ref{mktex scripts}, because these
769 change the working directory.  You should not ever define it yourself.
770
771
772 @node Subdirectory expansion
773 @subsection Subdirectory expansion
774
775 @kindex //
776 @cindex subdirectory searching
777 @cindex expansion, subdirectory
778
779 @cindex alphabetical order, not
780 Two or more consecutive slashes in a path element following a directory
781 @var{d} is replaced by all subdirectories of @var{d}: first those
782 subdirectories directly under @var{d}, then the subsubdirectories under
783 those, and so on.  At each level, the order in which the directories are
784 searched is unspecified.  (It's ``directory order'', and definitely not
785 alphabetical.)
786
787 If you specify any filename components after the @samp{//}, only
788 subdirectories which match those components are included.  For example,
789 @samp{/a//b} would expand into directories @file{/a/1/b}, @file{/a/2/b},
790 @file{/a/1/1/b}, and so on, but not @file{/a/b/c} or @file{/a/1}.
791
792 You can include multiple @samp{//} constructs in the path.
793
794 @samp{//} at the beginning of a path is ignored; you didn't really want
795 to search every directory on the system, did you?
796
797 @cindex trick for detecting leaf directories
798 @cindex leaf directory trick
799 @cindex Farwell, Matthew
800 @cindex MacKenzie, David
801 I should mention one related implementation trick, which I took from GNU
802 find.  Matthew Farwell suggested it, and David MacKenzie implemented it.
803
804 @vindex st_nlink
805 The trick is that in every real Unix implementation (as opposed to the
806 POSIX specification), a directory which contains no subdirectories will
807 have exactly two links (namely, one for @file{.} and one for @file{..}).
808 That is to say, the @code{st_nlink} field in the @samp{stat} structure
809 will be two.  Thus, we don't have to stat everything in the bottom-level
810 (leaf) directories---we can just check @code{st_nlink}, notice it's two,
811 and do no more work.
812
813 But if you have a directory that contains a single subdirectory and 500
814 regular files, @code{st_nlink} will be 3, and Kpathsea has to stat every
815 one of those 501 entries.  Therein lies slowness.
816
817 @vindex UNIX_ST_LINK
818 You can disable the trick by undefining @code{UNIX_ST_LINK} in
819 @file{kpathsea/config.h}. (It is undefined by default except under Unix.)
820
821 @flindex elt-dirs.c
822 Unfortunately, in some cases files in leaf directories are
823 @code{stat}'d: if the path specification is, say,
824 @samp{$TEXMF/fonts//pk//}, then files in a subdirectory
825 @samp{@dots{}/pk}, even if it is a leaf, are checked. The reason cannot
826 be explained without reference to the implementation, so read
827 @file{kpathsea/elt-dirs.c} (search for @samp{may descend}) if you are
828 curious.  And if you can find a way to @emph{solve} the problem, please
829 let me know.
830
831 @flindex elt-dirs.c
832 Subdirectory expansion is implemented in the source file
833 @file{kpathsea/elt-dirs.c}.
834
835
836 @node Filename database
837 @section Filename database (@code{ls-R})
838
839 @cindex filename database
840 @cindex database, for filenames
841 @cindex externally-built filename database
842
843 Kpathsea goes to some lengths to minimize disk accesses for searches
844 (@pxref{Subdirectory expansion}).  Nevertheless, in practice searching
845 each possible directory in typical @TeX{} installations takes an
846 excessively long time.
847
848 Therefore, Kpathsea can use an externally-built @dfn{filename
849 database} file named @file{ls-R} that maps files to directories, thus
850 avoiding the need to exhaustively search the disk.
851
852 A second database file @file{aliases} allows you to give additional
853 names to the files listed in @file{ls-R}.  This can be helpful to adapt
854 to ``8.3'' filename conventions in source files.
855
856 The @file{ls-R} and @file{aliases} features are implemented in the
857 source file @file{kpathsea/db.c}.
858
859 @menu
860 * ls-R::                        The main filename database.
861 * Filename aliases::            Aliases for those names.
862 * Database format::             Syntax details of the database file.
863 @end menu
864
865
866 @node ls-R
867 @subsection @file{ls-R}
868
869 @flindex ls-R @r{database file}
870 @vindex TEXMFDBS
871
872 As mentioned above, you must name the main filename database
873 @file{ls-R}.  You can put one at the root of each @TeX{} installation
874 hierarchy you wish to search (@code{$TEXMF} by default); most sites have
875 only one hierarchy.  Kpathsea looks for @file{ls-R} files along the
876 @code{TEXMFDBS} path, so that should presumably match the list of
877 hierarchies.
878
879 The recommended way to create and maintain @samp{ls-R} is to run the
880 @code{mktexlsr} script, which is installed in @samp{$(bindir)}
881 (@file{/usr/local/bin} by default).  That script goes to some trouble to
882 follow symbolic links as necessary, etc.  It's also invoked by the
883 distributed @samp{mktex@dots{}} scripts.
884
885 @flindex ls-R@r{, simplest build}
886 At its simplest, though, you can build @file{ls-R} with the command
887 @example
888 cd @var{/your/texmf/root} && ls -LAR ./ >ls-R
889 @end example
890
891 @noindent
892 @opindex --color=tty
893 @flindex /etc/profile @r{and aliases}
894 presuming your @code{ls} produces the right output format (see the
895 section below).  GNU @code{ls}, for example, outputs in this format.
896 Also presuming your @code{ls} hasn't been aliased in a system file
897 (e.g., @file{/etc/profile}) to something problematic, e.g., @samp{ls
898 --color=tty}.  In that case, you will have to disable the alias before
899 generating @file{ls-R}.  For the precise definition of the file format,
900 see @ref{Database format}.
901
902 Regardless of whether you use the supplied script or your own, you will
903 almost certainly want to invoke it via @code{cron}, so when you make
904 changes in the installed files (say if you install a new La@TeX{}
905 package), @file{ls-R} will be automatically updated.
906
907 @opindex -A @r{option to @code{ls}}
908 @cindex dot files
909 @flindex . @r{files}
910 @flindex . @r{directories, ignored}
911 @flindex .tex @r{file, included in @file{ls-R}}
912 The @samp{-A} option to @code{ls} includes files beginning with @samp{.}
913 (except for @file{.} and @file{..}), such as the file @file{.tex}
914 included with the La@TeX{} tools package.  (On the other hand,
915 @emph{directories} whose names begin with @samp{.} are always ignored.)
916
917 @cindex symbolic links, and @file{ls-R}
918 @opindex -L @r{option to @code{ls}}
919 If your system does not support symbolic links, omit the @samp{-L}.
920
921 @cindex automounter, and @file{ls-R}
922 @cindex NFS and @file{ls-R}
923 @code{ls -LAR @var{/your/texmf/root}} will also work.  But using
924 @samp{./} avoids embedding absolute pathnames, so the hierarchy can be
925 easily transported.  It also avoids possible trouble with automounters
926 or other network filesystem conventions.
927
928 @cindex warning about unusable @file{ls-R}
929 @cindex unusable @file{ls-R} warning
930 Kpathsea warns you if it finds an @file{ls-R} file, but the file does
931 not contain any usable entries.  The usual culprit is running plain
932 @samp{ls -R} instead of @samp{ls -LR ./} or @samp{ls -R
933 @var{/your/texmf/root}}.  Another possibility is some system directory
934 name starting with a @samp{.} (perhaps if you are using AFS); Kpathsea
935 ignores everything under such directories.
936
937 @kindex !! @r{in path specifications}
938 @cindex disk searching, avoiding
939 Because the database may be out-of-date for a particular run, if a file
940 is not found in the database, by default Kpathsea goes ahead and
941 searches the disk. If a particular path element begins with @samp{!!},
942 however, @emph{only} the database will be searched for that element,
943 never the disk.  If the database does not exist, nothing will be
944 searched.  Because this can surprise users (``I see the font
945 @file{foo.tfm} when I do an @code{ls}; why can't Dvips find it?''), it
946 is not in any of the default search paths.
947
948
949 @node Filename aliases
950 @subsection Filename aliases
951
952 @cindex filename aliases
953 @cindex aliases, for filenames
954
955 In some circumstances, you may wish to find a file under several names.
956 For example, suppose a @TeX{} document was created using a DOS system
957 and tries to read @file{longtabl.sty}.  But now it's being run on a Unix
958 system, and the file has its original name, @file{longtable.sty}.  The
959 file won't be found.  You need to give the actual file
960 @file{longtable.sty} an alias @samp{longtabl.sty}.
961
962 @c As another example, suppose you are creating a @TeX{} distribution on a
963 @c CD-ROM or a DOS system; then the file @file{mf.base} gets stored as
964 @c @file{mf.bas}.  But Metafont on Unix wants to find @file{mf.base}.  Here
965 @c you need to give the actual file @file{mf.bas} an alias @samp{mf.base}.
966
967 You can handle this by creating a file @file{aliases} as a companion to
968 the @file{ls-R} for the hierarchy containing the file in question.  (You
969 must have an @file{ls-R} for the alias feature to work.)
970
971 The format of @file{aliases} is simple: two whitespace-separated words
972 per line; the first is the real name @file{longtable.sty}, and second is
973 the alias (@file{longtabl.sty}).  These must be base filenames, with no
974 directory components.  @file{longtable.sty} must be in the sibling
975 @file{ls-R}.
976
977 Also, blank lines and lines starting with @samp{%} or @samp{#} are
978 ignored in @file{aliases}, to allow for comments.
979
980 If a real file @file{longtabl.sty} exists, it is used regardless of any
981 aliases.
982
983
984 @node Database format
985 @subsection Database format
986
987 @cindex format of external database
988 @cindex database, format of
989
990 The ``database'' read by Kpathsea is a line-oriented file of plain
991 text. The format is that generated by GNU (and most other) @code{ls}
992 programs given the @samp{-R} option, as follows.
993
994 @itemize @bullet
995 @item
996 Blank lines are ignored.
997
998 @item
999 If a line begins with @samp{/} or @samp{./} or @samp{../} and ends with
1000 a colon, it's the name of a directory.  (@samp{../} lines aren't useful,
1001 however, and should not be generated.)
1002
1003 @item
1004 All other lines define entries in the most recently seen directory.
1005 @t{/}'s in such lines will produce possibly-strange results.
1006
1007 @item
1008 Files with no preceding directory line are ignored.
1009 @end itemize
1010
1011 For example, here's the first few lines of @file{ls-R} (which totals
1012 about 30K bytes) on my system:
1013
1014 @example
1015 bibtex
1016 dvips
1017 fonts
1018 ls-R
1019 metafont
1020 metapost
1021 tex
1022 web2c
1023
1024 ./bibtex:
1025 bib
1026 bst
1027 doc
1028
1029 ./bibtex/bib:
1030 asi.bib
1031 btxdoc.bib
1032 @dots{}
1033 @end example
1034
1035
1036 @node Invoking kpsewhich
1037 @section @code{kpsewhich}: Standalone path searching
1038
1039 @pindex kpsewhich
1040 @cindex path searching, standalone
1041 @cindex standalone path searching
1042
1043 The Kpsewhich program exercises the path searching functionality
1044 independent of any particular application.  This can also be useful as a
1045 sort of @code{find} program to locate files in your @TeX{} hierarchies,
1046 perhaps in administrative scripts.  It is used heavily in the
1047 distributed @samp{mktex@dots{}} scripts.
1048
1049 Synopsis:
1050 @example
1051 kpsewhich @var{option}@dots{} @var{filename}@dots{}
1052 @end example
1053
1054 The options and filename(s) to look up can be intermixed.
1055 Options can start with either @samp{-} or @samp{--}, and any unambiguous
1056 abbreviation is accepted.
1057
1058 @menu
1059 * Path searching options::      Changing the mode, resolution, etc.
1060 * Specially-recognized files::  Default formats for texmf.cnf, etc.
1061 * Auxiliary tasks::             Path and variable expansion.
1062 * Standard options::            --help and --version.
1063 @end menu
1064
1065
1066 @node Path searching options
1067 @subsection Path searching options
1068
1069 @cindex path searching options
1070
1071 Kpsewhich looks up each non-option argument on the command line as a
1072 filename, and returns the first file found.
1073
1074 Various options alter the path searching behavior:
1075
1076 @table @samp
1077 @item --all
1078 @opindex --all
1079 @cindex all matches, finding
1080 Report all matches found, one per line.  By default, if there is more
1081 than one match, just one will be reported (chosen effectively at random).
1082
1083 @item --dpi=@var{num}
1084 @opindex --dpi=@var{num}
1085 @opindex -D @var{num}
1086 @cindex resolution, setting
1087 Set the resolution to @var{num}; this only affects @samp{gf} and
1088 @samp{pk} lookups.  @samp{-D} is a synonym, for compatibility with
1089 Dvips.  Default is 600.
1090
1091 @item --engine=@var{name}
1092 @opindex --engine=@var{name}
1093 @cindex engine name
1094 Set the engine name to @var{name}.  By default it is not set.  The
1095 engine name is used in some search paths to allow files with the same
1096 name but used by different engines to coexist.
1097
1098 @item --format=@var{name}
1099 @opindex --format=@var{name}
1100 Set the format for lookup to @var{name}.  By default, the format is
1101 guessed from the filename, with @samp{tex} being used if nothing else
1102 fits.  The recognized filename extensions (including any leading
1103 @samp{.}) are also allowable @var{name}s.
1104
1105 All formats also have a name, which is the only way to specify formats
1106 with no associated suffix.  For example, for Dvips configuration files
1107 you can use @samp{--format="dvips config"}.  (The quotes are for the
1108 sake of the shell.)
1109
1110 Here's the current list of recognized names and the associated suffixes.
1111 @xref{Supported file formats}, for more information on each of these.
1112 @example
1113 gf: gf
1114 pk: pk
1115 bitmap font
1116 afm: .afm
1117 base: .base
1118 bib: .bib
1119 bst: .bst
1120 cnf: .cnf
1121 ls-R: ls-R
1122 fmt: .fmt
1123 map: .map
1124 mem: .mem
1125 mf: .mf
1126 mfpool: .pool
1127 mft: .mft
1128 mp: .mp
1129 mppool: .pool
1130 MetaPost support
1131 ocp: .ocp
1132 ofm: .ofm .tfm
1133 opl: .opl
1134 otp: .otp
1135 ovf: .ovf
1136 ovp: .ovp
1137 graphic/figure: .eps .epsi
1138 tex: .tex
1139 TeX system documentation
1140 texpool: .pool
1141 TeX system sources
1142 PostScript header/font: .pro
1143 Troff fonts
1144 tfm: .tfm
1145 type1 fonts: .pfa .pfb
1146 vf: .vf
1147 dvips config
1148 ist: .ist
1149 truetype fonts: .ttf .ttc
1150 type42 fonts
1151 web2c files
1152 other text files
1153 other binary files
1154 misc fonts
1155 web: .web
1156 cweb: .w .web
1157 enc: .enc
1158 cmap: .cmap
1159 sfd: .sfd
1160 opentype fonts
1161 pdftex config
1162 lig files: .lig
1163 texmfscripts
1164 @end example
1165
1166 This option and @samp{--path} are mutually exclusive.
1167
1168 @item --interactive
1169 @opindex --interactive
1170 @cindex interactive query
1171 After processing the command line, read additional filenames to look up
1172 from standard input.
1173
1174 @item -mktex=@var{filetype}
1175 @itemx -no-mktex=@var{filetype}
1176 @opindex -mktex=@var{filetype}
1177 @opindex -no-mktex=@var{filetype}
1178 Turn on or off the @samp{mktex} script associated with @var{filetype}.
1179 The only values that make sense for @var{filetype} are @samp{pk},
1180 @samp{mf}, @samp{tex}, and @samp{tfm}. By default, all are off in
1181 Kpsewhich.  @xref{mktex scripts}.
1182
1183 @item --mode=@var{string}
1184 @opindex --mode=@var{string}
1185 Set the mode name to @var{string}; this also only affects @samp{gf} and
1186 @samp{pk} lookups.  No default: any mode will be found.  @xref{mktex
1187 script arguments}.
1188
1189 @item --must-exist
1190 @opindex --must-exist
1191 Do everything possible to find the files, notably including searching
1192 the disk.  By default, only the @file{ls-R} database is checked, in the
1193 interest of efficiency.
1194
1195 @item --path=@var{string}
1196 @opindex --path=@var{string}
1197 Search along the path @var{string} (colon-separated as usual), instead
1198 of guessing the search path from the filename.  @samp{//} and all the
1199 usual expansions are supported (@pxref{Path expansion}).  This option
1200 and @samp{--format} are mutually exclusive.  To output the complete
1201 directory expansion of a path, instead of doing a one-shot lookup, see
1202 @samp{--expand-path} and @samp{--show-path} in the following section.
1203
1204 @item --progname=@var{name}
1205 @opindex --progname=@var{name}
1206 Set the program name to @var{name}; default is @samp{kpsewhich}.  This
1207 can affect the search paths via the @samp{.@var{prognam}} feature in
1208 configuration files (@pxref{Config files}).
1209
1210 @item --subdir=@var{string}
1211 @opindex --subdir=@var{string}
1212 Report only those matches whose directory part @emph{ends} with
1213 @var{string} (compared literally, except case is ignored on a
1214 case-insensitive operating system).  For example, suppose there are
1215 two matches for a given name:
1216
1217 @example
1218 kpsewhich foo.sty
1219 @result{} /some/where/foo.sty
1220 /another/place/foo.sty
1221 @end example
1222
1223 @noindent
1224 Then we can narrow the result to what we are interested in with
1225 @option{--subdir}:
1226
1227 @example
1228 kpsewhich --subdir=where foo.sty
1229 @result{} /some/where/foo.sty
1230
1231 kpsewhich --subdir=place foo.sty
1232 @result{} /another/place/foo.sty
1233 @end example
1234
1235 @noindent
1236 The string to match must be at the end of the directory part of the
1237 match, and it is taken literally, with no pattern matching:
1238
1239 @example
1240 kpsewhich --subdir=another foo.sty
1241 @result{}
1242 @end example
1243
1244 @noindent
1245 The string to match may cross directory components:
1246
1247 @example
1248 kpsewhich --subdir=some/where foo.sty
1249 @result{} /some/where/foo.sty
1250 @end example
1251
1252 @noindent
1253 @option{--subdir} implies @option{--all}; if there is more than one
1254 match, they will all be reported (in our example, both @samp{where}
1255 and @samp{place} end in @samp{e}):
1256
1257 @example
1258 kpsewhich --subdir=e
1259 @result{} /some/where/foo.sty
1260 /another/place/foo.sty
1261 @end example
1262
1263 @noindent
1264 Because of the above rules, the presence of a leading @samp{/} is
1265 important, since it ``anchors'' the match to a full component name:
1266
1267 @example
1268 kpsewhich --subdir=/lace foo.sty
1269 @result{} 
1270 @end example
1271
1272 @noindent
1273 However, a trailing @samp{/} is immaterial (and ignored), since the
1274 match always takes place at the end of the directory part:
1275
1276 @example
1277 kpsewhich --subdir=lace/ foo.sty
1278 @result{} /another/place/foo.sty
1279 @end example
1280
1281 @noindent
1282 The purpose of these rules is to make it convenient to find results
1283 only within a particular area of the tree.  For instance, a given
1284 script named @file{foo.lua} might exist within both
1285 @file{texmf-dist/scripts/pkg1/} and @file{texmf-dist/scripts/pkg2/}.
1286 By specifying, say, @samp{--subdir=/pkg1}, you can be sure of getting
1287 the one you are interested in.
1288
1289 We only match at the end because a site might happen to install @TeX{}
1290 in @file{/some/coincidental/pkg1/path/}, and we wouldn't want
1291 @file{texmf-dist/scripts/pkg2/} to match that when searching for
1292 @samp{/pkg1}.
1293
1294 @end table
1295
1296
1297 @node Specially-recognized files
1298 @subsection Specially-recognized files for @command{kpsewhich}
1299
1300 @command{kpsewhich} recognizes a few special filenames on the command
1301 line and defaults to using the `known' file formats for them, merely
1302 to save the time and trouble of specifying the format.  This is only a
1303 feature of @command{kpsewhich}; when using the Kpathsea library
1304 itself, none of these special filenames are recognized, and it's still
1305 up to the caller to specify the desired format.
1306
1307 Here is the list of special filenames to @command{kpsewhich}, along
1308 with their corresponding format:
1309
1310 @table @file
1311
1312 @flindex config.ps
1313 @item config.ps
1314 @code{dvips config}
1315
1316 @flindex dvipdfmx.cfg
1317 @item dvipdfmx.cfg
1318 @samp{other text files}
1319
1320 @flindex fmtutil.cnf
1321 @item fmtutil.cnf
1322 @samp{web2c files}
1323
1324 @flindex glyphlist.txt
1325 @item glyphlist.txt
1326 @samp{map}
1327
1328 @flindex mktex.cnf
1329 @item mktex.cnf
1330 @samp{web2c files}
1331
1332 @flindex pdfglyphlist.txt
1333 @item pdfglyphlist.txt
1334 @samp{map}
1335
1336 @flindex pdftex.cfg
1337 @flindex pdftexconfig.tex
1338 @item pdftex.cfg
1339 @samp{pdftex config} (although @file{pdftex.cfg} is not used any more;
1340 look for the file @file{pdftexconfig.tex} instead.)
1341
1342 @flindex texmf.cnf
1343 @item texmf.cnf
1344 @samp{cnf}
1345
1346 @end table
1347
1348 A user-specified format will override the above defaults.
1349
1350 @flindex tcfmgr.map
1351 Another useful configuration file in this regard is @file{tcfmgr.map},
1352 found in @file{texmf/texconfig/tcfmgr.map}, which records various
1353 information about the above configuration files (among others).
1354
1355
1356 @node Auxiliary tasks
1357 @subsection Auxiliary tasks
1358
1359 @cindex auxiliary tasks
1360
1361 Kpsewhich provides some additional features not strictly related to path
1362 lookup:
1363
1364 @itemize @bullet
1365 @item
1366 @opindex --debug=@var{num}
1367 @samp{--debug=@var{num}} sets the debugging options to @var{num}.
1368 @xref{Debugging}.
1369
1370 @item
1371 @opindex --var-value=@var{variable}
1372 @samp{--var-value=@var{variable}} outputs the value of @var{variable},
1373 expanding @samp{$} (@pxref{Variable expansion} and @samp{~} (@pxref{Tilde
1374 expansion}) constructs, but not performing other expansions.
1375
1376 @item
1377 @opindex --expand-braces=@var{string}
1378 @samp{--expand-braces=@var{string}} outputs the variable and brace
1379 expansion of @var{string}.  @xref{Path expansion}.
1380
1381 @item
1382 @opindex --expand-var=@var{string}
1383 @samp{--expand-var=@var{string}} outputs the variable and tilde
1384 expansion of @var{string}.  For example, the @samp{mktex@dots{}}
1385 scripts run @samp{kpsewhich --expand-var='$TEXMF'} to find the root of
1386 the @TeX{} system hierarchy.  @xref{Path expansion}.
1387
1388 @item
1389 @opindex --expand-path=@var{string}
1390 @samp{--expand-path=@var{string}} outputs the complete expansion of
1391 @var{string}, with each element separated by the usual path separator
1392 on the current system (@samp{;} on Windows, @samp{:} otherwise).
1393 This may be useful to construct a custom search path for a format not
1394 otherwise supported.  To retrieve the search path for a format that is
1395 already supported, see @samp{--show-path}, next.
1396
1397 Nonexistent directories are culled from the output:
1398
1399 @example
1400 $ kpsewhich --expand-path '/tmp'
1401 @result{} /tmp
1402 $ kpsewhich --expand-path '/nonesuch'
1403 @result{}
1404 @end example
1405
1406 For one-shot uses of an arbitrary (not built in to Kpathsea) path, see
1407 @samp{--path} in the previous section.
1408
1409 @item
1410 @opindex --show-path=@var{name}
1411 @samp{--show-path=@var{name}} shows the path that would be used for file
1412 lookups of file type @var{name}.  Either a filename extension
1413 (@samp{pk}, @samp{.vf}, etc.) or an integer can be used, just as with
1414 @samp{--format}, described in the previous section.
1415
1416 @end itemize
1417
1418
1419 @node Standard options
1420 @subsection Standard options
1421
1422 @cindex standard options
1423
1424 Kpsewhich accepts the standard GNU options:
1425
1426 @itemize @bullet
1427 @item
1428 @opindex --help
1429 @samp{--help} prints a help message on standard output and exits.
1430
1431 @item
1432 @opindex --version
1433 @samp{--version} prints the Kpathsea version number and exits.
1434 @end itemize
1435
1436
1437 @node TeX support
1438 @chapter @TeX{} support
1439
1440 @cindex @TeX{} support
1441
1442 Although the basic features in Kpathsea can be used for any type of path
1443 searching, it came about (like all libraries) with a specific
1444 application in mind: I wrote Kpathsea specifically for @TeX{} system
1445 programs.  I had been struggling with the programs I was using (Dvips,
1446 Xdvi, and @TeX{} itself) having slightly different notions of how to
1447 specify paths; and debugging was painful, since no code was shared.
1448
1449 Therefore, Kpathsea provides some @TeX{}-specific formats and features.
1450 Indeed, many of the supposedly generic path searching features were
1451 provided because they seemed useful in that con@TeX{}t (font lookup,
1452 particularly).
1453
1454 Kpathsea provides a standard way to search for files of any of the
1455 supported file types; glyph fonts are a bit different than all the rest.
1456 Searches are based solely on filenames, not file contents---if a GF
1457 file is named @file{cmr10.600pk}, it will be found as a PK file.
1458
1459 @menu
1460 * Supported file formats::      File types Kpathsea knows about.
1461 * File lookup::                 Searching for most kinds of files.
1462 * Glyph lookup::                Searching for bitmap fonts.
1463 * Suppressing warnings::        Avoiding warnings via TEX_HUSH.
1464 @end menu
1465
1466
1467 @node Supported file formats
1468 @section Supported file formats
1469
1470 @cindex supported file formats
1471 @cindex file formats, supported
1472
1473 @cindex environment variables for @TeX{}
1474 @cindex @TeX{} environment variables
1475
1476 Kpathsea has support for a number of file types.  Each file type has a
1477 list of environment and config file variables that are checked to define
1478 the search path, and most have a default suffix that plays a role in
1479 finding files (see the next section).  Some also define additional
1480 suffixes, and/or a program to be run to create missing files on the fly.
1481
1482 @cindex program-varying paths
1483 Since environment variables containing periods, such as
1484 @samp{TEXINPUTS.latex}, are not allowed on some systems, Kpathsea looks
1485 for environment variables with an underscore, e.g.,
1486 @samp{TEXINPUTS_latex} (@pxref{Config files}).
1487
1488 The following table lists the above information.
1489
1490 @table @samp
1491 @item afm
1492 @flindex .afm
1493 @vindex AFMFONTS
1494 (Adobe font metrics, @pxref{Metric files,,, dvips, Dvips})
1495 @code{AFMFONTS};
1496 suffix @samp{.afm}.
1497
1498 @item base
1499 @flindex .base
1500 @vindex MFBASES
1501 @vindex TEXMFINI
1502 (Metafont memory dump, @pxref{Memory dumps,,, web2c, Web2c})
1503 @code{MFBASES}, @code{TEXMFINI};
1504 suffix @samp{.base}.
1505
1506 @item bib
1507 @flindex .bib
1508 @vindex BIBINPUTS
1509 @vindex TEXBIB
1510 (Bib@TeX{} bibliography source, @pxref{bibtex invocation,,, web2c, Web2c})
1511 @code{BIBINPUTS}, @code{TEXBIB};
1512 suffix @samp{.bib}.
1513
1514 @item bst
1515 @flindex .bst
1516 @vindex BSTINPUTS
1517 (Bib@TeX{} style file, @pxref{Basic BibTeX style files,, Basic Bib@TeX{}
1518 style files, web2c, Web2c})
1519 @code{BSTINPUTS};
1520 suffix @samp{.bst}.
1521
1522 @item cmap
1523 @flindex .cmap
1524 @vindex CMAPFONTS
1525 (character map files)
1526 @code{CMAPFONTS};
1527 suffix @samp{.cmap}.
1528
1529 @item cnf
1530 @flindex .cnf
1531 @vindex TEXMFCNF
1532 (Runtime configuration files, @pxref{Config files})
1533 @code{TEXMFCNF};
1534 suffix @samp{.cnf}.
1535
1536 @item cweb
1537 @flindex .w
1538 @flindex .web
1539 @vindex CWEBINPUTS
1540 (CWEB input files)
1541 @code{CWEBINPUTS};
1542 suffixes @samp{.w}, @samp{.web};
1543 additional suffix @samp{.ch}.
1544
1545 @item dvips config
1546 @vindex TEXCONFIG
1547 @flindex config.ps@r{, search path for}
1548 (Dvips @samp{config.*} files, such as @file{config.ps}, @pxref{Config
1549 files,,, dvips, Dvips})
1550 @code{TEXCONFIG}.
1551
1552 @item enc files
1553 @flindex .enc
1554 @vindex ENCFONTS
1555 (encoding vectors)
1556 @code{ENCFONTS};
1557 suffix @samp{.enc}.
1558
1559 @item fmt
1560 @flindex .fmt
1561 @vindex TEXFORMATS
1562 @vindex TEXMFINI
1563 (@TeX{} memory dump, @pxref{Memory dumps,,, web2c, Web2c})
1564 @code{TEXFORMATS}, @code{TEXMFINI};
1565 suffix @samp{.fmt}.
1566
1567 @item gf
1568 @flindex gf
1569 @vindex GFFONTS
1570 @vindex GLYPHFONTS
1571 @vindex TEXFONTS
1572 (generic font bitmap, @pxref{Glyph files,,, dvips, Dvips})
1573 @code{@var{program}FONTS}, @code{GFFONTS}, @code{GLYPHFONTS}, @code{TEXFONTS};
1574 suffix @samp{gf}.
1575
1576 @item graphic/figure
1577 @flindex .eps
1578 @flindex .epsi
1579 @vindex TEXPICTS
1580 @vindex TEXINPUTS
1581 (Encapsulated PostScript figures, @pxref{PostScript figures,,, dvips, Dvips})
1582 @code{TEXPICTS}, @code{TEXINPUTS};
1583 additional suffixes: @samp{.eps}, @samp{.epsi}.
1584
1585 @item ist
1586 @flindex .ist
1587 @vindex TEXINDEXSTYLE
1588 @vindex INDEXSTYLE
1589 (makeindex style files)
1590 @code{TEXINDEXSTYLE}, @code{INDEXSTYLE};
1591 suffix @samp{.ist}.
1592
1593 @item lig files
1594 @flindex .lig
1595 @vindex LIGFONTS
1596 (ligature definition files)
1597 @code{LIGFONTS};
1598 suffix @samp{.lig}.
1599
1600 @item ls-R
1601 @flindex ls-R
1602 @vindex TEXMFDBS
1603 (Filename databases, @pxref{Filename database})
1604 @code{TEXMFDBS}.
1605
1606 @item map
1607 @flindex .map
1608 @vindex TEXFONTMAPS
1609 (Fontmaps, @pxref{Fontmap})
1610 @code{TEXFONTMAPS};
1611 suffix @samp{.map}.
1612
1613 @item mem
1614 @flindex .mem
1615 @vindex MPMEMS
1616 @vindex TEXMFINI
1617 (MetaPost memory dump, @pxref{Memory dumps,,, web2c, Web2c})
1618 @code{MPMEMS}, @code{TEXMFINI};
1619 suffix @samp{.mem}.
1620
1621 @item @r{MetaPost support}
1622 @vindex MPSUPPORT
1623 (MetaPost support files, used by DMP; @pxref{dmp invocation,,, web2c, Web2c}) 
1624 @code{MPSUPPORT}.
1625
1626 @item mf
1627 @flindex .mf
1628 @vindex MFINPUTS
1629 (Metafont source, @pxref{mf invocation,,, web2c, Web2c})
1630 @code{MFINPUTS};
1631 suffix @samp{.mf};
1632 dynamic creation program: @code{mktexmf}.
1633
1634 @item mfpool
1635 @flindex .pool
1636 @vindex MFPOOL
1637 (Metafont program strings, @pxref{pooltype invocation,,, web2c, Web2c})
1638 @code{MFPOOL}, @code{TEXMFINI};
1639 suffix @samp{.pool}.
1640
1641 @item mft
1642 @flindex .mft
1643 @vindex MFTINPUTS
1644 (@code{MFT} style file, @pxref{mft invocation,,, web2c, Web2c})
1645 @code{MFTINPUTS};
1646 suffix @samp{.mft}.
1647
1648 @item misc fonts
1649 @vindex MISCFONTS
1650 (font-related files that don't fit the other categories)
1651 @code{MISCFONTS}
1652
1653 @item mp
1654 @flindex .mp
1655 @vindex MPINPUTS
1656 (MetaPost source, @pxref{mpost invocation,,, web2c, Web2c})
1657 @code{MPINPUTS};
1658 suffix @samp{.mp}.
1659
1660 @item mppool
1661 @flindex .pool
1662 @vindex MPPOOL
1663 (MetaPost program strings, @pxref{pooltype invocation,,, web2c, Web2c})
1664 @code{MPPOOL}, @code{TEXMFINI};
1665 suffix @samp{.pool}.
1666
1667 @item ocp
1668 @flindex .ocp
1669 @vindex OCPINPUTS
1670 (Omega compiled process files)
1671 @code{OCPINPUTS}; @*
1672 suffix @samp{.ocp};
1673 dynamic creation program: @code{MakeOmegaOCP}.
1674
1675 @item ofm
1676 @flindex .ofm
1677 @vindex OFMFONTS
1678 (Omega font metrics)
1679 @code{OFMFONTS}, @code{TEXFONTS}; @*
1680 suffixes @samp{.ofm}, @samp{.tfm};
1681 dynamic creation program: @code{MakeOmegaOFM}.
1682
1683 @item opentype fonts
1684 @vindex OPENTYPEFONTS
1685 (OpenType fonts)
1686 @code{OPENTYPEFONTS}.
1687
1688 @item opl
1689 @flindex .opl
1690 (Omega property lists)
1691 @code{OPLFONTS}, @code{TEXFONTS};
1692 suffix @samp{.opl}.
1693
1694 @item otp
1695 @flindex .otp
1696 @vindex OTPINPUTS
1697 (Omega translation process files)
1698 @code{OTPINPUTS};
1699 suffix @samp{.otp}.
1700
1701 @item ovf
1702 @flindex .ovf
1703 @vindex OVFFONTS
1704 (Omega virtual fonts)
1705 @code{OVFFONTS}, @code{TEXFONTS};
1706 suffix @samp{.ovf}.
1707
1708 @item ovp
1709 @flindex .ovp
1710 @vindex OVPFONTS
1711 (Omega virtual property lists)
1712 @code{OVPFONTS}, @code{TEXFONTS};
1713 suffix @samp{.ovp}.
1714
1715 @item pdftex config
1716 @vindex PDFTEXCONFIG
1717 (PDF@TeX{}-specific configuration files)
1718 @code{PDFTEXCONFIG}.
1719
1720 @item pk
1721 @flindex .pk
1722 @vindex PKFONTS
1723 @vindex TEXPKS
1724 @vindex GLYPHFONTS
1725 @vindex TEXFONTS
1726 (packed bitmap fonts, @pxref{Glyph files,,, dvips, Dvips})
1727 @code{@var{PROGRAM}FONTS} (@var{program} being @samp{XDVI}, etc.),
1728 @code{PKFONTS}, @code{TEXPKS}, @code{GLYPHFONTS}, @code{TEXFONTS};
1729 suffix @samp{pk};
1730 dynamic creation program: @code{mktexpk}.
1731
1732 @item PostScript header
1733 @flindex .pro
1734 @vindex TEXPSHEADERS
1735 @vindex PSHEADERS
1736 (downloadable PostScript, @pxref{Header files,,, dvips, Dvips})
1737 @code{TEXPSHEADERS}, @code{PSHEADERS};
1738 additional suffix @samp{.pro}.
1739
1740 @item subfont definition files
1741 @flindex .sfd
1742 @vindex SFDFONTS
1743 (subfont definition files)
1744 @code{SFDFONTS}
1745 suffix @samp{.sfd}.
1746
1747 @item tex
1748 @flindex .tex
1749 @vindex TEXINPUTS
1750 (@TeX{} source, @pxref{tex invocation,,, web2c, Web2c})
1751 @code{TEXINPUTS};
1752 suffix @samp{.tex};
1753 additional suffixes: none, because such a list cannot be complete;
1754 dynamic creation program: @code{mktextex}.
1755
1756 @item TeX system documentation
1757 @flindex doc files
1758 @vindex TEXDOCS
1759 (Documentation files for the @TeX{} system)
1760 @code{TEXDOCS}.
1761
1762 @item TeX system sources
1763 @flindex source files
1764 @vindex TEXSOURCES
1765 (Source files for the @TeX{} system)
1766 @code{TEXSOURCES}.
1767
1768 @item texmfscripts
1769 @vindex TEXMFSCRIPTS
1770 (Architecture-independent executables distributed in the texmf tree)
1771 @code{TEXMFSCRIPTS}.
1772
1773 @item texpool
1774 @flindex .pool
1775 @vindex TEXPOOL
1776 (@TeX{} program strings, @pxref{pooltype invocation,,, web2c, Web2c})
1777 @code{TEXPOOL}, @code{TEXMFINI};
1778 suffix @samp{.pool}.
1779
1780 @item tfm
1781 @flindex .tfm
1782 @vindex TFMFONTS
1783 @vindex TEXFONTS
1784 (@TeX{} font metrics, @pxref{Metric files,,, dvips, Dvips})
1785 @code{TFMFONTS}, @code{TEXFONTS};
1786 suffix @samp{.tfm};
1787 dynamic creation program: @code{mktextfm}.
1788
1789 @item Troff fonts
1790 @vindex TRFONTS
1791 (Troff fonts, used by DMP; @pxref{DMP invocation,,, web2c, Web2c}) 
1792 @code{TRFONTS}.
1793
1794 @item truetype fonts
1795 @flindex .ttf
1796 @flindex .ttc
1797 @vindex TTFONTS
1798 (TrueType outline fonts) @code{TTFONTS}; suffixes @samp{.ttf},
1799 @samp{.ttc}.
1800
1801 @item type1 fonts
1802 @flindex .pfa
1803 @flindex .pfb
1804 @vindex T1FONTS
1805 @vindex T1INPUTS
1806 @vindex TEXPSHEADERS
1807 @vindex DVIPSHEADERS
1808 (Type 1 PostScript outline fonts, @pxref{Glyph files,,, dvips, Dvips})
1809 @code{T1FONTS}, @code{T1INPUTS}, @code{TEXPSHEADERS}, @code{DVIPSHEADERS};
1810 suffixes @samp{.pfa}, @samp{.pfb}.
1811
1812 @item type42 fonts
1813 @vindex T42FONTS
1814 (Type 42 PostScript outline fonts) @code{T42FONTS}.
1815
1816 @item vf
1817 @flindex .vf
1818 @vindex VFFONTS
1819 @vindex TEXFONTS
1820 (virtual fonts, @pxref{Virtual fonts,,, dvips, Dvips})
1821 @code{VFFONTS}, @code{TEXFONTS};
1822 suffix @samp{.vf}.
1823
1824 @item web
1825 @flindex .web
1826 @vindex WEBINPUTS
1827 (WEB input files)
1828 @code{WEBINPUTS};
1829 suffix @samp{.web};
1830 additional suffix @samp{.ch}.
1831
1832 @item web2c files
1833 @vindex WEB2C
1834 (files specific to the web2c implementation)
1835 @code{WEB2C}.
1836 @end table
1837
1838 There are two special cases, because the paths and environment variables
1839 always depend on the name of the program: the variable name is
1840 constructed by converting the program name to upper case, and then
1841 appending @samp{INPUTS}.  Assuming the program is called @samp{foo},
1842 this gives us the following table.
1843
1844 @table @samp
1845 @item other text files
1846 @vindex FOOINPUTS
1847 (text files used by @samp{foo})
1848 @code{FOOINPUTS}.
1849
1850 @item other binary files
1851 @vindex FOOINPUTS
1852 (binary files used by @samp{foo})
1853 @code{FOOINPUTS}.
1854 @end table
1855
1856 If an environment variable by these names are set, the corresponding
1857 @file{texmf.cnf} definition won't be looked at (unless, as usual, the
1858 environment variable value has an extra @samp{:}).  @xref{Default
1859 expansion}.
1860
1861 For the font variables, the intent is that:
1862 @itemize @bullet
1863 @item
1864 @code{TEXFONTS} is the default for everything.
1865
1866 @item
1867 @code{GLYPHFONTS} is the default for bitmap (or, more precisely,
1868 non-metric) files.
1869
1870 @item
1871 Each font format has a variable of its own.
1872
1873 @item
1874 @vindex XDVIFONTS
1875 @vindex DVIPSFONTS
1876 Each program has its own font override path as well; e.g.,
1877 @code{DVIPSFONTS} for Dvipsk.  Again, this is for bitmaps, not metrics.
1878
1879 @end itemize
1880
1881
1882 @node File lookup
1883 @section File lookup
1884
1885 @cindex file lookup
1886 @cindex searching for files
1887 @cindex @TeX{} file lookup
1888
1889 This section describes how Kpathsea searches for most files (bitmap font
1890 searches are the exception, as described in the next section).
1891
1892 Here is the search strategy for a file @var{name}:
1893
1894 @enumerate
1895 @item
1896 If the file format defines default suffixes, and the suffix of
1897 @var{name} name is not already a known suffix for that format, try the
1898 name with each default appended, and use alternative names found in
1899 the fontmaps if necessary.  Example: given @samp{foo.bar}, look for
1900 @samp{foo.bar.tex}.
1901
1902 @item
1903 Search for @var{name}, and if necessary for alternative names found in
1904 the fontmaps.  Example: given @samp{foo.bar}, we also look for
1905 @samp{foo.bar}.
1906
1907 @item
1908 If the file format defines a program to invoke to create missing files,
1909 run it (@pxref{mktex scripts}).
1910 @end enumerate
1911
1912 @cindex extensions, filename
1913 @cindex suffixes, filename
1914 @vindex try_std_extension_first
1915 The order in which we search for ``suffixed'' name (item@tie{}1) or
1916 the ``as-is'' name (item@tie{}2) is controlled by the
1917 @file{try_std_extension_first} configuration value.  The default set
1918 in @file{texmf.cnf} is true, since common suffixes are already
1919 recognized: @samp{babel.sty} will only look for @samp{babel.sty}, not
1920 @samp{babel.sty.tex}, regardless of this setting.
1921
1922 When the suffix is unknown (e.g., @samp{foo.bar}), both names are
1923 always tried; the difference is the order in which they are tried.
1924
1925 @file{try_std_extension_first} only affects names being looked up
1926 which *already* have an extension.  A name without an extension (e.g.,
1927 @samp{tex story}) will always have an extension added first.
1928
1929 @flindex tex-file.c
1930 @findex kpse_find_file
1931 This algorithm is implemented in the routine @code{kpse_find_file} in
1932 @file{kpathsea/tex-file.c}.  You can watch it in action with the
1933 debugging options (@pxref{Debugging}).
1934
1935
1936 @node Glyph lookup
1937 @section Glyph lookup
1938
1939 @cindex glyph lookup
1940 @cindex searching for glyphs
1941 @cindex @TeX{} glyph lookup
1942
1943 This section describes how Kpathsea searches for a bitmap font in GF or
1944 PK format (or either) given a font name (e.g., @samp{cmr10}) and a
1945 resolution (e.g., 600).
1946
1947 Here is an outline of the search strategy (details in the sections
1948 below) for a file @var{name} at resolution @var{dpi}.  The search stops
1949 at the first successful lookup.
1950
1951 @enumerate
1952 @item
1953 Look for an existing file @var{name}.@var{dpi}@var{format} in the
1954 specified format(s).
1955
1956 @item If @var{name} is an alias for a file @var{f} in the fontmap
1957 file @file{texfonts.map}, look for @var{f}.@var{dpi}.
1958
1959 @item Run an external program (typically named @samp{mktexpk}) to
1960 generate the font (@pxref{mktex scripts})
1961
1962 @item Look for @var{fallback}.@var{dpi}, where @var{fallback} is some
1963 last-resort font (typically @samp{cmr10}).
1964 @end enumerate
1965
1966 @flindex tex-glyph.c
1967 @findex kpse_find_glyph_format
1968 This is implemented in @code{kpse_find_glyph_format} in
1969 @file{kpathsea/tex-glyph.c}.
1970
1971 @menu
1972 * Basic glyph lookup::          Features common to all glyph lookups.
1973 * Fontmap::                     Aliases for fonts.
1974 * Fallback font::               Resolutions and fonts of last resort.
1975 @end menu
1976
1977
1978 @node Basic glyph lookup
1979 @subsection Basic glyph lookup
1980
1981 @cindex basic glyph lookup
1982 @cindex common features in glyph lookup
1983
1984 When Kpathsea looks for a bitmap font @var{name} at resolution @var{dpi}
1985 in a format @var{format}, it first checks each directory in the search
1986 path for a file @samp{@var{name}.@var{dpi}@var{format}}; for example,
1987 @samp{cmr10.600pk}.  Kpathsea looks for a PK file first, then a GF file.
1988
1989 If that fails, Kpathsea looks for
1990 @samp{dpi@var{dpi}/@var{name}.@var{format}}; for example,
1991 @samp{dpi600/cmr10.pk}. This is how fonts are typically stored on
1992 filesystems (such as DOS) that permit only three-character extensions.
1993
1994 @cindex tolerance for glyph lookup
1995 @cindex glyph lookup bitmap tolerance
1996 @findex KPSE_BITMAP_TOLERANCE
1997 If that fails, Kpathsea looks for a font with a close-enough @var{dpi}.
1998 ``Close enough'' is defined by the macro @code{KPSE_BITMAP_TOLERANCE} in
1999 @file{kpathsea/tex-glyph.h} to be @code{@var{dpi} / 500 + 1}.  This is
2000 slightly more than the 0.2% minimum allowed by the DVI standard
2001 (@url{@var{CTAN:}/dviware/driv-standard/level-0}).
2002
2003
2004 @node Fontmap
2005 @subsection Fontmap
2006
2007 @cindex fontmap files
2008 @cindex font alias files
2009 @cindex aliases for fonts
2010
2011 @flindex texfonts.map
2012 If a bitmap font or metric file is not found with the original name (see
2013 the previous section), Kpathsea looks through any @dfn{fontmap} files
2014 for an @dfn{alias} for the original font name.  These files are named
2015 @file{texfonts.map} and searched for along the @code{TEXFONTMAPS}
2016 environment/config file variable.  All @file{texfonts.map} files that
2017 are found are read; earlier definitions override later ones.
2018
2019 This feature is intended to help in two respects:
2020
2021 @enumerate
2022
2023 @item
2024 @cindex fontnames, arbitrary length
2025 An alias name is limited in length only by available memory, not by your
2026 filesystem.  Therefore, if you want to ask for @samp{Times-Roman}
2027 instead of @file{ptmr}, you can (you get @samp{ptmr8r}).
2028
2029 @item
2030 @cindex circle fonts
2031 @flindex lcircle10
2032 A few fonts have historically had multiple names: specifically,
2033 La@TeX{}'s ``circle font'' has variously been known as @file{circle10},
2034 @file{lcircle10}, and @file{lcirc10}.  Aliases can make all the names
2035 equivalent, so that it no longer matters what the name of the installed
2036 file is; @TeX{} documents will find their favorite name.
2037
2038 @end enumerate
2039
2040 The format of fontmap files is straightforward:
2041
2042 @itemize @bullet
2043 @cindex comments, in fontmap files
2044 @item Comments start with @samp{%} and continue to the end of the line.
2045 @cindex whitespace, in fontmap files
2046 @item Blank lines are ignored.
2047 @item Each nonblank line is broken up into a series of @dfn{words}:
2048   a sequence of non-whitespace characters.
2049 @findex include @r{fontmap directive}
2050 @item If the first word is @samp{include}, the second word is used as
2051   a filename, and it is searched for and read.
2052 @item Otherwise, the first word on each line is the true filename;
2053 @item the second word is the alias;
2054 @item subsequent words are ignored.
2055 @end itemize
2056
2057 If an alias has an extension, it matches only those files with that
2058 extension; otherwise, it matches anything with the same root, regardless
2059 of extension.  For example, an alias @samp{foo.tfm} matches only when
2060 @file{foo.tfm} is being searched for; but an alias @samp{foo} matches
2061 @file{foo.vf}, @file{foo.600pk}, etc.
2062
2063 As an example, here is an excerpt from the @file{texfonts.map} in the
2064 Web2c distribution.  It makes the circle fonts equivalent and includes
2065 automatically generated maps for most PostScript fonts available from
2066 various font suppliers.
2067
2068 @example
2069 circle10        lcircle10
2070 circle10        lcirc10
2071 lcircle10       circle10
2072 lcircle10       lcirc10
2073 lcirc10         circle10
2074 lcirc10         lcircle10
2075 @dots{}
2076 include adobe.map
2077 include apple.map
2078 include bitstrea.map
2079 @dots{}
2080 @end example
2081
2082 Fontmaps are implemented in the file @file{kpathsea/fontmap.c}.
2083 The Fontname distribution has much more information on font naming
2084 (@pxref{Introduction,,, fontname, Filenames for @TeX{} fonts}).
2085
2086
2087 @node Fallback font
2088 @subsection Fallback font
2089
2090 @cindex fallback font
2091 @cindex fallback resolutions
2092 @cindex font of last resort
2093 @cindex resolutions, last-resort
2094 @cindex last-resort font
2095
2096 @vindex DVIPSSIZES
2097 @vindex XDVISIZES
2098 @vindex DVILJSIZES
2099 @vindex TEXSIZES
2100 @vindex default_texsizes
2101 If a bitmap font cannot be found or created at the requested size,
2102 Kpathsea looks for the font at a set of @dfn{fallback resolutions}.  You
2103 specify these resolutions as a colon-separated list (like search paths).
2104 Kpathsea looks first for a program-specific environment variable (e.g.,
2105 @code{DVIPSSIZES} for Dvipsk), then the environment variable
2106 @code{TEXSIZES}, then a default specified at compilation time (the Make
2107 variable @code{default_texsizes}).  You can set this list to be empty if
2108 you prefer to find fonts at their stated size or not at all.
2109
2110 @flindex cmr10@r{, as fallback font}
2111 @vindex kpse_fallback_font
2112 Finally, if the font cannot be found even at the fallback resolutions,
2113 Kpathsea looks for a fallback font, typically @file{cmr10}.  Programs
2114 must enable this feature by assigning to the global variable
2115 @code{kpse_fallback_font} or calling @code{kpse_init_prog}
2116 (@pxref{Calling sequence}); the default is no fallback font.
2117
2118
2119 @node Suppressing warnings
2120 @section Suppressing warnings
2121
2122 @cindex warnings, suppressing
2123 @cindex suppressing warnings
2124
2125 @vindex TEX_HUSH
2126 Kpathsea provides a way to suppress selected usually-harmless warnings;
2127 this is useful at large sites where most users are not administrators,
2128 and thus the warnings are merely a source of confusion, not a help.  To
2129 do this, you set the environment variable or configuration file value
2130 @code{TEX_HUSH} to a colon-separated list of values.  Here are the
2131 possibilities:
2132
2133 @vtable @samp
2134 @item all
2135 Suppress everything possible.
2136
2137 @item checksum
2138 @cindex mismatched checksum warnings
2139 Suppress mismatched font checksum warnings.
2140
2141 @item lostchar
2142 @cindex missing character warnings
2143 Suppress warnings when a character is missing from a font that a DVI or
2144 VF file tries to typeset.
2145
2146 @item none
2147 Don't suppress any warnings.
2148
2149 @item readable
2150 @cindex unreadable file warnings
2151 Suppress warnings about attempts to access a file whose permissions
2152 render it unreadable.
2153
2154 @item special
2155 @cindex unknown special warnings
2156 @findex \special@r{, suppressing warnings about}
2157 Suppresses warnings about an unimplemented or unparsable
2158 @samp{\special} command.
2159 @end vtable
2160
2161 @noindent @file{tex-hush.c} defines the function that checks the
2162 variable value.  Each driver implements its own checks where
2163 appropriate.
2164
2165
2166 @node Programming
2167 @chapter Programming
2168
2169 This chapter is for programmers who wish to use Kpathsea.
2170 @xref{Introduction}, for the conditions under which you may do so.
2171
2172 @menu
2173 * Overview: Programming overview.         Introduction.
2174 * Calling sequence::                      Specifics of what to call.
2175 * Program-specific files::                How to handle these.
2176 * Config: Programming with config files.  Getting info from texmf.cnf.
2177 @end menu
2178
2179
2180 @node Programming overview
2181 @section Programming overview
2182
2183 @cindex programming overview
2184 @cindex overview of programming with Kpathsea
2185
2186 Aside from this manual, your best source of information is the source to
2187 the programs I've modified to use Kpathsea (@pxref{Introduction}).  Of
2188 those, Dviljk is probably the simplest, and hence a good place to start.
2189 Xdvik adds VF support and the complication of X resources.  Dvipsk adds
2190 the complication of its own config files.  Web2c is source code I also
2191 maintain, so it uses Kpathsea rather straightforwardly, but is of course
2192 complicated by the Web to C translation.  Finally, Kpsewhich is a small
2193 utility program whose sole purpose is to exercise the main
2194 path-searching functionality.
2195
2196 @flindex pathsearch.h
2197 @flindex tex-file.h
2198 @flindex tex-glyph.h
2199 @flindex kpathsea.h
2200 Beyond these examples, the @file{.h} files in the Kpathsea source
2201 describe the interfaces and functionality (and of course the @file{.c}
2202 files define the actual routines, which are the ultimate documentation).
2203 @file{pathsearch.h} declares the basic searching routine.
2204 @file{tex-file.h} and @file{tex-glyph.h} define the interfaces for
2205 looking up particular kinds of files.  In view of the way the headers
2206 depend on each other, it is recommended to use @code{#include
2207 <kpathsea/kpathsea.h>}, which includes every Kpathsea header.
2208
2209 @flindex config.h
2210 @flindex c-auto.h
2211 If you want to include only specific headers, you should still consider
2212 including @file{kpathsea/config.h} before including any other Kpathsea
2213 header, as it provides symbols used in the other headers.  Note that
2214 @file{kpathsea/config.h} includes @file{kpathsea/c-auto.h}, which is
2215 generated by Autoconf.
2216
2217 @cindex file types, registering new
2218 The library provides no way for an external program to register new file
2219 types: @file{tex-file.[ch]} must be modified to do this. For example,
2220 Kpathsea has support for looking up Dvips config files, even though no
2221 program other than Dvips will likely ever want to do so.  I felt this
2222 was acceptable, since along with new file types should also come new
2223 defaults in @file{texmf.cnf} (and its descendant @file{paths.h}), since
2224 it's simplest for users if they can modify one configuration file for
2225 all kinds of paths.
2226
2227 Kpathsea does not parse any formats itself; it barely opens any files.
2228 Its primary purpose is to return filenames.  The GNU font utilities does
2229 contain libraries to read TFM, GF, and PK files, as do the programs
2230 above, of course.
2231
2232
2233 @node Calling sequence
2234 @section Calling sequence
2235
2236 @cindex programming with Kpathsea
2237 @cindex calling sequence
2238
2239 The typical way to use Kpathsea in your program goes something like this:
2240
2241 @enumerate
2242
2243 @item
2244 @findex kpse_set_program_name
2245 @vindex argv[0]
2246 Call @code{kpse_set_program_name} with @code{argv[0]} as the first
2247 argument; the second argument is a string or @code{NULL}.  The second
2248 argument is used by Kpathsea as the program name for the
2249 @code{.@var{program}} feature of config files (@pxref{Config files}).
2250 If the second argument is @code{NULL}, the value of the first argument
2251 is used.  This function must be called before any other use of the
2252 Kpathsea library.
2253
2254 @vindex program_invocation_name
2255 @vindex program_invocation_short_name
2256 @vindex kpse_program_name
2257 @vindex KPATHSEA_DEBUG
2258 @cindex SELFAUTOLOC
2259 @cindex SELFAUTODIR
2260 @cindex SELFAUTOPARENT
2261 @cindex error message macros
2262 @cindex symlinks, resolving
2263 @cindex expanding symlinks
2264 If necessary, @code{kpse_set_program_name} sets the global variables
2265 @code{program_invocation_name} and @code{program_invocation_short_name}.
2266 These variables are used in the error message macros defined in
2267 @file{kpathsea/lib.h}.  It sets the global variable
2268 @code{kpse_program_name} to the program name it uses.  It also
2269 initializes debugging options based on the environment variable
2270 @code{KPATHSEA_DEBUG} (if that is set).  Finally, it sets the variables
2271 @code{SELFAUTOLOC}, @code{SELFAUTODIR} and @code{SELFAUTOPARENT} to the
2272 location, parent and grandparent directory of the executable, removing
2273 @file{.} and @file{..} path elements and resolving symbolic links.
2274 These are used in the default configuration file to allow people to
2275 invoke TeX from anywhere, specifically from a mounted CD-ROM.  (You can
2276 use @samp{--expand-var=\$SELFAUTOLOC}, etc., to see the values finds.)
2277
2278 @item
2279 @findex kpse_set_progname
2280 @vindex argv[0]
2281 The @code{kpse_set_progname} is deprecated.  A call to
2282 @code{kpse_set_progname} with @code{argv[0]} is equivalent to a call of
2283 @code{kpse_set_program_name} with first argument @code{argv[0]} and
2284 second argument @code{NULL}.  The function is deprecated because it
2285 cannot ensure that the @code{.@var{program}} feature of config files
2286 will always work (@pxref{Config files}).
2287
2288 @item
2289 @vindex kpathsea_debug @r{variable}
2290 @cindex debugging options, in Kpathsea-using program
2291 Set debugging options. @xref{Debugging}.  If your program doesn't have a
2292 debugging option already, you can define one and set
2293 @code{kpathsea_debug} to the number that the user supplies (as in Dviljk
2294 and Web2c), or you can just omit this altogether (people can always set
2295 @code{KPATHSEA_DEBUG}).  If you do have runtime debugging already, you
2296 need to merge Kpathsea's options with yours (as in Dvipsk and Xdvik).
2297
2298 @item
2299 @vindex client_path @r{in @code{kpse_format_info}}
2300 @vindex kpse_format_info
2301 @flindex resident.c
2302 @cindex config files, for Kpathsea-using programs
2303 If your program has its own configuration files that can define search
2304 paths, you should assign those paths to the @code{client_path} member in
2305 the appropriate element of the @code{kpse_format_info} array.  (This
2306 array is indexed by file type; see @file{tex-file.h}.)  See
2307 @file{resident.c} in Dvipsk for an example.
2308
2309 @item
2310 @findex kpse_init_prog
2311 @flindex proginit.h
2312 Call @code{kpse_init_prog} (see @file{proginit.c}). It's useful for the
2313 DVI drivers, at least, but for other programs it may be simpler to
2314 extract the parts of it that actually apply.  This does not initialize
2315 any paths, it just looks for (and sets) certain environment variables
2316 and other random information.  (A search path is always initialized at
2317 the first call to find a file of that type; this eliminates much useless
2318 work, e.g., initializing the Bib@TeX{} search paths in a DVI driver.)
2319
2320 @item
2321 @findex kpse_find_*
2322 @findex kpse_find_file
2323 The routine to actually find a file of type @var{format} is
2324 @code{kpse_find_@var{format}}, defined in @file{tex-file.h}. These are
2325 macros that expand to a call to @file{kpse_find_file}.  You can call,
2326 say, @code{kpse_find_tfm} after doing only the first of the
2327 initialization steps above---Kpathsea automatically reads the
2328 @file{texmf.cnf} generic config files, looks for environment variables,
2329 and does expansions at the first lookup.
2330
2331 @item
2332 To find PK and/or GF bitmap fonts, the routines are @code{kpse_find_pk},
2333 @code{kpse_find_gf} and @code{kpse_find_glyph}, defined in
2334 @file{tex-glyph.h}. These return a structure in addition to the
2335 resultant filename, because fonts can be found in so many ways. See the
2336 documentation in the source.
2337
2338 @item
2339 @findex kpse_open_file
2340 To actually open a file, not just return a filename, call
2341 @code{kpse_open_file}.  This function takes the name to look up and a
2342 Kpathsea file format as arguments, and returns the usual @code{FILE *}.
2343 It always assumes the file must exist, and thus will search the disk if
2344 necessary (unless the search path specified @samp{!!}, etc.).  In other
2345 words, if you are looking up a VF or some other file that need not
2346 exist, don't use this.
2347
2348 @end enumerate
2349
2350 @cindex hash table routines
2351 @cindex memory allocation routines
2352 @cindex string routines
2353 @cindex reading arbitrary-length lines
2354 @cindex input lines, reading
2355 @cindex lines, reading arbitrary-length
2356 Kpathsea also provides many utility routines. Some are generic: hash
2357 tables, memory allocation, string concatenation and copying, string
2358 lists, reading input lines of arbitrary length, etc. Others are
2359 filename-related: default path, tilde, and variable expansion,
2360 @code{stat} calls, etc. (Perhaps someday I'll move the former to a
2361 separate library.)
2362
2363 @flindex c-*.h
2364 @pindex autoconf@r{, recommended}
2365 The @file{c-*.h} header files can also help your program adapt to many
2366 different systems.  You will almost certainly want to use Autoconf for
2367 configuring your software if you use Kpathsea; I strongly recommend
2368 using Autoconf regardless.  It is available from
2369 @url{ftp://prep.ai.mit.edu/pub/gnu/}.
2370
2371
2372 @node Program-specific files
2373 @section Program-specific files
2374
2375 Many programs will need to find some configuration files.  Kpathsea
2376 contains some support to make it easy to place them in their own
2377 directories.  The Standard @TeX{} directory structure (@pxref{Top,,
2378 Introduction, tds, A Directory Structure for @TeX{} files}), specifies
2379 that such files should go into a subdirectory named after the program,
2380 like @samp{texmf/ttf2pk}.
2381
2382 Two special formats, @samp{kpse_program_text_format} and
2383 @samp{kpse_program_binary_format} exist, which use
2384 @code{.:$TEXMF/@var{program}//} as their compiled-in search path.  To
2385 override this default, you can use the variable
2386 @code{@var{PROGRAM}INPUTS} in the environment and/or @samp{texmf.cnf}.
2387 That is to say, the name of the variable is constructed by converting
2388 the name of the program to upper case, and appending @code{INPUTS}.
2389
2390 The only difference between these two formats is whether
2391 @code{kpse_open_file} will open the files it finds in text or binary
2392 mode.
2393
2394
2395 @node Programming with config files
2396 @section Programming with config files
2397
2398 @cindex programming with config files
2399 @cindex config files, programming with
2400
2401 You can (and probably should) use the same @code{texmf.cnf}
2402 configuration file that Kpathsea uses for your program.  This helps
2403 installers by keeping all configuration in one place.
2404
2405 @findex kpse_var_value
2406 @flindex variable.h
2407 @vindex shell_escape@r{, example for code}
2408 To retrieve a value @var{var} from config files, the best way is to call
2409 @code{kpse_var_value} on the string @code{@var{var}}.  This will look
2410 first for an environment variable @var{var}, then a config file value.
2411 The result will be the value found or @samp{NULL}.  This function is
2412 declared in @file{kpathsea/variable.h}.  For an example, see the
2413 @code{shell_escape} code in @file{web2c/lib/texmfmp.c}.
2414
2415 The routine to do variable expansion in the context of a search path (as
2416 opposed to simply retrieving a value) is @code{kpse_var_expand}, also
2417 declared in @file{kpathsea/variable.h}.  It's generally only necessary
2418 to set the search path structure components as explained in the previous
2419 section, rather than using this yourself.
2420
2421 @findex kpse_cnf_get
2422 @flindex cnf.h
2423 If for some reason you want to retrieve a value @emph{only} from a
2424 config file, not automatically looking for a corresponding environment
2425 variable, call @code{kpse_cnf_get} (declared in @file{kpathsea/cnf.h})
2426 with the string @var{var}.
2427
2428 No initialization calls are needed.
2429
2430
2431 @node Index
2432 @unnumbered Index
2433
2434 @printindex cp
2435
2436 @bye