Allow hooks to add sorting functions to pagespec_match_list
[ikiwiki] / doc / plugins / write.mdwn
1 Ikiwiki's plugin interface allows all kinds of useful [[plugins]] to be
2 written to extend ikiwiki in many ways. Despite the length of this page,
3 it's not really hard. This page is a complete reference to everything a
4 plugin might want to do. There is also a quick [[tutorial]].
5
6 [[!template id="note" text="""
7 Ikiwiki is a compiler
8
9 One thing to keep in mind when writing a plugin is that ikiwiki is a wiki
10 *compiler*. So plugins influence pages when they are built, not when they
11 are loaded. A plugin that inserts the current time into a page, for
12 example, will insert the build time.
13
14 Also, as a compiler, ikiwiki avoids rebuilding pages unless they have
15 changed, so a plugin that prints some random or changing thing on a page
16 will generate a static page that won't change until ikiwiki rebuilds the
17 page for some other reason, like the page being edited.
18
19 The [[tutorial]] has some other examples of ways that ikiwiki being a
20 compiler may trip up the unwary.
21 """]]
22
23 [[!toc levels=2]]
24
25 ## Highlevel view of ikiwiki
26
27 Ikiwiki mostly has two modes of operation. It can either be running
28 as a compiler, building or updating a wiki; or as a cgi program, providing
29 user interface for editing pages, etc. Almost everything ikiwiki does
30 is accomplished by calling various hooks provided by plugins.
31
32 ### compiler
33
34 As a compiler, ikiwiki starts by calling the `refresh` hook. Then it checks
35 the wiki's source to find new or changed pages. The `needsbuild` hook is
36 then called to allow manipulation of the list of pages that need to be
37 built. 
38
39 Now that it knows what pages it needs to build, ikiwiki runs two
40 compile passes. First, it runs `scan` hooks, which collect metadata about
41 the pages. Then it runs a page rendering pipeline, by calling in turn these
42 hooks: `filter`, `preprocess`, `linkify`, `htmlize`, `postscan`,
43 `pagetemplate`, `sanitize`, `format`.
44
45 After all necessary pages are built, it calls the `change` hook. Finally,
46 if a page is was deleted, the `delete` hook is called, and the files that
47 page had previously produced are removed.
48
49 ### cgi
50
51 The flow between hooks when ikiwiki is run as a cgi is best illustrated by
52 an example.
53
54 Alice browses to a page and clicks Edit.
55
56 * Ikiwiki is run as a cgi. It assigns Alice a session cookie, and,
57   by calling the `auth` hooks, sees that she is not yet logged in.
58 * The `sessioncgi` hooks are then called, and one of them,
59   from the [[editpage]] plugin, notices that the cgi has been told "do=edit".
60 * The [[editpage]] plugin calls the `canedit` hook to check if this
61   page edit is allowed. The [[signinedit]] plugin has a hook that says not:
62   Alice is not signed in.
63 * The [[signinedit]] plugin then launches the signin process. A signin
64   page is built by calling the `formbuilder_setup` hook.
65
66 Alice signs in with her openid.
67
68 * The [[openid]] plugin's `formbuilder` hook sees that an openid was
69   entered in the signin form, and redirects to Alice's openid provider.
70 * Alice's openid provider calls back to ikiwiki. The [[openid]] plugin
71   has an `auth` hook that finishes the openid signin process.
72 * Signin complete, ikiwiki returns to what Alice was doing before; editing
73   a page.
74 * Now all the `canedit` hooks are happy. The [[editpage]] plugin calls
75   `formbuilder_setup` to display the page editing form.
76
77 Alice saves her change to the page.
78
79 * The [[editpage]] plugin's `formbuilder` hook sees that the Save button
80   was pressed, and calls the `checkcontent` and `editcontent` hooks.
81   Then it saves the page to disk, and branches into the compiler part
82   of ikiwiki to refresh the wiki.
83
84 ## Types of plugins
85
86 Most ikiwiki [[plugins]] are written in perl, like ikiwiki. This gives the
87 plugin full access to ikiwiki's internals, and is the most efficient.
88 However, plugins can actually be written in any language that supports XML
89 RPC. These are called [[external]] plugins.
90
91 A plugin written in perl is a perl module, in the `IkiWiki::Plugin`
92 namespace. The name of the plugin is typically in lowercase, such as
93 `IkiWiki::Plugin::inline`. Ikiwiki includes a `IkiWiki::Plugin::skeleton`
94 that can be fleshed out to make a useful plugin.
95 `IkiWiki::Plugin::pagecount` is another simple example. All perl plugins
96 should `use IkiWiki` to import the ikiwiki plugin interface. It's a good
97 idea to include the version number of the plugin interface that your plugin
98 expects: `use IkiWiki 3.00`.
99
100 An external plugin is an executable program. It can be written in any
101 language. Its interface to ikiwiki is via XML RPC, which it reads from
102 ikiwiki on its standard input, and writes to ikiwiki on its standard
103 output. For more details on writing external plugins, see [[external]].
104
105 Despite these two types of plugins having such different interfaces,
106 they're the same as far as how they hook into ikiwiki. This document will
107 explain how to write both sorts of plugins, albeit with an emphasis on perl
108 plugins.
109
110 ## Plugin interface
111
112 To import the ikiwiki plugin interface:
113
114         use IkiWiki '3.00';
115
116 This will import several variables and functions into your plugin's
117 namespace. These variables and functions are the ones most plugins need,
118 and a special effort will be made to avoid changing them in incompatible
119 ways, and to document any changes that have to be made in the future.
120
121 Note that IkiWiki also provides other variables and functions that are not
122 exported by default. No guarantee is made about these in the future, so if
123 it's not exported, the wise choice is to not use it.
124
125 ## Registering plugins
126
127 Plugins should, when imported, call `hook()` to hook into ikiwiki's
128 processing. The function uses named parameters, and use varies depending on
129 the type of hook being registered -- see below. A plugin can call
130 the function more than once to register multiple hooks.
131
132 All calls to `hook()` should be passed a "type" parameter, which gives the
133 type of hook, a "id" parameter, which should be a unique string for this
134 plugin, and a "call" parameter, which tells what function to call for the
135 hook.
136
137 An optional "last" parameter, if set to a true value, makes the hook run
138 after all other hooks of its type, and an optional "first" parameter makes
139 it run first. Useful if the hook depends on some other hook being run first.
140
141 ## Types of hooks
142
143 In roughly the order they are called.
144
145 ### getopt
146
147         hook(type => "getopt", id => "foo", call => \&getopt);
148
149 This allows for plugins to perform their own processing of command-line
150 options and so add options to the ikiwiki command line. It's called during
151 command line processing, with `@ARGV` full of any options that ikiwiki was
152 not able to process on its own. The function should process any options it
153 can, removing them from `@ARGV`, and probably recording the configuration
154 settings in `%config`. It should take care not to abort if it sees
155 an option it cannot process, and should just skip over those options and
156 leave them in `@ARGV`.
157
158 ### checkconfig
159
160         hook(type => "checkconfig", id => "foo", call => \&checkconfig);
161
162 This is useful if the plugin needs to check for or modify ikiwiki's
163 configuration. It's called early in the startup process. `%config`
164 is populated at this point, but other state has not yet been loaded.
165 The function is passed no values. It's ok for the function to call
166 `error()` if something isn't configured right.
167
168 ### refresh
169
170         hook(type => "refresh", id => "foo", call => \&refresh);
171
172 This hook is called just before ikiwiki scans the wiki for changed files.
173 It's useful for plugins that need to create or modify a source page. The
174 function is passed no values.
175
176 ### needsbuild
177
178         hook(type => "needsbuild", id => "foo", call => \&needsbuild);
179
180 This allows a plugin to manipulate the list of files that need to be
181 built when the wiki is refreshed. The function is passed a reference to an
182 array of files that will be rebuilt, and can modify the array, either
183 adding or removing files from it.
184
185 ### scan
186
187         hook(type => "scan", id => "foo", call => \&scan);
188
189 This hook is called early in the process of building the wiki, and is used
190 as a first pass scan of the page, to collect metadata about the page. It's
191 mostly used to scan the page for [[WikiLinks|ikiwiki/WikiLink]], and add
192 them to `%links`. Present in IkiWiki 2.40 and later.
193
194 The function is passed named parameters "page" and "content". Its return
195 value is ignored.
196
197 ### filter
198
199         hook(type => "filter", id => "foo", call => \&filter);
200
201 Runs on the raw source of a page, before anything else touches it, and can
202 make arbitrary changes. The function is passed named parameters "page",
203 "destpage", and "content". It should return the filtered content.
204
205 ### preprocess
206
207 Adding a preprocessor [[ikiwiki/directive]] is probably the most common use
208 of a plugin.
209
210         hook(type => "preprocess", id => "foo", call => \&preprocess);
211
212 Replace "foo" with the command name that will be used for the preprocessor
213 directive.
214
215 Each time the directive is processed, the referenced function (`preprocess`
216 in the example above) is called. Whatever the function returns goes onto
217 the page in place of the directive. Or, if the function aborts using
218 `error()`, the directive will be replaced with the error message.
219
220 The function is passed named parameters. First come the parameters set
221 in the preprocessor directive. These are passed in the same order as
222 they're in the directive, and if the preprocessor directive contains a bare
223 parameter (example: `\[[!foo param]]`), that parameter will be passed with
224 an empty value.
225
226 After the parameters from the preprocessor directive some additional ones
227 are passed: A "page" parameter gives the name of the page that embedded the
228 preprocessor directive, while a "destpage" parameter gives the name of the
229 page the content is going to (different for inlined pages), and a "preview"
230 parameter is set to a true value if the page is being previewed.
231
232 If `hook` is passed an optional "scan" parameter, set to a true value, this
233 makes the hook be called during the preliminary scan that ikiwiki makes of
234 updated pages, before begining to render pages. This should be done if the
235 hook modifies data in `%links` (typically by calling `add_link`). Note that
236 doing so will make the hook be run twice per page build, so avoid doing it
237 for expensive hooks. (As an optimisation, if your preprocessor hook is
238 called in a void context, you can assume it's being run in scan mode, and
239 avoid doing expensive things at that point.)
240
241 Note that if the [[htmlscrubber]] is enabled, html in
242 preprocessor [[ikiwiki/directive]] output is sanitised, which may limit what
243 your plugin can do. Also, the rest of the page content is not in html
244 format at preprocessor time. Text output by a preprocessor directive will
245 be linkified and passed through markdown (or whatever engine is used to
246 htmlize the page) along with the rest of the page.
247
248 ### linkify
249
250         hook(type => "linkify", id => "foo", call => \&linkify);
251
252 This hook is called to convert [[WikiLinks|ikiwiki/WikiLink]] on the page into html
253 links. The function is passed named parameters "page", "destpage", and
254 "content". It should return the linkified content.  Present in IkiWiki 2.40
255 and later.
256
257 Plugins that implement linkify must also implement a scan hook, that scans
258 for the links on the page and adds them to `%links` (typically by calling
259 `add_link`).
260
261 ### htmlize
262
263         hook(type => "htmlize", id => "ext", call => \&htmlize);
264
265 Runs on the source of a page and turns it into html. The id parameter
266 specifies the filename extension that a file must have to be htmlized using
267 this plugin. This is how you can add support for new and exciting markup
268 languages to ikiwiki.
269
270 The function is passed named parameters: "page" and "content" and should
271 return the htmlized content.
272
273 If `hook` is passed an optional "keepextension" parameter, set to a true
274 value, then the extension will not be stripped from the source filename when
275 generating the page.
276
277 If `hook` is passed an optional "noextension" parameter, set to a true
278 value, then the id parameter specifies not a filename extension, but
279 a whole filename that can be htmlized. This is useful for files
280 like `Makefile` that have no extension.
281
282 If `hook` is passed an optional "longname" parameter, this value is used
283 when prompting a user to choose a page type on the edit page form.
284
285 ### postscan
286
287         hook(type => "postscan", id => "foo", call => \&postscan);
288
289 This hook is called once the page has been converted to html (but before
290 the generated html is put in a template). The most common use is to
291 update search indexes. Added in ikiwiki 2.54.
292
293 The function is passed named parameters "page" and "content". Its return
294 value is ignored.
295
296 ### pagetemplate
297
298         hook(type => "pagetemplate", id => "foo", call => \&pagetemplate);
299
300 [[Templates|wikitemplates]] are filled out for many different things in
301 ikiwiki, like generating a page, or part of a blog page, or an rss feed, or
302 a cgi. This hook allows modifying the variables available on those
303 templates. The function is passed named parameters. The "page" and
304 "destpage" parameters are the same as for a preprocess hook. The "template"
305 parameter is a [[!cpan HTML::Template]] object that is the template that
306 will be used to generate the page. The function can manipulate that
307 template object.
308
309 The most common thing to do is probably to call `$template->param()` to add
310 a new custom parameter to the template.
311
312 ### templatefile
313
314         hook(type => "templatefile", id => "foo", call => \&templatefile);
315
316 This hook allows plugins to change the [[template|wikitemplates]] that is
317 used for a page in the wiki. The hook is passed a "page" parameter, and
318 should return the name of the template file to use, or undef if it doesn't
319 want to change the default ("page.tmpl"). Template files are looked for in
320 /usr/share/ikiwiki/templates by default.
321
322 ### sanitize
323
324         hook(type => "sanitize", id => "foo", call => \&sanitize);
325
326 Use this to implement html sanitization or anything else that needs to
327 modify the body of a page after it has been fully converted to html.
328
329 The function is passed named parameters: "page", "destpage", and "content",
330 and should return the sanitized content.
331
332 ### format
333
334         hook(type => "format", id => "foo", call => \&format);
335
336 The difference between format and sanitize is that sanitize only acts on
337 the page body, while format can modify the entire html page including the
338 header and footer inserted by ikiwiki, the html document type, etc. (It
339 should not rely on always being passed the entire page, as it won't be
340 when the page is being previewed.)
341
342 The function is passed named parameters: "page" and "content", and 
343 should return the formatted content.
344
345 ### delete
346
347         hook(type => "delete", id => "foo", call => \&delete);
348
349 Each time a page or pages is removed from the wiki, the referenced function
350 is called, and passed the names of the source files that were removed.
351
352 ### change
353
354         hook(type => "change", id => "foo", call => \&render);
355
356 Each time ikiwiki renders a change or addition (but not deletion) to the
357 wiki, the referenced function is called, and passed the names of the
358 source files that were rendered.
359
360 ### cgi
361
362         hook(type => "cgi", id => "foo", call => \&cgi);
363
364 Use this to hook into ikiwiki's cgi script. Each registered cgi hook is
365 called in turn, and passed a CGI object. The hook should examine the
366 parameters, and if it will handle this CGI request, output a page
367 (including the http headers) and terminate the program.
368
369 Note that cgi hooks are called as early as possible, before any ikiwiki
370 state is loaded, and with no session information.
371
372 ### auth
373
374         hook(type => "auth", id => "foo", call => \&auth);
375
376 This hook can be used to implement an authentication method. When a user
377 needs to be authenticated, each registered auth hook is called in turn, and
378 passed a CGI object and a session object. 
379
380 If the hook is able to authenticate the user, it should set the session
381 object's "name" parameter to the authenticated user's name. Note that
382 if the name is set to the name of a user who is not registered,
383 a basic registration of the user will be automatically performed.
384
385 ### sessioncgi
386
387         hook(type => "sessioncgi", id => "foo", call => \&sessioncgi);
388
389 Unlike the cgi hook, which is run as soon as possible, the sessioncgi hook
390 is only run once a session object is available. It is passed both a CGI
391 object and a session object. To check if the user is in fact signed in, you
392 can check if the session object has a "name" parameter set.
393
394 ### canedit
395
396         hook(type => "canedit", id => "foo", call => \&canedit);
397
398 This hook can be used to implement arbitrary access methods to control when
399 a page can be edited using the web interface (commits from revision control
400 bypass it). When a page is edited, each registered canedit hook is called
401 in turn, and passed the page name, a CGI object, and a session object.
402
403 If the hook has no opinion about whether the edit can proceed, return
404 `undef`, and the next plugin will be asked to decide. If edit can proceed,
405 the hook should return "". If the edit is not allowed by this hook, the
406 hook should return an error message for the user to see, or a function 
407 that can be run to log the user in or perform other action necessary for
408 them to be able to edit the page.
409
410 This hook should avoid directly redirecting the user to a signin page,
411 since it's sometimes used to test to see which pages in a set of pages a
412 user can edit.
413
414 ### canremove
415
416         hook(type => "canremove", id => "foo", call => \&canremove);
417
418 This hook can be used to implement arbitrary access methods to control
419 when a page can be removed using the web interface (commits from
420 revision control bypass it). It works exactly like the `canedit` hook,
421 but is passed the named parameters `cgi` (a CGI object), `session`
422 (a session object) and `page` (the page subject to deletion).
423
424 ### canrename
425
426         hook(type => "canrename", id => "foo", call => \&canrename);
427
428 This hook can be used to implement arbitrary access methods to control when
429 a page can be renamed using the web interface (commits from revision control
430 bypass it). It works exactly like the `canedit` hook,
431 but is passed the named parameters `cgi` (a CGI object), `session` (a
432 session object), `src`, `srcfile`, `dest` and `destfile`.
433
434 ### checkcontent
435         
436         hook(type => "checkcontent", id => "foo", call => \&checkcontent);
437
438 This hook is called to check the content a user has entered on a page,
439 before it is saved, and decide if it should be allowed.
440
441 It is passed named parameters: `content`, `page`, `cgi`, and `session`. If
442 the content the user has entered is a comment, it may also be passed some
443 additional parameters: `author`, `url`, and `subject`. The `subject`
444 parameter may also be filled with the user's comment about the change.
445
446 Note: When the user edits an existing wiki page, this hook is also
447 passed a `diff` named parameter, which will include only the lines
448 that they added to the page, or modified.
449
450 The hook should return `undef` on success. If the content is disallowed, it
451 should return a message stating what the problem is, or a function
452 that can be run to perform whatever action is necessary to allow the user
453 to post the content.
454
455 ### editcontent
456
457         hook(type => "editcontent", id => "foo", call => \&editcontent);
458
459 This hook is called when a page is saved (or previewed) using the web
460 interface. It is passed named parameters: `content`, `page`, `cgi`, and
461 `session`. These are, respectively, the new page content as entered by the
462 user, the page name, a `CGI` object, and the user's `CGI::Session`. 
463
464 It can modify the content as desired, and should return the content.
465
466 ### formbuilder
467
468         hook(type => "formbuilder_setup", id => "foo", call => \&formbuilder_setup);
469         hook(type => "formbuilder", id => "foo", call => \&formbuilder);
470
471 These hooks allow tapping into the parts of ikiwiki that use [[!cpan
472 CGI::FormBuilder]] to generate web forms. These hooks are passed named
473 parameters: `cgi`, `session`, `form`, and `buttons`. These are, respectively,
474 the `CGI` object, the user's `CGI::Session`, a `CGI::FormBuilder`, and a
475 reference to an array of names of buttons to go on the form.
476
477 Each time a form is set up, the `formbuilder_setup` hook is called.
478 Typically the `formbuilder_setup` hook will check the form's title, and if
479 it's a form that it needs to modify, will call various methods to
480 add/remove/change fields, tweak the validation code for the fields, etc. It
481 will not validate or display the form.
482
483 Just before a form is displayed to the user, the `formbuilder` hook is
484 called. It can be used to validate the form, but should not display it.
485
486 ### savestate
487
488         hook(type => "savestate", id => "foo", call => \&savestate);
489
490 This hook is called whenever ikiwiki normally saves its state, just before
491 the state is saved. The function can save other state, modify values before
492 they're saved, etc.
493
494 ### renamepage
495
496         hook(type => "renamepage", id => "foo", call => \&renamepage);
497
498 This hook is called by the [[plugins/rename]] plugin when it renames
499 something, once per page linking to the renamed page's old location.
500 The hook is passed named parameters: `page`, `oldpage`, `newpage`, and
501 `content`, and should try to modify the content of `page` to reflect
502 the name change. For example, by converting links to point to the
503 new page.
504
505 ### rename
506
507         hook(type => "rename", id => "foo", call => \&rename);
508
509 When a page or set of pages is renamed, the referenced function is
510 called for every page, and is passed named parameters:
511
512 * `torename`: a reference to a hash with keys: `src`, `srcfile`,
513   `dest`, `destfile`, `required`.
514 * `cgi`: a CGI object
515 * `session`: a session object.
516
517 Such a hook function returns any additional rename hashes it wants to
518 add. This hook is applied recursively to returned additional rename
519 hashes, so that it handles the case where two plugins use the hook:
520 plugin A would see when plugin B adds a new file to be renamed.
521
522 ### getsetup
523
524         hook(type => "getsetup", id => "foo", call => \&getsetup);
525
526 This hooks is not called during normal operation, but only when setting up 
527 the wiki, or generating a setup file. Plugins can use this hook to add
528 configuration options.
529
530 The hook is passed no parameters. It returns data about the configuration
531 options added by the plugin. It can also check if the plugin is usable, and
532 die if not, which will cause the plugin to not be offered in the configuration
533 interface.
534
535 The data returned is a list of `%config` options, followed by a hash
536 describing the option. There can also be an item named "plugin", which
537 describes the plugin as a whole. For example:
538
539                 return
540                         plugin => {
541                                 description => "description of this plugin",
542                                 safe => 1,
543                                 rebuild => 1,
544                                 section => "misc",
545                         },
546                         option_foo => {
547                                 type => "boolean",
548                                 description => "enable foo?",
549                                 advanced => 1,
550                                 safe => 1,
551                                 rebuild => 1,
552                         },
553                         option_bar => {
554                                 type => "string",
555                                 example => "hello",
556                                 description => "option bar",
557                                 safe => 1,
558                                 rebuild => 0,
559                         },
560
561 * `type` can be "boolean", "string", "integer", "pagespec",
562   or "internal" (used for values that are not user-visible). The type is
563   the type of the leaf values;  the `%config` option may be an array or
564   hash of these.
565 * `example` can be set to an example value.
566 * `description` is a short description of the option.
567 * `link` is a link to further information about the option. This can either
568   be a [[ikiwiki/WikiLink]], or an url.
569 * `advanced` can be set to true if the option is more suitable for advanced
570   users.
571 * `safe` should be false if the option should not be displayed in unsafe
572   configuration methods, such as the web interface. Anything that specifies
573   a command to run, a path on disk, or a regexp should be marked as unsafe.
574   If a plugin is marked as unsafe, that prevents it from being
575   enabled/disabled.
576 * `rebuild` should be true if changing the option (or enabling/disabling
577   the plugin) will require a wiki rebuild, false if no rebuild is needed,
578   and undef if a rebuild could be needed in some circumstances, but is not
579   strictly required.
580 * `section` can optionally specify which section in the config file
581   the plugin fits in. The convention is to name the sections the
582   same as the tags used for [[plugins|plugin]] on this wiki.
583
584 ### genwrapper
585
586         hook(type => "genwrapper", id => "foo", call => \&genwrapper);
587
588 This hook is used to inject C code (which it returns) into the `main`
589 function of the ikiwiki wrapper when it is being generated.
590
591 ### sort
592
593         hook(type => "sort", id => "foo", call => \&sort_by_foo);
594
595 This hook adds an additional [[ikiwiki/pagespec/sorting]] order or overrides
596 an existing one. The callback is given two page names as arguments, and
597 returns negative, zero or positive if the first page should come before,
598 close to (i.e. undefined order), or after the second page.
599
600 For instance, the built-in `title` sort order could be reimplemented as
601
602         sub sort_by_title {
603                 pagetitle(basename($_[0])) cmp pagetitle(basename($_[1]));
604         }
605
606 ## Exported variables
607
608 Several variables are exported to your plugin when you `use IkiWiki;`
609
610 ### `%config`
611
612 A plugin can access the wiki's configuration via the `%config`
613 hash. The best way to understand the contents of the hash is to look at
614 your ikiwiki setup file, which sets the hash content to configure the wiki.
615
616 ### `%pagestate`
617
618 The `%pagestate` hash can be used by plugins to save state that they will need
619 next time ikiwiki is run. The hash holds per-page state, so to set a value,
620 use `$pagestate{$page}{$id}{$key}=$value`, and to retrieve the value,
621 use `$pagestate{$page}{$id}{$key}`.
622
623 The `$value` can be anything that perl's Storable module is capable of
624 serializing. `$key` can be any string you like, but `$id` must be the same
625 as the "id" parameter passed to `hook()` when registering the plugin. This
626 is so ikiwiki can know when to delete pagestate for plugins that are no
627 longer used.
628
629 When pages are deleted, ikiwiki automatically deletes their pagestate too.
630
631 Note that page state does not persist across wiki rebuilds, only across
632 wiki updates.
633
634 ### `%wikistate`
635
636 The `%wikistate` hash can be used by a plugin to store persistant state
637 that is not bound to any one page. To set a value, use
638 `$wikistate{$id}{$key}=$value, where `$value` is anything Storable can
639 serialize, `$key` is any string you like, and `$id` must be the same as the
640 "id" parameter passed to `hook()` when registering the plugin, so that the
641 state can be dropped if the plugin is no longer used.
642
643 ### `%links`
644
645 The `%links` hash can be used to look up the names of each page that
646 a page links to. The name of the page is the key; the value is an array
647 reference. Do not modify this hash directly; call `add_link()`.
648
649         $links{"foo"} = ["bar", "baz"];
650
651 ### `%pagesources`
652
653 The `%pagesources` has can be used to look up the source filename
654 of a page. So the key is the page name, and the value is the source
655 filename. Do not modify this hash.
656
657         $pagesources{"foo"} = "foo.mdwn";
658
659 ### `%destsources`
660
661 The `%destsources` hash records the name of the source file used to
662 create each destination file. The key is the output filename (ie,
663 "foo/index.html"), and the value is the source filename that it was built
664 from (eg, "foo.mdwn"). Note that a single source file may create multiple
665 destination files. Do not modify this hash directly; call `will_render()`.
666         
667         $destsources{"foo/index.html"} = "foo.mdwn";
668
669 ## Library functions
670
671 Several functions are exported to your plugin when you `use IkiWiki;`
672
673 ### `hook(@)`
674
675 Hook into ikiwiki's processing. See the discussion of hooks above.
676
677 Note that in addition to the named parameters described above, a parameter
678 named `no_override` is supported, If it's set to a true value, then this hook
679 will not override any existing hook with the same id. This is useful if
680 the id can be controled by the user.
681
682 ### `debug($)`
683
684 Logs a debugging message. These are supressed unless verbose mode is turned
685 on.
686
687 ### `error($;$)`
688
689 Aborts with an error message. If the second parameter is passed, it is a
690 function that is called after the error message is printed, to do any final
691 cleanup.
692
693 If called inside a preprocess hook, error() does not abort the entire
694 wiki build, but instead replaces the preprocessor [[ikiwiki/directive]] with
695 a version containing the error message.
696
697 In other hooks, error() is a fatal error, so use with care. Try to avoid
698 dying on bad input when building a page, as that will halt
699 the entire wiki build and make the wiki unusable.
700
701 ### `template($;@)`
702
703 Creates and returns a [[!cpan HTML::Template]] object. The first parameter
704 is the name of the file in the template directory. The optional remaining
705 parameters are passed to `HTML::Template->new`.
706
707 ### `htmlpage($)`
708
709 Passed a page name, returns the base name that will be used for a the html
710 page created from it. (Ie, it appends ".html".)
711
712 Use this when constructing the filename of a html file. Use `urlto` when
713 generating a link to a page.
714
715 ### `pagespec_match_list($$;@)`
716
717 Passed a page name, and [[ikiwiki/PageSpec]], returns a list of pages
718 in the wiki that match the [[ikiwiki/PageSpec]]. 
719
720 The page will automatically be made to depend on the specified
721 [[ikiwiki/PageSpec]], so `add_depends` does not need to be called. This
722 is often significantly more efficient than calling `add_depends` and
723 `pagespec_match` in a loop. You should use this anytime a plugin
724 needs to match a set of pages and do something based on that list.
725
726 Unlike pagespec_match, this may throw an error if there is an error in
727 the pagespec.
728
729 Additional named parameters can be specified:
730
731 * `deptype` optionally specifies the type of dependency to add. Use the
732   `deptype` function to generate a dependency type.
733 * `filter` is a reference to a function, that is called and passed a page,
734   and returns true if the page should be filtered out of the list.
735 * `sort` specifies a sort order for the list. See
736   [[ikiwiki/PageSpec/sorting]] for the avilable sort methods.
737 * `reverse` if true, sorts in reverse.
738 * `num` if nonzero, specifies the maximum number of matching pages that
739   will be returned.
740 * `list` makes it only match amoung the specified list of pages.
741   Default is to match amoung all pages in the wiki.
742
743 Any other named parameters are passed on to `pagespec_match`, to further
744 limit the match.
745
746 ### `add_depends($$;$)`
747
748 Makes the specified page depend on the specified [[ikiwiki/PageSpec]].
749
750 By default, dependencies are full content dependencies, meaning that the
751 page will be updated whenever anything matching the PageSpec is modified.
752 This can be overridden by passing a `deptype` value as the third parameter.
753
754 ### `pagespec_match($$;@)`
755
756 Passed a page name, and [[ikiwiki/PageSpec]], returns a true value if the
757 [[ikiwiki/PageSpec]] matches the page.
758
759 Note that the return value is overloaded. If stringified, it will be a
760 message indicating why the PageSpec succeeded, or failed, to match the
761 page.
762
763 Additional named parameters can be passed, to further limit the match.
764 The most often used is "location", which specifies the location the
765 PageSpec should match against. If not passed, relative PageSpecs will match
766 relative to the top of the wiki.
767
768 ### `deptype(@)`
769
770 Use this function to generate ikiwiki's internal representation of a
771 dependency type from one or more of these keywords:
772
773 * `content` is the default. Any change to the content
774   of a page triggers the dependency.
775 * `presence` is only triggered by a change to the presence
776   of a page.
777 * `links` is only triggered by a change to the links of a page.
778   This includes when a link is added, removed, or changes what
779   it points to due to other changes. It does not include the
780   addition or removal of a duplicate link.
781
782 If multiple types are specified, they are combined.
783
784 ### `bestlink($$)`
785
786 Given a page and the text of a link on the page, determine which
787 existing page that link best points to. Prefers pages under a
788 subdirectory with the same name as the source page, failing that
789 goes down the directory tree to the base looking for matching
790 pages, as described in [[ikiwiki/SubPage/LinkingRules]].
791
792 ### `htmllink($$$;@)`
793
794 Many plugins need to generate html links and add them to a page. This is
795 done by using the `htmllink` function. The usual way to call
796 `htmllink` is:
797
798         htmllink($page, $page, $link)
799
800 Why is `$page` repeated? Because if a page is inlined inside another, and a
801 link is placed on it, the right way to make that link is actually:
802
803         htmllink($page, $destpage, $link)
804
805 Here `$destpage` is the inlining page. A `destpage` parameter is passed to
806 some of the hook functions above; the ones that are not passed it are not used
807 during inlining and don't need to worry about this issue.
808
809 After the three required parameters, named parameters can be used to
810 control some options. These are:
811
812 * noimageinline - set to true to avoid turning links into inline html images
813 * forcesubpage  - set to force a link to a subpage
814 * linktext - set to force the link text to something
815 * anchor - set to make the link include an anchor
816 * rel - set to add a rel attribute to the link
817 * class - set to add a css class to the link
818 * title - set to add a title attribute to the link
819
820 ### `readfile($;$)`
821
822 Given a filename, reads and returns the entire file.
823
824 The optional second parameter, if set to a true value, makes the file be read
825 in binary mode.
826
827 A failure to read the file will result in it dying with an error.
828
829 ### `writefile($$$;$$)`
830
831 Given a filename, a directory to put it in, and the file's content,
832 writes a file. 
833
834 The optional fourth parameter, if set to a true value, makes the file be
835 written in binary mode.
836
837 The optional fifth parameter can be used to pass a function reference that
838 will be called to handle writing to the file. The function will be called
839 and passed a file descriptor it should write to, and an error recovery
840 function it should call if the writing fails. (You will not normally need to
841 use this interface.)
842
843 A failure to write the file will result in it dying with an error.
844
845 If the destination directory doesn't exist, it will first be created.
846
847 The filename and directory are separate parameters because of
848 some security checks done to avoid symlink attacks. Before writing a file,
849 it checks to make sure there's not a symlink with its name, to avoid
850 following the symlink. If the filename parameter includes a subdirectory
851 to put the file in, it also checks if that subdirectory is a symlink, etc.
852 The directory parameter, however, is not checked for symlinks. So,
853 generally the directory parameter is a trusted toplevel directory like
854 the srcdir or destdir, and any subdirectories of this are included in the
855 filename parameter.
856
857 ### `will_render($$)`
858
859 Given a page name and a destination file name (not including the base
860 destination directory), register that the page will result in that file
861 being rendered. 
862
863 It's important to call this before writing to any file in the destination
864 directory, and it's important to call it consistently every time, even if
865 the file isn't really written this time -- unless you delete any old
866 version of the file. In particular, in preview mode, this should still be
867 called even if the file isn't going to be written to during the preview.
868
869 Ikiwiki uses this information to automatically clean up rendered files when
870 the page that rendered them goes away or is changed to no longer render
871 them. will_render also does a few important security checks.
872
873 ### `pagetype($)`
874
875 Given the name of a source file, returns the type of page it is, if it's
876 a type that ikiwiki knowns how to htmlize. Otherwise, returns undef.
877
878 ### `pagename($)`
879
880 Given the name of a source file, returns the name of the wiki page
881 that corresponds to that file.
882
883 ### `pagetitle($)`
884
885 Give the name of a wiki page, returns a version suitable to be displayed as
886 the page's title. This is accomplished by de-escaping escaped characters in
887 the page name. "_" is replaced with a space, and '__NN__' is replaced by 
888 the UTF character with code NN.
889
890 ### `titlepage($)`
891
892 This performs the inverse of `pagetitle`, ie, it converts a page title into
893 a wiki page name.
894
895 ### `linkpage($)`
896
897 This converts text that could have been entered by the user as a
898 [[ikiwiki/WikiLink]] into a wiki page name.
899
900 ### `srcfile($;$)`
901
902 Given the name of a source file in the wiki, searches for the file in
903 the source directory and the underlay directories (most recently added
904 underlays first), and returns the full path to the first file found.
905
906 Normally srcfile will fail with an error message if the source file cannot
907 be found. The second parameter can be set to a true value to make it return
908 undef instead.
909
910 ### `add_underlay($)`
911
912 Adds a directory to the set of underlay directories that ikiwiki will
913 search for files.
914
915 If the directory name is not absolute, ikiwiki will assume it is in
916 the parent directory of the configured underlaydir.
917
918 ### `displaytime($;$)`
919
920 Given a time, formats it for display.
921
922 The optional second parameter is a strftime format to use to format the
923 time.
924
925 ### `gettext`
926
927 This is the standard gettext function, although slightly optimised.
928
929 ### `ngettext`
930
931 This is the standard ngettext function, although slightly optimised.
932
933 ### `urlto($$;$)`
934
935 Construct a relative url to the first parameter from the page named by the
936 second. The first parameter can be either a page name, or some other
937 destination file, as registered by `will_render`.
938
939 If the third parameter is passed and is true, an absolute url will be
940 constructed instead of the default relative url.
941
942 ### `newpagefile($$)`
943
944 This can be called when creating a new page, to determine what filename
945 to save the page to. It's passed a page name, and its type, and returns
946 the name of the file to create, relative to the srcdir.
947
948 ### `targetpage($$;$)`
949
950 Passed a page and an extension, returns the filename that page will be
951 rendered to.
952
953 Optionally, a third parameter can be passed, to specify the preferred
954 filename of the page. For example, `targetpage("foo", "rss", "feed")`
955 will yield something like `foo/feed.rss`.
956
957 ### `add_link($$)`
958
959 This adds a link to `%links`, ensuring that duplicate links are not
960 added. Pass it the page that contains the link, and the link text.
961
962 ## Miscellaneous
963
964 ### Internal use pages
965
966 Sometimes it's useful to put pages in the wiki without the overhead of
967 having them be rendered to individual html files. Such internal use pages
968 are collected together to form the RecentChanges page, for example.
969
970 To make an internal use page, register a filename extension that starts
971 with "_". Internal use pages cannot be edited with the web interface,
972 generally shouldn't contain [[WikiLinks|ikiwiki/WikiLink]] or preprocessor directives (use
973 either on them with extreme caution), and are not matched by regular
974 PageSpecs glob patterns, but instead only by a special `internal()`
975 [[ikiwiki/PageSpec]].
976
977 ### RCS plugins
978
979 ikiwiki's support for [[revision_control_systems|rcs]] is also done via
980 plugins. See [[RCS_details|rcs/details]] for some more info.
981
982 RCS plugins must register a number of hooks. Each hook has type 'rcs', 
983 and the 'id' field is set to the name of the hook. For example:
984         
985         hook(type => "rcs", id => "rcs_update", call => \&rcs_update);
986         hook(type => "rcs", id => "rcs_prepedit", call => \&rcs_prepedit);
987
988 #### `rcs_update()`
989
990 Updates the working directory with any remote changes.
991
992 #### `rcs_prepedit($)`
993
994 Is passed a file to prepare to edit. It can generate and return an arbitrary
995 token, that will be passed into `rcs_commit` when committing. For example,
996 it might return the current revision ID of the file, and use that
997 information later when merging changes.
998
999 #### `rcs_commit($$$;$$)`
1000
1001 Passed a file, message, token (from `rcs_prepedit`), user, and ip address.
1002 Should try to commit the file. Returns `undef` on *success* and a version
1003 of the page with the rcs's conflict markers on failure.
1004
1005 #### `rcs_commit_staged($$$)`
1006
1007 Passed a message, user, and ip address. Should commit all staged changes.
1008 Returns undef on success, and an error message on failure.
1009
1010 Changes can be staged by calls to `rcs_add`, `rcs_remove`, and
1011 `rcs_rename`.
1012
1013 #### `rcs_add($)`
1014
1015 Adds the passed file to the archive. The filename is relative to the root
1016 of the srcdir.
1017
1018 Note that this should not commit the new file, it should only
1019 prepare for it to be committed when rcs_commit (or `rcs_commit_staged`) is
1020 called. Note that the file may be in a new subdir that is not yet in
1021 to version control; the subdir can be added if so.
1022
1023 #### `rcs_remove($)`
1024
1025 Remove a file. The filename is relative to the root of the srcdir.
1026
1027 Note that this should not commit the removal, it should only prepare for it
1028 to be committed when `rcs_commit` (or `rcs_commit_staged`) is called. Note
1029 that the new file may be in a new subdir that is not yet in version
1030 control; the subdir can be added if so.
1031
1032 #### `rcs_rename($$)`
1033
1034 Rename a file. The filenames are relative to the root of the srcdir.
1035
1036 Note that this should not commit the rename, it should only
1037 prepare it for when `rcs_commit` (or `rcs_commit_staged`) is called.
1038 The new filename may be in a new subdir, that is not yet added to
1039 version control. If so, the subdir will exist already, and should
1040 be added to revision control.
1041
1042 #### `rcs_recentchanges($)`
1043
1044 Examine the RCS history and generate a list of recent changes.
1045 The parameter is how many changes to return.
1046
1047 The data structure returned for each change is:
1048
1049         {
1050                 rev => # the RCSs id for this commit
1051                 user => # name of user who made the change,
1052                 committype => # either "web" or the name of the rcs,
1053                 when => # time when the change was made,
1054                 message => [
1055                         { line => "commit message line 1" },
1056                         { line => "commit message line 2" },
1057                         # etc,
1058                 ],
1059                 pages => [
1060                         {
1061                                 page => # name of page changed,
1062                                 diffurl => # optional url to a diff of changes
1063                         },
1064                         # repeat for each page changed in this commit,
1065                 ],
1066         }
1067
1068 #### `rcs_diff($)`
1069
1070 The parameter is the rev from `rcs_recentchanges`.
1071 Should return a list of lines of the diff (including \n) in list
1072 context, and the whole diff in scalar context.
1073
1074 #### `rcs_getctime($)`
1075
1076 This is used to get the page creation time for a file from the RCS, by looking
1077 it up in the history.
1078
1079 It's ok if this is not implemented, and throws an error.
1080
1081 #### `rcs_receive()`
1082
1083 This is called when ikiwiki is running as a pre-receive hook (or
1084 equivalent), and is testing if changes pushed into the RCS from an
1085 untrusted user should be accepted. This is optional, and doesn't make
1086 sense to implement for all RCSs.
1087
1088 It should examine the incoming changes, and do any sanity 
1089 checks that are appropriate for the RCS to limit changes to safe file adds,
1090 removes, and changes. If something bad is found, it should exit
1091 nonzero, to abort the push. Otherwise, it should return a list of
1092 files that were changed, in the form:
1093
1094         {
1095                 file => # name of file that was changed
1096                 action => # either "add", "change", or "remove"
1097                 path => # temp file containing the new file content, only
1098                         # needed for "add"/"change", and only if the file
1099                         # is an attachment, not a page
1100         }
1101
1102 The list will then be checked to make sure that each change is one that
1103 is allowed to be made via the web interface.
1104
1105 ### PageSpec plugins
1106
1107 It's also possible to write plugins that add new functions to
1108 [[PageSpecs|ikiwiki/PageSpec]]. Such a plugin should add a function to the
1109 IkiWiki::PageSpec package, that is named `match_foo`, where "foo()" is
1110 how it will be accessed in a [[ikiwiki/PageSpec]]. The function will be passed
1111 two parameters: The name of the page being matched, and the thing to match
1112 against. It may also be passed additional, named parameters.
1113
1114 It should return a IkiWiki::SuccessReason object if the match succeeds, or
1115 an IkiWiki::FailReason object if the match fails. If the match cannot be
1116 attempted at all, for any page, it can instead return an
1117 IkiWiki::ErrorReason object explaining why.
1118
1119 When constructing these objects, you should also include information about
1120 of any pages whose contents or other metadata influenced the result of the
1121 match. Do this by passing a list of pages, followed by `deptype` values.
1122
1123 For example, "backlink(foo)" is influenced by the contents of page foo;
1124 "link(foo)" and "title(bar)" are influenced by the contents of any page
1125 they match; "created_before(foo)" is influenced by the metadata of foo;
1126 while "glob(*)" is not influenced by the contents of any page.
1127
1128 ### Setup plugins
1129
1130 The ikiwiki setup file is loaded using a pluggable mechanism. If you look
1131 at the top of a setup file, it starts with 'use IkiWiki::Setup::Standard',
1132 and the rest of the file is passed to that module's import method.
1133
1134 It's possible to write other modules in the `IkiWiki::Setup::` namespace that
1135 can be used to configure ikiwiki in different ways. These modules should,
1136 when imported, populate `$IkiWiki::Setup::raw_setup` with a reference
1137 to a hash containing all the config items. They should also implement a
1138 `gendump` function.
1139
1140 By the way, to parse a ikiwiki setup file and populate `%config`, a
1141 program just needs to do something like:
1142 `use IkiWiki::Setup; IkiWiki::Setup::load($filename)`
1143
1144 ### Function overriding
1145
1146 Sometimes using ikiwiki's pre-defined hooks is not enough. Your plugin
1147 may need to replace one of ikiwiki's own functions with a modified version,
1148 or wrap one of the functions.
1149
1150 For example, your plugin might want to override `displaytime`, to change
1151 the html markup used when displaying a date. Or it might want to override
1152 `IkiWiki::formattime`, to change how a date is formatted. Or perhaps you
1153 want to override `bestlink` and change how ikiwiki deals with [[WikiLinks|ikiwiki/WikiLink]].
1154
1155 By venturing into this territory, your plugin is becoming tightly tied to
1156 ikiwiki's internals. And it might break if those internals change. But
1157 don't let that stop you, if you're brave.
1158
1159 Ikiwiki provides an `inject()` function, that is a powerful way to replace
1160 any function with one of your own. This even allows you to inject a
1161 replacement for an exported function, like `bestlink`. Everything that
1162 imports that function will get your version instead. Pass it the name of
1163 the function to replace, and a new function to call. 
1164
1165 For example, here's how to replace `displaytime` with a version using HTML 5
1166 markup:
1167
1168         inject(name => 'IkiWiki::displaytime', call => sub {
1169                 return "<time>".formattime(@_)."</time>";
1170         });
1171
1172 Here's how to wrap `bestlink` with a version that tries to handle
1173 plural words:
1174
1175         my $origbestlink=\&bestlink;
1176         inject(name => 'IkiWiki::bestlink', call => \&mybestlink);
1177
1178         sub deplural ($) {
1179                 my $word=shift;
1180                 $word =~ s/e?s$//; # just an example :-)
1181                 return $word;
1182         }
1183
1184         sub mybestlink ($$) {
1185                 my $page=shift;
1186                 my $link=shift;
1187                 my $ret=$origbestlink->($page, $link);
1188                 if (! length $ret) {
1189                         $ret=$origbestlink->($page, deplural($link));
1190                 }
1191                 return $ret;
1192         }
1193
1194 ### Javascript
1195
1196 Some plugins use javascript to make ikiwiki look a bit more web-2.0-ish.
1197
1198 All javascript code should be put in `.js` files in the `javascript`
1199 underlay, and plugins using those files can enable use of the underlay by
1200 calling `add_underlay("javascript");` in their `import` function.
1201
1202 You'll have to arrange for `<script>` tags to be added to the pages that
1203 use your javascript. This can be done using a `format` hook.
1204
1205 Ikiwiki provides some utility functions in `ikiwiki.js`, for use by other
1206 javascript code. These include:
1207
1208 #### `getElementsByClass(cls, node, tag)` 
1209
1210 Returns an array of elements with the given class. The node and tag are
1211 optional and define what document node and element names to search.
1212
1213 #### `hook(name, call)`
1214
1215 The function `call` will be run as part of the hook named `name`.
1216
1217 Note that to hook into `window.onload`, you can use the `onload' hook.
1218
1219 #### `run_hooks(name)`
1220
1221 Runs the hooks with the specified name.