Merge branch 'master' into templatemove
[ikiwiki] / doc / plugins / rsync / discussion.mdwn
1 ## A use case
2
3 Why I needed this plugin: I have two web servers available to me
4 for a project. Neither does everything I need, but together they
5 do. (This is a bit like the [Amazon S3
6 scenario](http://kitenet.net/~joey/blog/entry/running_a_wiki_on_Amazon_S3/).)
7
8 Server (1) is a university web server. It provides plentiful space
9 and bandwidth, easy authentication for people editing the wiki, and
10 a well-known stable URL. The wiki really wants to live here and
11 very easily could except that the server doesn't allow arbitrary
12 CGIs.
13
14 Server (2) is provided by a generous alumnus's paid [[tips/DreamHost]]
15 account. Disk and particularly network usage need to be minimized
16 because over some threshold it costs him. CGI, etc. are available.
17
18 My plan was to host the wiki on server (1) by taking advantage of
19 server (2) to store the repository, source checkout, and generated
20 pages, to host the repository browser, and to handle ikiwiki's CGI
21 operations. In order for this to work, web edits on (2) would need
22 to automatically push any changed pages to (1).
23
24 As a proof of concept, I added an rsync post-commit hook after
25 ikiwiki's usual. It worked, just not for web edits, which is how
26 the wiki will be used. So I wrote this plugin to finish the job.
27 The wiki now lives on (1), and clicking "edit" just works. --[[schmonz]]
28
29 > Just out of interest, why use `rsync` and not `git push`.  i.e. a
30 > different setup to solve the same problem would be to run a
31 > normal ikiwiki setup on the universities server with its git
32 > repository available over ssh (same security setup your using
33 > for rsync should work for git over ssh).  On the cgi-capable server,
34 > when it would rsync, make it git push.  It would seem that git
35 > has enough information that it should be able to be more
36 > network efficient.  It also means that corruption at one end
37 > wouldn't be propagated to the other end. -- [[Will]]
38
39 >> Hey, that's a nice solution. (The site was in svn to begin with,
40 >> but it's in git now.) One advantage of my approach in this particular
41 >> case: server (1) doesn't have `git` installed, but does have `rsync`,
42 >> so (1)'s environment can remain completely untweaked other than the
43 >> SSH arrangement. I kind of like that all the sysadmin effort is
44 >> contained on one host.
45 >>
46 >> This plugin is definitely still useful for projects not able to use
47 >> a DVCS (of which I've got at least one other), and possibly for
48 >> other uses not yet imagined. ;-) --[[schmonz]]
49
50 >>> I'm now using this plugin for an additional purpose. One of the aforementioned wikis (there are actually two) can only be read by trusted users, the list of which is kept in an `.htaccess` file. I added it to git as `htaccess.txt`, enabled the [[plugins/txt]] plugin, and in my `rsync_command` script, have it copied to the destdir as `.htaccess` before calling `rsync`. Now my users (who aren't tech-savvy, but are trustworthy) can edit the access list directly in the wiki. This idea might also be useful for wikis not using `rsync` at all. --[[schmonz]]
51
52 ----
53
54 Revew: --[[Joey]] 
55
56 * I think it should not throw an error if no command is set. Just don't do anything.
57 * If the rsync fails, it currently errors out, which will probably also leave
58   the wiki in a broken state, since ikiwiki will not get a chance to save
59   its state. This seems fragile; what if the laptop is offline, or the
60   server is down, etc. Maybe it should just warn if the rsync fails?
61 * Is a new hook really needed? The savestate hook runs at a similar time;
62   only issue with it is that it is run even when ikiwiki has not
63   rendered any updated pages. Bah, I think you do need the new hook, how
64   annoying..
65
66 > * Depends whether the plugin would be on by default. If yes, then yes.
67 >   If the admin has to enable it, I'd think they'd want the error.
68 > * Changed the other errors to warnings.
69 > * The name might be wrong: there isn't anything rsync-specific about the
70 >   plugin, that's just the command I personally need to run. --[[schmonz]]
71
72 >> One problem with the error is that it prevents dumping a new setup file with
73 >> the plugin enabled, and then editing it to configure. ie:
74
75         joey@gnu:~>ikiwiki -setup .ikiwiki/joeywiki.setup -plugin rsync -dumpsetup new.setup
76         Must specify rsync_command
77
78 > rsync seems by far the most likely command, though someone might use something
79 > to push via ftp instead. I think calling it rsync is ok. --[[Joey]]