lastfm plugin: bugfixes, proper handling of artists/groups without description

lastfm plugin: initial work on artist/track/album retrieval (only artist so far)

+ (httputil) 'x-rbot-location' header in response object carries the uri from which the response was received (for redirect followers, etc)

HttpUtil: try all detected charsets when converting a webpage, until one that works is found

lastfm plugin: fix incorrect song info when title or author contained a comma

imdb plugin: remove spaces around slashes separating countries

url plugin: echo all info on a single line, and use commas to separate thousands when reporting object size

Fix overconservative line splitting and bug in last line truncation

Fix a bug introduced in [830]

HTML IRCification: try to handle super and subscripts

search plugin: gcalc command thanks to epitron

Some new feature(s)!

* (url) fix response size reporting for ranged responses

Fix truncation placement for multi-line messages

imdb plugin: fix detection of multiple titles per year

imdb plugin: make aka searches optional

imdb plugin: option to try to detect articles and put them back in front of the title

+ (fish) webpage translation support

imdb plugin: imdb.popular and imdb.exact config options to determine which results to display

imdb plugin: let the site tell us which roles to prefer; fix other display issues

imdb plugin: add country and director to movie info

imdb plugin: show both popular and exact matches

imdb plugin: use constants for common strings and regexps

imdb plugin: show popular movies acted/directed when finding people

HTML IRCification: match p and br tags case insensitive

imdb plugin: handle double-redirection and other charset-related issues

imdb plugin: search on the 'aka' sites, allowing the correct movie to be found even when searching for a translated title

imdb plugin: add plot summary to movie information, and add initial information retrieval for people

New IRC Framework: use #reverse_each() instead of #each() when clearing the list of users and channels on a server, otherwise only half of the items get deleted

fix "warning: don't put space before argument parentheses"

minor typo fix

Relocate help strings to proper locations, add help for 'mode' command

* (httputil) transparent charset support in HTTP::Response
- (extends) encoding functionality moved into httputil

* (rss) bypass http cache when handling 'show' command

fix charset detection

More first_par fixups

Stringlib/rbot/core/utils/extends.rbutfy_xml() method that tries to transcode a webpage to UTF-8; HTTP headers are attached to bodies returned by HttpUtil methods to ease charset detection

httputil: reinstate partial_body

search plugin: let the user know when no body was found and no error was raised

+ reflect the httputil changes in ChangeLog

rss plugin: code cleanup. add support for slashdot feeds, with RDF extension and custom feed type

***  (httputil) major rework, new caching implementation, unified request
     processing
+    (httputil) post support, partial request support, other features
-    (httputil) removed partial_body() and get_cached() [merged into get()]
*    (plugins/, utils) minimal changes to accomodate for the new http_utils
*    (utils, ircbot) moved utils initialization into utils.rb
*    (tube.rb) (partially) accomodate for upstream site layout changes

* an ugly quickfix for sending non-unicode strings :/
  (some http-aware plugins kill the bot without it)

Utils: the array returned by get_first_pars now contains nil for pages where no first par was found. Also rearrange some code to keep relevant code together

* (utils.rb) reflect the api/semantics changes in comments

- (utils.rb) removed http_get, since it's obsoleted
+ (utils.rb) added @@bot class variable
* (utils.rb) get_first_pars should return a value
* (plugins) no need to pass http_util to the Utils.get_first_pars

* (rss.rb) we didn't really mean to create a Mutex inner class, right?

+ support for non-iso-8859-1 languages (ru, zt, ja, ko, el)

HttpUtils: inline rescue doesn't rescue LoadError, rewrite code to require rubygems before retrying htmlentities

Utils: more first par enhancements

url plugins: when echoing first par, be more clear on what's being done and don't spam with overlong messages

Utils: fix a stupid bug in rubygems require and add more first_html_par code

Utils: retry after requiring rubygems if htmlentities failed to load; when grabbing first pars, try filtering out too short paragraphs

Utils: cleanup first html par code

Utils: convert unknown numering HTML entities to the corresponding UTF-8 characters, when not using htmlentities

url plugin: url.first_par option. when enabled, the url plugin will attempt to retrieve the first paragraph of a linked web page

HttpUtil: fix partial_body when no body was given, and increase default info_bytes to 8k

Utils: try non-paragraphs if no paragraphs was found

Utils: when looking for the first par in a web page, look after any header, not just h1; also, be stricter on what's included in a paragraph

Utils: fix ircify_html (the final stripsvn diff lib/rbot/core/utils/extends.rb could cause it to return nil) and improve whitespace handling

rss plugin: attempt data recovery when marshalling fails

registry: allow plugins to provide a recovery proc in case data marshalling fails

rss plugin: nil the mutex when dumping, to prevent cross-version marshalling problems

url plugin: customizable max amount of data to retrieve to look for a title. return standard header info if no title found

httputil and url plugin improvements, see ChangeLog

url plugin: when reading body chunks, don't discard read material

keywords plugin: there is no rescan method for plugins. Remove leftover from when keywords was part of the core

* french, german and russian lang files converted to utf-8

* apparently, synthetic privmsgs for remotectl are hard. may need some massive rework later.

shiritori plugin: only load rulesets on request

rss plugin: 0.9 feeds don't work, so we just patch them to pretend they are actually 1.0 RDF feeds

* tidying up 'help ignored plugins' output

* don't set @failures_shown on debug(status)

rss plugin: lock the mutex on more occasions

plugins: only show number of ignored and/or failed plugins only the first time a user asks for help

* config value hook :on_change wasn't called from unset()

chanserv plugin: currently only manages opping etc via chanserv

* duh, operator precedence error in serverlist patch

+ lazy behavior for plugin registries (don't create a BDB file until the registry is accessed by plugin for the first time)

+ added support for multiple servers to try (round-robin) for unreliable ircnets
* changed server.name/port to server.list (with config upgrade automation, too)

Plugins: rename Plugins::pluginmanager to Plugins::manager

Plugins: move games into their own directory

remotectl: ensure that source and destination of synthetical message are proper Irc classes. Use illegal '-remote.client-' nick for the remote user

Use m.source instead of m.sourcenick whenever possible to ensure messages from servers don't cause stupid backtraces

Server hostname was not being set properly

* fixed a regexp for "identify-msg" server capability ("^" was missing)

Forgot to add the actual unicode I/O filter to the repository (see [753])

+ Added remotectl plugin and an example druby API client implementation

config was not being saved after unsetting a value

Added config option: "url.titles_only"

Socket IO filtering: rbot can now assume UTF-8 internally.

Improved handling of server limits

imdb plugin: update to the new site layout, use rbot headers

Update changelog

Allow customization of the plugins load path

Option to change the bot IRC name, thanks to jsn-

Previous attempt at cleaning up the prefix matcher were too restrictive, try using a different approach

quiz plugin: don't crash when the answer is entirely made of sepators

autorejoin plugin: insult on rejoin now optional

quiz plugin: new cleanup command to remove players with 0 points and 0 jokers