Merge from ncode branch: https://bitbucket.org/ncode/rspamd

Update version to 0.3.8.

Do not invalidate statfiles during synchronization.

??

Changed debian install prefix from /usr to /

changed debian dep from libevent1 to libevent-1.4-2

Changed CPACK_DEBIAN_PACKAGE_DEPENDS escape like PACKAGE_DEPENDS

Changed from PACKAGE_DEPENDS to CPACK_DEBIAN_PACKAGE_DEPENDS

Removed ${ID} from PACKAGE_VERSION, debian control files doesn't support format of RID

Fix memory corruption in memory pools library.
While in here use guint8 for all pointers.

Optimization.

Fix phishing check for special cases like http://host.com and http://www.host.com

Small fix.

Race in fuzzy check.

Race again.

Fix another race.

Fix destructors adding.

Fix race in surbl module.
Add more debugging to destructors in pools.

Fix initialization point.

Print "0.00" instead of "0" in protocol output.
Fix misprint in cdb handling.

* Add monitoring for cdb

Fix gmime24 compatibility.
Fix adding extra space to raw headers.

Reported by: Victor Ustugov

* Add ability to lookup CDB maps from lua
* Add cdb:// map to multimap plugin

Fix memory access.

Make phishing checks working.

Ignore group addresses.

Assume headers folding as space character.

* Add multimaps for "FROM" and "TO" headers (mime an smtp data can be checked)
* Improve lua api for getting message's sender and recipients

* Fix parsing of include records in spf parser

Try to fix memory issues.

Fix stupid bug in url parser.

Restore 'urls' command.

Added tag 0.3.7 for changeset ed28e6c41f75

Do not write warning about normal urls.

Fix parsing of DNS records :(
Fix parsing several mx addrs in spf parser [1]

Reported by: Victor Ustugov

Update rules.

Submitted by: Victor Ustugov

Add rules.

Submitted by: Victor Ustugov

Fix several memory leaks in rspamd.

* Rewrite URL storage system

More warnings.

Fix warnings.

Write message id as well.

Write to log if emails module find blacklisted email.

Fix FSM for headers parsing.

Save separator inside raw_header struct.

Requested by: Victor Ustugov

* Add options section into config to organize options
* Add one_shot option for avoiding inserting several results from one rule
Fix parsing of headers with \t symbol [1]

Reported by: Victor Ustugov [1]

Rules update.

Submitted by: Victor Ustugov

Fix patch for exim.
Fix parsing of wrong headers.

* Process raw headers by FSM.
* Add methods for accessing raw_headers from lua and C

Add patch for exim spam.c to use rspamd.

New rules.

Submitted by: Victor Ustugov

* Add ability to call lua function from regexp expressions

Reduce weight of NO_SPACE_IN_FROM.
Change default pid file location.
Change MISSING_TO rule not to work when header exists but empty.
Add rules for bad bondaries and message ids.

Suggested by: Victor Ustugov.

* Add ability to save symbols that are inside composites with '-' flag.
Remove warnings from rspamc.
Add new rules [1]

Submitted by: Victor Ustugov [1]

Add composites for outlook.

Submitted by: Victor Ustugov

* Add ability to specify symbols in composites to avoid their weights removing.

Optimize DNS parsing.

Suggested by: Igor Sysoev

Remove symbols that are included into a composite when all composites are processed.

* Add descriptions for all symbols in default configuration, adjust symbols' weights [1]
* Improve rspamc output by adding '--verbose' flag

Suggested by: Victor Ustugov [1]

* Add function regexp_occurs_number that allows to test how much occurs of regexp can be found in a message
Fix composites logic. [1]
Fix composites registration from lua. [1]

Reported by: Victor Ustugov [1]

Fix received headers parser state machine to parse headers with only 'by' component.

Lower weight of R_BAD_CTE_7BIT

Fix received headers passing to lua.

Fix rspamd_logger.

Fix '_' in emails.

Fix parsing emails with '_' symbol.
Fix adding metric symbol.

* Add ability to define composites from lua. [1]
Write to log when lua values override xml ones. [1]

[1] Suggested by Victor Ustugov

Wellcome 0.3.7.

* Improve forged_recipients plugin [1]
Add loading of local rules to rspamd.lua [1]

[1] Suggested by Victor Ustugov

Include proper header when building rspamc.

* Add new lua module regexp for using glib regular expressions (pcre compatible)

* Add ability to specify 'S' flag to regexp that means that headers checks must be case sensitive
* Add lua function message:get_header_strong

* Add ability to add descriptions for symbols

Remove some legacy from source tree.

Include some of modules into a sample configuration.

Remove legacy port.

Fix spf parser for some cases.

* Add ability to setup metric's weights from lua

Fix bug with several metrics output. [1]
Install surbl-whitelist. [1]

[1] Reported by Victor Ustugov

Handle emails with common hostname.

Detect mail addresses at the begining of message.

* Write Emails: header in output

* Tokenize subject using osb tokenizer.

Polish sample config.

Handle params correctly.

Call lua functions correctly as well.

Call lua function properly.

Fix trie in lua plugins.

* Add manual pages for rspamd and rspamc.

Fix bug with extracting urls from tags without quotes.

* Fix alignment in memory_pool library (thanks to Marcin Rzewucki)

Fix expiring of fuzzy hashes.

Fix installation of lua configs.

Fix passing wrong argument to write callback.

Fix case statement.

* Try to fix descriptors leakage in controller

* New module for checking emails inside messages (rules based, like multimap)
* Emails now are separated from urls and urls checks
* Add ability to check text attachements if option is presented in a configuration

Version is 0.3.6 now

Do not try to print result when connection failed in rspamc.

Avoid double free in librspamdclient.

Small fix for build id detection.

Fix build on FreeBSD.