* Add ability to check bits from surbl replies

* Properly set initial state for surbl state machine
* Ignore SIGPIPE globally as dispatcher performs check of all write (2) calls

* Set read timeout for redirector instead of connect timeout

* htonl->htons as port is uint16_t, so lower bytes are zeroed or undefined when call htonl

* Remove %m from logging it seems to be unsupported by FreeBSD printf version

* Fix misprint

* Add forgotten file

* Add ability to check multiply SURBL's

* Add compatibility with gmime24

* Fix LMTP and DELIVERY parsing in config file while trying to get control credits

* Fix dispatcher bugs and add some debug output
* Fix log output for surbl

* Fix character policy in dispatcher

* Try not to unref parser too early

* Link with gmime24 if gmime22 is not found

* Add debug for mime parsing
* Fill task structure with zeroes in url-extracter

* Fix url-extracter
* Fix soft-shutdown of dispacther
* Turn debug on by default in cmake
* Change logic of save points

* Fix dependencies on perlxs target (do not rebuild it constantly)
* Fix rspamc to understand lmtp and delivery sections in config
* Fix parser's states when reading module options
* Add sample config for surbl module with comments

--HG--
rename : rspamc.pl => rspamc.pl.in

* Remove cmake logic for installing targets due to fucking libperl

* Fix logging when process is starting
* Add -t option for config testing
* Try to search default config in install prefix not in current directory

* Completely rewrite and reorganize perl API
* Add documentation for Mail::Rspamd
* Add install targets to cmake

--HG--
rename : perl/rspamd.pm => perl/Rspamd.pm
rename : perl/rspamd.xs => perl/Rspamd.xs

* Add support of LMTP/SMTP delivery

* Fix memory corruption and lmtp handling
* Add e-mail address validation in lmtp

* Add initial LMTP support and LDA delivery to rspamd

* Fix dispatcher timeouts handling
* Add wanna_die flag that can be used in dispatcher's callbacks

* Implement rspamd IO with IO dispatcher (TODO: still some issues with timeouts must be resolved)

* Improve logger initialization

* Fix issue with -fPIC and DynaLoader
* Retab perl.c

* Add issue to cmake to make perl module as well
* Fix some portability issues (to FreeBSD mainly)
* Add script to make modules list

* Prepare to migrate to cmake (still need to write install target and working with XS implicitly)
* Move all system includes to one file where we detect availability of all that includes
* Fix license misprint
* Fix some issues with perl initializing

* Add BSD license text

* Remove unused field from task object
* Use separate hashes for blessing different object

* Init perl and do all perl specific operations from the single place in code
* Push objects correctly to stack (by blessing them and making hash reference)

* Add log function to perl API
* Prepare for more detailed work on rspamd perl API

* By default number of workers is number of active processors in system
* Fix macro detection in configure system

* Avoid division by zero

* Fill hash buckets with zeroes to avoid invalid pointer usage

* Try to fix reading a line from user (using pools)

* Make doxygen happy about structures members

* Move config parse errors from stderr output to standart logging functions

* Add some comments and documentation

* Do another rework of filters/metrics and statfiles processing
* Add 'probability' normalizing to winnow algorithm and calculate not pure weight but normalized probability

* Fix bug with calling consolidation function after stop_point
* Use shared memory for storing pool allocator statistics
* Fix bug with processing statfiles results

* Use prime number for hash nodes initial value

* Add new hash for storing hash data in shared memory
* Add rwlocks implementation (primitive) in memory pool library

* Make surbl checks working

* Rework statfiles result processing
* Fix small bug in protocol implementation (\r -> \r\n)

* Add memory pool allocator statistics to 'stat' report output

* Rewrite message parser
* Change mime parts storage
* Add html tags striping (ported from php code)
* Rework learning to process only text and striped html parts

* Rewrite perl client for rspamd, now it allows access to both normal and control interfaces
* Fix small errors in tokenizer and controller interface

* Add simple utility for sending mail to rspamd
* Fix some errors in freeing message object

* Add new system of getting and setting config parameters from perl code

* Try to fix output from delayed filters processing

* Implement statistic output in control interface

* Fix errors in learning implementation

* Implement delayed fork of dead workers (to avoid fork bombs)
* Implement refork of controller
* Log time to console in normal view

* Make sample config more complete
* Fix bugs with config file parsing
* Fix bugs with creating sockets and reading commands

* Add function for adding rspamd report headers

* Fix build under FreeBSD (forgotten include)

* Add logic for filtering messages with tokenizer/classifier pair

* Implement learning using classifiers and tokenizers API

* Add simple implementation of classifiers abstraction and winnow classifier
* Force statfile to work with float values

* Use binary tree in tokenizers, that would provide us fast checking for unique tokens and have O(log n) difficulty

* Remove strlcpy code and replace it with glib alternative
* Polish code and remove bugs found

* Add learning interface to rspamd (still requires classifier to work)

* Add config routines for stat files
* Add function to resolve stat file name

* Write functions to operate blocks in stat files
* Write test case for statistics files API

* Add initial implementation of statistics files handling API

* Add simple locking interface to mem_pool library

* Add simple implementation of OSB tokenizer

* Use utf8 in description files

--HG--
rename : README-classify.koi8.txt => README-classify.utf8.txt
rename : README.koi8.txt => README.utf8.txt

* Add description of classifying process

* Add simple hash function for hashing tokens

* Optimize configure by using caching of determined options (more than 2 times faster than before)

* Reorganize structure of source files
* Adopt build system for new structure

--HG--
rename : cfg_file.h => src/cfg_file.h
rename : cfg_file.l => src/cfg_file.l
rename : cfg_file.y => src/cfg_file.y
rename : cfg_utils.c => src/cfg_utils.c
rename : controller.c => src/controller.c
rename : filter.c => src/filter.c
rename : filter.h => src/filter.h
rename : fstring.c => src/fstring.c
rename : fstring.h => src/fstring.h
rename : main.c => src/main.c
rename : main.h => src/main.h
rename : mem_pool.c => src/mem_pool.c
rename : mem_pool.h => src/mem_pool.h
rename : memcached-test.c => src/memcached-test.c
rename : memcached.c => src/memcached.c
rename : memcached.h => src/memcached.h
rename : perl.c => src/perl.c
rename : perl.h => src/perl.h
rename : plugins/regexp.c => src/plugins/regexp.c
rename : plugins/surbl.c => src/plugins/surbl.c
rename : protocol.c => src/protocol.c
rename : protocol.h => src/protocol.h
rename : upstream.c => src/upstream.c
rename : upstream.h => src/upstream.h
rename : url.c => src/url.c
rename : url.h => src/url.h
rename : util.c => src/util.c
rename : util.h => src/util.h
rename : worker.c => src/worker.c

* Add determining page size function to mem_pool library
* Add simple statistic structure that is placed in shared memory and used for gathering server's stats

* Add main logging functions (log to file, syslog and console)
* Handle log reopening

* Add ability to handle multiply recipients
* Reflect changes to perl library

* Stylify and fix util functions that was gathered from libutil code (memory allocation)
* Fix protocol and network functions
* Fix some memory allocation issues

* Add initial implementation of control interface

* Add initial implementation of regexp module

* Parse header regexps in other way (header_name=/some_regexp/flags)

* Add support of shared memory chunks to memory pool allocator. Also add locking support (spin mutexes)
* Add simple test case for shared memory allocation

* Implement composite symbols

* Configure modules when worker starts for simplifying reconfig procedure
* Add two behaviour types of memory allocator: greedy and ungreedy
* Adopt surbl module for new configure style

* Implement destructors stack in memory pool, so there is now
  convinient way to free objects in pool that was allocated by other
  memory allocation mechanics (e.g. GObject).
  Destructors must be added in pool manually by calling memory_pool_add_destructor
  function.

* Add utility function for parsing regexp from given string (type flags and pcre flags)

* Implement expression parser (convertor to inverse polish record)
* Improve configure system by implementing dependencies
* Add .depend files for subdirs that requre it
* Write simple test for expressions parser

* Write protocol output functions
* Fix test suite build under linux

* Add routines to perl api to access new results adding function and getting param function
  this allows accessing to modules config from perl modules

* Remove unused debug messages from url library

* Add filter processing function which implements new filter's logic

* Rework config file memory allocation to separate memory pool for easy reloading
  without calling of ~1000 free syscalls
* Add memory_pool_alloc0 for initializing newly allocated space in pool with zeroes

* Implement factors consolidation function (default consolidation function for metrics)

* Rework logic of filters
* Add some documentation to rspamd (about new filters logic and about protocol)

* Small updates to memory pool library
 - fix cases when new chunk is allocated
 - add memory pool allocator statistics
 - let it work in multi-threaded environment
 - add strdup function for convinience
* Use memory pool allocator more widely to avoid memory leaks in future and optimize performance
* Task pool chunk size is now pre-defined constant (16 Kb currently)

* Optimize memory pools allocator
* Add test case for memory pools

* Use internal task pool for memcached operation exported for perl
* Make AV reference mortal as it is described in perlxs (3)

* Place all protocol logic in separate file
 - simplify protocol parsing logic
 - add compatibility with sa-spamd
 - TODO: add protocol output for all commands

* Avoid realloc for memory pools by making memory pool chains

* Add memory pool support.
 - memory pools would be used in modules for allocating task specific data without freeing it separately
 - memory pools growth is implemented as multiplying by 2 its length (for avoiding multiply reallocs)
 - when memory pool is freed all data that was allocated from this pool is freed too