[Feature] Rework includes system in the configuration

[Feature] Add LOCAL_CONFDIR option

[Doc] Describe new way to redefine symbols

[Feature] Rework includes and configuration system

[Feature] Allow priorities in dynamic updates

[Feature] Add default dynamic updates configuration

[Fix] Fix HTTP maps updates

[Feature] Add function to *properly* print HTTP date

strftime is badly broken and polluted by brain-damaged people that
think that locales in libc is a good idea. It isn't.

[Feature] Use Last-Modified header

[Fix] Fix multiple issues with http maps

[Fix] Fix parsing of HTTP maps

[Minor] Add restart to systemd service

Issue: #91
Reported by: @damned-trooper

[Fix] Add guard when searching for email urls

[Fix] Do not allow empty IP addresses to be parsed

[Fix] Skip invalid addresses when parsing IP lists

[Minor] Zero new nodes in btrie

[Fix] Plug memory leak in lua_fann

[Minor] Explicitly set ENABLE_LUAJIT in debian rules

[Fix] Fix versions comparison

[Feature] Allow optional symbols registration

[Feature] Add more features to dynamic updates

[Fix] Resort symbols cache if it has been changed

[Fix] Fix calling of lua map callbacks

[Fix] Initialize lua cryptobox module

[Feature] Allow to set delayed callback for lua maps

[Fix] SA uses mime recipients/senders for everything

[Minor] Disable workaround for html parser

[Fix] Use caseless comparison in dmarc module

[Feature] Add lua functions for caseless comparison

[Feature] Add map:set_sign_key and map:get_sign_key

[Feature] Add map:get_proto lua API method

[Feature] Add map:is_signed method

[Fix] Temporary disable ignoring of bad HTML tags

Merge pull request #547 from kristous/patch-1

Update phishing.md

[Rework] Move maps code to a separate lua unit

[Feature] Return map object for further actions

Map object could be used to manage maps, for example, by LUA API.

Update phishing.md

found a small typo :-)

[Minor] Use utf8 length for subject

[Feature] Add util.strlen_utf8 lua function

Merge pull request #546 from moisseev/patch-2

Add LONG_SUBJ rule

Add LONG_SUBJ rule

[Feature] Rework and abstract lua maps API

- Now all maps share the same lua object table.
- Remove bad destructions code since objects are reallocated during maps
  operations
- Fix and unify various parts of maps management
- Pass map object to lua callbacks

[MajorFeature] Add preliminary version of updates

This plugin is intended to load dynamic updates for rspamd. Now its
functionality is very limited.

[Minor] Fix lua_cryptobox registration

[Minor] Add guards for NaN values

[Feature] Add support for WLBLEval SA plugin

[Minor] Fix actions setting

[Fix] Properly set priority for rules with negative score

[Fix] Fix race condition in lua_tcp module

[Feature] Add task:set_metric_action lua API method

rspamd_config:set_metric_symbol({table})

Set the value of a specified symbol in a metric.
This function accepts table with the following elements:

- `name`: name of symbol (string)
- `score`: score for symbol (number)
- `metric`: name of metric (string, optional)
- `description`: description of symbol (string, optional)
- `group`: name of group for symbol (string, optional)
- `one_shot`: turn off multiple hits for a symbol (boolean, optional)
- `flags`: comma separated string of flags:
   + `ignore`: do not strictly check validity of symbol and corresponding rule
   + `one_shot`: turn off multiple hits for a symbol
- `priority`: priority of symbol's definition

[Fix] Set 'ignore' flags from symbols coming from SA

[Feature] Allow to specify flags for metric symbols

[Fix] Add watcher for lua_tcp module

[Fix] Lowercase and cache the principal recipient

Issue: #544
Reported by: @sativouf

[Feature] Improve tests for siphash

- Add fuzz tests
- Add variable length input tests
- Check sanity of siphash implementation on start

[Fix] Don't use _memcpy in assembly

[Feature] Add AVX2 version of siphash

This version has been taken from the google code at
https://github.com/google/highwayhash/

The final code is obtained by compiling c++ using clang-3.8 compiler.

[Minor] Disable shutdown workaround for HTTP

Merge pull request #543 from fatalbanana/master

[Fix] Avoid problematic operation on possibly nil value in once_received

[Fix] Avoid problematic operation on possibly nil value in once_received

[Fix] Add more guards for IP address

[Feature] SA plugin can now set missing scores for rspamd

[Minor] Fix spelling in log message

[Fix] Handle some bad IP URLs

[Feature] Export versions vars to UCL

[Feature] Add rspamd_version function to LUA API

[Minor] Temporary disable scheduler optimization

It is not very well investigated and might decrease performance in some
cases I care about.

[Feature] Improve symbols sorting function

[Fix] Fix redis stats to avoid double free

[Feature] Add lockless logging

Sometimes, it is needed to turn off logging mutex to avoid recursive
mutex obtaining. It is especially useful to do it within children wait
code in the main processes dispatcher.

[Minor] Fix race condition when removing hash

[Minor] Fix closing race in fuzzy storage

[Fix] Fix sorting order for symbols cache

[Fix] Fix `all` in spf redirects

Issue: #542
Reported by: @sativouf

[Fix] Fix crash on scan

[Minor] Fix reject action parsing

[Minor] Hide rdrand checks for non-x86 platforms

[Feature] Add priorities for actions

Add dedicated API to modify action limits with priorities from different
configuration place. This follows the logic of symbols' priorities and
will be used for dynamic rules and override definitions.

[CritFix] Fix issue with inconsistent resorting

This is a long term issue that was in rspamd for many years. Sometimes,
some rules are not scanned or scanned twice. That happened because of
resorting called during pending tasks exist in the wait queue. In this
case, resorting breaks logic of symbols processing, causing unprocessed
rules to be treated as processed and, vice versa, processed rules as
unprocessed.

This commit introduces refcounted approach for resorting keeping state
for each individual task. This allows to resort independently from the
existing tasks waiting in the queue.

[Feature] Rework dynamic symbols for new metrics API

[Fix] Fix some cases for RDNS_NONE

[Fix] Don't set default values for hostname and helo

[Feature] Add ignore_received option

In this mode rspamd ignores data from the first received (it might be
produced by some third party and not our MTA)

[Fix] Fix placement of RDNS checks

[Feature] Add RDNS_NONE rule

[Minor] Implement workaround for legacy clients

Steal lua_text ownership to prevent gc

Add more reasonable errors for lua_tcp module

Add more guards for mutable cache

Implement versioning in symbols cache to allow modiifications on fly

Allow to set redis db and password in lua_redis

Use object priority when adding symbols from ucl

Allow overwrite scores with the same priority

Cleanup event

Destroy session if a client has gone.

Add special timeout when spending too much in sync processing

Increase stack size after fork

Fix non-UTF regexps for pcre2

Fix task:has_flag method

Some fixes to the previous commit