[Minor] Another fix for ticks

Merge pull request #1888 from fatalbanana/docstr

[Fix] Table parameter for rspamd_config:add_doc()

[Fix] Another fix for rdtcs

Issue: #1885

[Fix] Table parameter for rspamd_config:add_doc()

 - MFH: rspamd-1.6

[Fix] Fix ticks processing

[Fix] Stop using of g_slice...

[Fix] Fix couple of warnings

[Fix] Fix extra hits in PCRE mode for regular expressions

MFH: rspamd-1.6
Issue: #1880

[Feature] Use rdtsc where possible

Merge pull request #1882 from croessner/sptr

[Minor] Added check_authed and check_local for spamtrap

[Minor] Added check_authed and check_local for spamtrap

[Feature] Rework short hashes generation to avoid FP

[Minor] Preliminary implementation of dkim reputation

[Minor] Avoid unnecessary dynamic allocation

Merge pull request #1879 from moisseev/mime-types

[Fix] Fix bad extension check

[Conf] Use more data from rspamd.com fuzzy storage

MFH: rspamd-1.6

[Fix] Fix bad extension check

when next-to-last extension is a number, e.g. 23.10.2017.scr

[Fix] Fix bad archive characters stripping

MFH: rspamd-1.6

[Test] e-Mail detection

[Minor] Update public suffix list

[Fix] Load skip map from all processes as shared cache is unavailable

MFH: rspamd-1.6

[Fix] Some more fixes towards emails detection

MFH: rspamd-1.6

[Fix] Actively load skip hashes map in fuzzy storage

MFH: rspamd-1.6

[Minor] Grr, forgot to save change for the previous commit

MFH: rspamd-1.6

[Fix] Fix multiple headers in DKIM headers list

MFH: rspamd-1.6
Issue: #1876

[CritFix] Fix newlines detection

MFH: rspamd-1.6

[Fix] Further tokenization fixes

MFH: rspamd-1.6

[Fix] Do not treat script content as text

MFH: rspamd-1.6

[Feature] Filter nan and inf when adding scores

MFH: rspamd-1.6

[Fix] Deal with another case when processing exceptions

MFH: rspamd-1.6

[Fix] Fix emails detection

MFH: rspamd-1.6

[Fix] Do not strip last character in the last word

MFH: rspamd-1.6

[Fix] Fix another tokenization issue

MFH: rspamd-1.6

[Minor] Fix idempotent stage fix

[CritFix] Fix milter commands pipelining

Merge pull request #1865 from moisseev/patch-1

[Fix] Fix empty threshold check in greylisting module

[CritFix] Another portion of tokenization fixes

MFH: rspamd-1.6

[Fix] Do not ignore short words

MFH: rspamd-1.6

[Fix] Lowercase words

MFH: rspamd-1.6

[Minor] Allow to get words from text parts

[Minor] Fix lua_text processing in lua_util_tokenize_text

[Fix] Fix empty threshold check in greylisting module

[Fix] Use greylisting threshold in greylisting module

[Minor] Add utility to read user's input with prompt

[Minor] Attach url reputation selector

[Feature] Add urls reputation to the reputation framework

[Minor] Add spairs function to lua lib

[CritFix] Fix memory leak in spf caching logic

MFH: rspamd-1.6

[Fix] Plug memory leak in lua_tcp

[Minor] Add ip reputation setter logic

[Rework] Add frame for new reputation based IP score module

[Minor] Avoid out of boundary reads

[Minor] Plug memory leak in saving stats

[Feature] Periodically save rspamd stats to disk

Issue: #1823

[Feature] Allow to verify signatures from HTTP headers in maps

[Minor] Do not pollute logs with strange error message

[Fix] Fix processing of idempotent rules when autolearn fails

Issue: #1846

Merge pull request #1863 from fatalbanana/reputation

[Minor] Silence warnings

[Minor] Silence warnings

 - And other small fixes for reputation module

[Feature] Support Expires header when using HTTP maps

[Minor] Use config field

[Minor] Add some generic applicability settings for reputation

[Fix] SpamAssassin: Fail check_freemail_header if regexp didn't match

 - MFH: rspamd-1.6

[Minor] Save settings table in lua cache

Merge pull request #1858 from gaetronik/fix-undefined-symbol-name-preprocess

Fix undefined symbol name in webui.

Fix undefined symbol name in webui.

The EscapeHTML function called with undefined value return "undefined" as string. This PR avoid giving undefined value to sym.name

{Feature] Treat whitelisted recipients as a map in ratelimit

[Minor} Allow to load maps directly from ucl

[Minor] Allow to add custom maps from ucl in Lua

[Minor] Slightly optimize hash lookup

[Feature] Add DKIM trace symbol

[Minor] Further steps to get rid of metrics support

[Minor] Adjust metric score when changing symbol's score

[Minor] Deny symbols adding on idempotent stage

[Minor] Remove multiple metrics support when adding results

[Minor] Start moving of ip reputation to the new framework

[Minor] Add redis backend

[Minor] Add basic DNS backend to the reputation plugin

[Feature] Add framing for the new reputation generic plugin

[Minor] Accept tables in lua_set_mempool_variable

[Minor] Allow to store buckets of numbers in lua mempool

[Minor] Inject filename and scan time to json output

[Fix] Fix obscured url in format user@@example.com

MFH: rspamd-1.6

[Fix] Erase unknown HTML entities

MFH: rspamd-1.6

[Minor] Filter NaN values when storing training data

[Conf] Disable fann_redis module by default

[Fix] Authentication Results: Fix SPF smtp.mail_from

 - MFH: rspamd-1.6

Merge pull request #1854 from moisseev/test

[Test] Add test for next-to-last double bad extension

[Test] Add test for next-to-last double bad extension

[Fix] Fix DKIM forgeries via multiple headers

MFH: rspamd-1.6
URL: http://noxxi.de/research/breaking-dkim-on-purpose-and-by-chance.html

[Feature] Implement headers flags in mime parser

MFH: rspamd-1.6

Merge pull request #1852 from moisseev/mime-types

[Feature] Catch next-to-last bad extension

[Feature] Catch next-to-last bad extension

e.g. .scr.xz

This technique is commonly used by spammers as xz and bzip2 strip out extension on decompression.
Also it catches xz and bzip2 compressed files with faked extensions like .scr.gz .scr.lzh .scr.uue.

[Minor] Skip non-needed attributes in 7z

[Minor] Fix utf16 conversion

[Feature] Finalize 7zip files support

[Minor] Add 7z files parsing

[Minor] Another useless 7zip section parser

[Minor] Further additions to 7zip parser

[Minor] More 7zip format support knobs