[Fix] Fix get_content method

Issue: #1759

[Feature] Multimap: checking of symbol options

[Minor] Add some sanity checks when managing monitoring timeouts

[Feature] Allow to configure monitored

[Fix] Avoid changing content-transfer-encoding header's value

[Fix] ARC: Fix Lua 5.3 compatibility; timestamp should be integer

Merge pull request #1761 from mkuron/multimap_cidr-1.6

Backport "IP netmask support for Redis multimap" to 1.6

Minimum netmask in Redis multimap

Use HMGET to query all netmasks at once in multimap

IP netmask support for multimap

Merge pull request #1746 from fatalbanana/rspamd-1.6

Rspamd 1.6: backports

[Fix] Milter headers: custom headers: removing headers

[Fix] Header checks: REPLYTO_UNPARSEABLE rule

[Fix] Header checks: Fix get_raw_header method

[Minor] WHITE_ON_WHITE: Use per-part transparency length

[Fix] WHITE_ON_WHITE: Ensure score is matched to part that fired the rule

Fix lua_util_is_utf_spoofed logic

When compiled against libicu < 51 the list of allowed characters was
set to none, so all strings were flagged as spoofed.

Fixes #1689.

[Minor] Ratelimit: Custom limits: Pass task to get_limit

More htmlEscapes.

Also escape message ID

Escape HTML in cells by using underscores escaper

Release 1.6.2

* [Conf] Remove Rambler email bl for now
* [Conf] Switch RAMBLER_URIBL to a locally managed source
* [CritFix] Switch from ragel to C for Content-Type parsing
* [Feature] Add `-e` option for lua_repl
* [Feature] Add per-domain emails normalisation rules
* [Feature] Add sessions cache to debug dangling sessions
* [Feature] Add short_text_direct_hash for fuzzy check module
* [Feature] Add text_part:get_stats function
* [Feature] Allow to add custom processing script for surbl
* [Feature] Allow to check reply-to email
* [Feature] Allow to customize spam header, remove existing spam headers
* [Feature] Allow to disable specific workers in the config
* [Feature] Allow to discard messages instead of rejection
* [Feature] Allow to specify custom delimiter in emails plugin
* [Feature] Allow to specify custom User-Agent for rspamc
* [Feature] Allow to store symbols data in Clickhouse
* [Feature] Allow to use HTTPS when connecting to Clickhouse
* [Feature] Enable sessions cache tracking for milter connections
* [Feature] Implement per-line mode in lua_repl (like `perl -p`)
* [Feature] Implement rdns-curve plugin based on rspamd cryptobox
* [Feature] Improve maps cached data lifetime
* [Feature] Improve maps checking frequency
* [Feature] Improve monitored timeouts logic
* [Feature] milter_headers: add `extended_headers_rcpt` option
* [Feature] Milter headers: Add X-Spam-Flag to rmilter-compatibility headers
* [Feature] Milter headers: remove-header routine
* [Feature] Multimap: received filters for extracting TLDs from hostnames
* [Feature] Normalize email aliases in emails module
* [Feature] Re-add rambler email bl (as hashed list)
* [Feature] Reload file maps more frequently
* [Feature] Rework newlines strip parser one more time
* [Feature] Skip updates for messages scanned via controller
* [Feature] Split long DKIM public keys
* [Feature] Store more data when stripping newlines
* [Feature] Support SPF macros transformations
* [Feature] Support suppressing DMARC reports for some domains
* [Fix] Add missing `break` statement
* [Fix] Allow modifiers in SPF macros
* [Fix] DKIM sign tools: edge-cases around use_esld
* [Fix] Do not cache SPF records with macros
* [Fix] Do not overwrite score when setting pre-action
* [Fix] Fix comparision logic
* [Fix] Fix DKIM base64 folding for milter flagged messages
* [Fix] Fix emails module configuration
* [Fix] Fix folding for arc headers when milter interface is used
* [Fix] Fix gmail dots removal
* [Fix] Fix rspamc detection in greylist module
* [Fix] Fix some more issues with HTTP maps
* [Fix] Milter sessions can live forever
* [Fix] Normalize fuzzy probability better
* [Fix] Plug memory leak
* [Fix] RBL: Fixed hashed email address lookups
* [Fix] Try to deal with brain-damaged milter behaviour
* [Fix] Use `\n` to fold headers for milter
* [Rework] Allow to use custom callback for monitored checks
* [Rework] Further steps towards one process monitoring
* [Rework] Send health checks from a single worker
* [WebUI] Round-up throughput summary values

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Fix] Fix some more issues with HTTP maps

[Minor] Fix config

[Minor] Download updated data even if cache is still available

[Feature] Re-add rambler email bl (as hashed list)

[Fix] Fix emails module configuration

[Feature] Allow to specify custom delimiter in emails plugin

[Minor] Leave the real url request instead of Lua processed

[Conf] Switch RAMBLER_URIBL to a locally managed source

[Feature] Improve maps checking frequency

Merge pull request #1735 from moisseev/patch-1

[Minor] Update redirectors list

Merge pull request #1734 from fatalbanana/maps

[Feature] Reload file maps more frequently

[Minor] Update redirectors list

[Feature] Reload file maps more frequently

[Minor] RBL: don't register duplicate monitoring

[Minor] Import changes from public suffix list

[Feature] Allow to add custom processing script for surbl

[Feature] Improve maps cached data lifetime

[Minor] Further fixes to the monitored logic

[Feature] Improve monitored timeouts logic

We now reduce timeout on the first error when a monitored object is used
and reduce it when we have subsequent errors when a monitored object is
dead. In conjunction with the previous changes, it should make
monitoring really clever and responsive.

[Rework] Send health checks from a single worker

[Rework] Further steps towards one process monitoring

[Rework] Allow to use custom callback for monitored checks

[Feature] Add `-e` option for lua_repl

[Feature] Implement per-line mode in lua_repl (like `perl -p`)

[Minor] Reduce hfilter log noise

[Feature] Allow to discard messages instead of rejection

Issue: #1723

[Minor] Add /ping path to the controller

[Fix] Milter sessions can live forever

[Fix] Plug memory leak

Issue: #1697

[Minor] Tweaks for sessions cache

[Feature] Enable sessions cache tracking for milter connections

[Feature] Add sessions cache to debug dangling sessions

[Minor] Add configuration knobs for sessions cache

[Minor] Do not overwrite score occasionally

[Fix] Fix gmail dots removal

[Fix] Do not cache SPF records with macros

[Feature] Support SPF macros transformations

[Fix] Allow modifiers in SPF macros

[Fix] Add missing `break` statement

[Feature] Allow to specify custom User-Agent for rspamc

[Fix] Normalize fuzzy probability better

[Feature] Skip updates for messages scanned via controller

Rationale: controller worker is not designed to perform scan jobs,
hence, we check for `Password` header or check `User-Agent` for `rspamc`
and skip some of rules parts:

- DMARC reports
- Greylisting
- Ratelimits
- Ip score update
- Clickhouse export

[Minor] Reduce logger level

[Minor] Fix aliases removal function

[Fix] Do not overwrite score when setting pre-action

[Minor] Tests: don't try bind ports

[Minor] Clickhouse: add missing comma

[Feature] Implement rdns-curve plugin based on rspamd cryptobox

[Minor] Do not redefine uthash allocation routines

[Conf] Remove Rambler email bl for now

[Minor] Fix various issues

[Feature] Add per-domain emails normalisation rules

[Minor] Lowercase email addresses

[Minor] Allow base32 encoding for emails request

Merge pull request #1714 from fatalbanana/emails

[Minor] Fix emails plugin

Merge pull request #1713 from IanDarwin/master

[Minor] In OpenBSD ports too

Merge pull request #1711 from moisseev/spelling

[Refactor] Correct misspellings in program code

[Minor] Fix emails plugin

In OpenBSD ports too

[Minor] Add steampowered.com to spf+dkim whitelist

[Feature] Allow to check reply-to email

[Feature] Normalize email aliases in emails module

[Minor] Allow to cut hashes when checking emails

[Minor] Move emails normalization to the lua library

Merge pull request #1712 from moisseev/patch-1

[Oops] Restore a proper name

[Oops] Restore a proper name

Found by @dimejo

[Fix] Fix DKIM base64 folding for milter flagged messages

[Fix] RBL: Fixed hashed email address lookups

[Refactor] Fix misspelled variable name in cdb_make.c

[Refactor] Correct misspelled function name in Rspamd agent for Exim

Revert "Debian: Update changelog."

This reverts commit f83310f8e9360bfe647f8369894d7b4a023fa304.

Merge pull request #1705 from sebastianlipponer/master

Fix Debian package build.

[Minor] Filter NaNs from ANN training vectors

[Refactor] Correct misspelled variable name in lua_redis

[Refactor] Correct misspelled messages in tests

[Refactor] Correct misspelled `rspamd_smtp_recieved_parse`

Merge pull request #1710 from moisseev/spelling

[Minor] Massive spelling correction

[Minor] Fix internal utils