Merge pull request #3134 from moisseev/patch-1

[Minor] Fix style

[Minor] Fix style

Merge pull request #3132 from andryyy/patch-15

[WebUI] Remove prev form when clicking outside the modal

[Minor] Virustotal: Improve caching

[Minor] Various minor fixes

Remove prev form when clicking outside the modal

1. Function is triggered by click on close button **and** by clicking anywhere outside the modal to close it.
2. Form is being removed instead of hidden.

[Minor] Add tool to convert trivial SA rules to multimap

[Minor] Allow 'upstreams' alias...

[Minor] Fix C stupidity

[Fix] Allow real upstreams configuration

[Minor] Improve logging for upstream failure

[Minor] Rdns: Update loop timestamp if it is cheap

[Minor] Add method ev_now_update_if_cheap

[Fix] Fix upstreams exclusion logic

[Minor] DNS: Add servfail cache

[Conf] Antivirus: Fix the default config

[Feature] Antivirus: Add preliminary virustotal support

Issue: #3109

[Minor] Antivirus: Scan all attachments if required

[Minor] Add better support for non-Linux systems

[Minor] Use CLOCK_MONOTONIC_COARSE where suitable

[Fix] Another try to fix slow callbacks and timers

[Minor] Use slightly better fast PRNGs

[Minor] Slightly improve log message

[Minor] Oops, convert back to int

[Minor] Show real ttl for records

[Minor] Try to fix openblas issue

Issue: #3102 (likely)

[Fix] Fix consistent hashing when upstreams are marked inactive

The idea is to rehash the value when we found that the current upstream is dead
and apply consistent hashing algorithm multiple times.  This is limited by
number of attempts (we try 10 times before giving up). Also cleanup locking
stuff.

[Minor] Fix log message

[Minor] Improve logging

[Minor] Fix crash where inconsistent fuzzy query was sent

[Feature] Clickhouse: Rework Clickhouse collection logic

Issue: #3127

[Minor] Send current timestamp to the periodic callbacks

[Minor] Update event loop timer in lua_http as it can cause troubles

Merge pull request #3128 from moisseev/ics

[Minor] Add non-standard MIME type for iMIP files

Merge pull request #3126 from skorpy2009/patch-2

More text to feature requests ISSUE_TEMPLATE comment

[Minor] Add non-standard MIME type for iMIP files

"application/ics" is non-standard but used by some MUAs

More text to feature requests ISSUE_TEMPLATE comment

[Minor] Update version to 2.2

Release 2.1

* [Conf] Update neural.conf
* [CritFix] Fix dkim verification for multiple headers listed
* [Feature] Add support of uudecode
* [Feature] Allow to explicitly set events backend
* [Feature] Implement configurable limits for SPF lookups
* [Feature] Lua_scanners: Use lua magic for inclusion/exclusion logic
* [Feature] Multimap: Do not check files in office archives
* [Feature] Neural: Add sampling when storing training vectors
* [Feature] SPF: Allow to disable AAAA checks in configuration
* [Feature] Spf: Add limits configuration support
* [Feature] Store etag in cached HTTP maps + better logging
* [Feature] Support segwit BTC addresses, fix LTC verification
* [Feature] Support uuencoding
* [Fix] Add configurable number of threads for OpenBLAS
* [Fix] Add workaround for ragel 7 in hyperscan related maps code
* [Fix] Another fix for numeric urls parsing
* [Fix] Correct EMA time calculations
* [Fix] Do not treat archives as text
* [Fix] Do not use strdup on data extracted from lua
* [Fix] Fix a failure calcuating URL reputation.
* [Fix] Fix crash due to constructors init order
* [Fix] Fix crash on parts with no cd
* [Fix] Fix empty prefilters that require mime structures
* [Fix] Fix event loop creation
* [Fix] Fix issues sending DMARC reports.
* [Fix] Fix misprint
* [Fix] Fix saving of the file maps
* [Fix] Fix size calculations when converting from utf16
* [Fix] Fix support of disable_monitoring in rbl
* [Fix] Fix use-after-free
* [Fix] Fix zip files check to relax requirements
* [Fix] Important hiredis fixes
* [Fix] Lot's of fixes in maps check logic
* [Fix] Lua_tcp: Deal with temporary fails on write
* [Fix] Lua_tcp: Make write errors fatal and rework error handlers
* [Fix] Meta: Filter some more values
* [Fix] Neural: Add protection agains infinities
* [Fix] Oops, fix math.huge invocation
* [Fix] Plug memory leak
* [Fix] Sigh, another email to string fix
* [Fix] Try to fix another ownership race in ssl connection
* [Fix] Uuencode: Fix parsing of corrupted uuencode
* [Fix] lua_scanners - razor rename need_check function
* [Rework] Require CMake 3.9 to work, remove manual lto crap

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Fix] Fix saving of the file maps

[Minor] Improve trivial maps handling

[Minor] Lua_http: Preallocate body when parsing tables

[Minor] Stop task timeout timer on idempotent stage

[Fix] Try to fix another ownership race in ssl connection

[Minor] Always stop event on connection reset

[Fix] Lot's of fixes in maps check logic

[Feature] Allow to explicitly set events backend

[Fix] Plug memory leak

[Fix] Fix crash on parts with no cd

[Fix] Fix event loop creation

[Minor] Fix error propagation

Merge pull request #3122 from philr/fix_dmarc_reporting_addr_logging

[Fix] Fix not logging DMARC reporting addresses

Merge pull request #3121 from philr/fix_url_reputation_filter

[Fix] Reputation: Fix a failure when calcuating URL reputation

[Minor] Fix not logging DMARC reporting addresses.

`reporting_addr` uses the email address strings as keys so
`table.concat` won't produce any output.

[Minor] Another uuencode fix

[Fix] Fix a failure calcuating URL reputation.

`url_reputation_filter` was attempting to lookup the token key returned
in the `get_token` callback in an integer-indexed table of requests.
Change to looking up the request by its index.

Commit 73d2cee changed from using `gen_url_queries` to
`lua_util.extract_specific_urls` in the assignment of `requests`.
The latter just returns a list of URLs. The former returns the TLD along
with the number of hits. The URL score calculation uses the number of
hits. Revert to using `gen_url_queries`.

[Minor] Sigh, another next_check fixes for HTTP maps

[Fix] Uuencode: Fix parsing of corrupted uuencode

[Minor] Arc: Fix symbol insertion

[Minor] Update cached files when checking HTTP maps

[Minor] Reduce remain

[Feature] SPF: Allow to disable AAAA checks in configuration

[Minor] Oops, check for UBRK_DONE first

[Minor] Try to fix HTTP maps check timeouts

[Minor] Remove another crap

[Minor] Cleanup crap

[Feature] Spf: Add limits configuration support

[Feature] Implement configurable limits for SPF lookups

Merge pull request #3120 from moisseev/patch-2

[Minor] Fix misprint

[Minor] Fix misprint

[Minor] Neural: Fix random sampling

Issue: #3119

Merge pull request #3118 from moisseev/patch-1

[Conf] Update neural.conf

[Minor] Add safety check when using icu ubrk iterators

[Conf] Update neural.conf

Merge pull request #3115 from citrin/fix-lua-url-doc

Fix docs for rspamd_url lua module

[Feature] Support uuencoding

[Feature] Add support of uudecode

[Minor] Document `image` flag in url:get_flags()

[Minor] Fix doc comment for url.init

[Feature] Support segwit BTC addresses, fix LTC verification

[Fix] Fix support of disable_monitoring in rbl

[Minor] Fix documentation

[Minor] Spamassassin: Exclude symbol name from options

Merge pull request #3114 from citrin/drone-convert

Drone convert

Merge pull request #3112 from denpaforks/p0f-devel

[Minor] Fixes for p0f plugin

Merge pull request #3111 from philr/fix_dmarc_report_sending

[Fix] Fix issues sending DMARC reports

Default stack size should be enough for build without ASAN

It can be useful to know if stack usage will be too high.

Remove unused CMake variable

If was removed in:
https://github.com/rspamd/rspamd/commit/03eabb4c570d30b30d2406fe4ce40d5073be2861

Convert Drone pipeline to Drone 1.x syntax

[Minor] Fix x-os-fingerprint header

Pass correct parameter to add_header function and use double when unpacking integers from mempool

[Minor] Skip cache on missing data

[Fix] Fix issues sending DMARC reports.

Processing the email template was causing a parse error (#3054). This
was caused by the use of `{% ... %}` statements instead of `{= ... =}`
output expressions.

The message was failing to be sent over SMTP, closing the socket after
reading the response to the DATA command and logging the following
errors:

> lua_tcp_arg_toiovec: bad argument at position -1
> lua_tcp_add_write: tcp request has bad data argument at pos 3

This was caused by the number of substitutions made by `gsub` being
added to the message table.

Sending would stop after processing the first message. This was caused
by the sendmail callback function missing a call to
`get_reporting_domain` on a successful outcome.

Resolves #3054.

[Minor] Do not crash if redis cache cannot be reached

[Minor] Log error in a more straightforward way

[Test] Fix neural tests

[Fix] Important hiredis fixes

Hiredis can return error in two ways:

- ctx is NULL and this path is usually handled properly
- ctx->err is not REDIS_OK and this path is totally missing in many places

This change should fix the both cases.

[Fix] Sigh, another email to string fix

[Fix] Another fix for numeric urls parsing

[Minor] Fix tostring tests

[Minor] Lua_url: Another fix for emails to string