[CritFix] Fix mime headers processing

Issue: #634
Reported by: @AdUser

[Fix] Try to fix false positive URL detections in text parts

Merge pull request #630 from fatalbanana/rspamd-1.2

[Rspamd 1.2] [Fix] Fix Exim shutdown patch

[Fix] Fix Exim shutdown patch

[Feature] Enable workaround for exim

[Feature] Backport shingles static test

[CritFix] Fix levenshtein distance calculations

[Fix] Fix max_train setup in ANN module

[CritFix] Fix redis structure by adding {NULL, NULL} member

Issue: #609
Reported by: @moisseev

Fix build with unmodified LibreSSL opensslv.h

Add test for LibreSSL to use "old" methods when OPENSSL_VERSION_NUMBER is 0x20000000L

[Fix] Repair optional dependencies

Revert "[CritFix] Pre-filters and post-filters were completely broken"

This reverts commit 36bccebd24cd0b44f77536e80816b1b3dd93e5e2.

[CritFix] Really skip filters in case of pre-result set

[CritFix] Pre-filters and post-filters were completely broken

[CritFix] Restore the intended pre-filters behaviour

Previously, filters and post-filters were checked even if pre-filter has
set some result. Now pre-result efficienly makes a trapdoor to writing
reply (as it was before 1.0).

[Fix] Fix ipv6 mask application

Release 1.2.6

* Fix parsing of URLs in texts
* Fix creating of URLs from LUA
* Fix some more URL detector issues
* Fix unit tests
* Fix JIT compilation for PCRE2 expressions
* Fix JIT usage for PCRE2
* Fix UTF8 mode in PCRE2
* Add workaround for pre-historic compilers (#605)
* Fix and rescore R_PARTS_DIFFER logic
* Properly set lua paths for tests
* Fix SA rawbody processing - exclude top part
* Store text parts content with newlines stripped
* Properly support SA body regexps
* Fix body rules in SA plugin
* Fix setting of score for parts differ
* More fixes to parts distance calculations
    - Use hashed words instead of full words for speed
    - Improve levenstein distance calculations and penalise replaces
    - Always return number from 0 to 1
    - Use g_malloc instead of alloca
* Fix percents output in R_PARTS_DIFFER
* Plug memory leak in dkim module
* Plug minor memory leak in regexps creation

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Plug minor memory leak in regexps creation

[CritFix] Plug memory leak in dkim module

[Minor] Fix percents output in R_PARTS_DIFFER

[Fix] More fixes to parts distance calculations

- Use hashed words instead of full words for speed
- Improve levenstein distance calculations and penalise replaces
- Always return number from 0 to 1
- Use g_malloc instead of alloca

[Fix] Fix setting of score for parts differ

[Fix] Fix body rules in SA plugin

[CritFix] Properly support SA body regexps

[Feature] Store text parts content with newlines stripped

[CritFix] Fix SA rawbody processing - exclude top part

[Test] Properly set lua paths for tests

[Test] Disable broken tests

[Minor] Reduce debug level

[Fix] Fix and rescore R_PARTS_DIFFER logic

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Add workaround for pre-historic compilers

Issue: #605

[Fix] Fix UTF8 mode in PCRE2

[Fix] Fix JIT usage for PCRE2

[Fix] Fix JIT compilation for PCRE2 expressions

[Test] Fix unit tests

[CritFix] Fix some more URL detector issues

[Fix] Fix creating of URLs from LUA

[CritFix] Fix parsing of URLs in texts

Release 1.2.5

* Plug an important memory leak in headers getting code
* Remove some bad domains from whitelists

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Update version to 1.2.5

[CritFix] Plug memory leak in headers getting code

[Fix] Remove some bad domains from whitelists

Release 1.2.4

* Implement new multipattern matcher that uses hyperscan if possible
* Use mutlipattern for lua_trie code
* Add utility methods for multipattern
* Use multipattern in url matcher
* Add escape functions for hyperscan
* Allow to optimize lua -> C transition by flattening table args
* Optimize hot paths in SA plugin
* Optimize rspamd_re_cache_type_from_string
* Allow empty tries
* Fix extraction of URLs from Subject
* Allow to have different flags for different patterns in multipattern
* Add common directory for hyperscan cache to config
* Implement caching for hyperscan multipattern
* Attach domain part to `R_SUSPICIOUS_URL` (by @moisseev)
* Allow multipattern scans to be nested for the case of hyperscan
* Simplify SURBL redirector search code and avoid ac_trie
* Add two way substring search algorithm
* Avoid acism usage to find gtube pattern
* Fix processing of empty headers
* Allow to disable pthread mutexes on broken platforms
* Make web interface not send password in query strings (#585) by @fatalbanana
* Add maximum delay to ratelimit module
* Backport fix for empty files inclusion from libucl
* Fix settings id setup
* Add min_learns option to classifiers
* Use more clever to utf8 conversion strategy
* Fix disabling of virtual symbols in the settings
* Rework settings to work properly in metric-less configuration
* Set the default limit for classifier
* Fix ttl based expiration from LRU cache
* Rework DKIM module to use OpenSSL for digests
* Fix mailto urls parsing with hyperscan
* Do not set obscured flag for urls starting with spaces
* Fix crash on redis learn
* Fix ratelimit ctime setting

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Fix] Fix ratelimit ctime setting

[Fix] Fix crash on redis learn

[Fix] Do not set obscured flag for urls starting with spaces

Issue: #593

Merge pull request #598 from moisseev/patch-1

Fix typos

Fix typos

[CritFix] Fix mailto urls parsing with hyperscan

[Feature] Rework DKIM module

- Use openssl instead of g_checksum for speed
- Move private parts into .c file

[CritFix] Fix ttl based expiration from LRU cache

[Doc] Improve classifiers documentation

[Feature] Set the default limit for classifier

We now disallow statistics to be used unless at least 200 learns has
been performed for the specified classifier

[Fix] Rework settings to work properly in metric-less configuration

[Fix] Fix disabling of virtual symbols

[Feature] Use more clever to utf8 conversion strategy

[Minor] Make fstrgrow non-static function

[Minor] Be more informative about configuration errors

[Feature] Add min learns to classifiers

[Fix] Fix application of settings identified by ID

[Fix] Fix settings id setup

[Fix] Backport fix for empty files inclusion from libucl

Issue: #596
Reported by: @assistcontrol

[Feature] Print rspamd version

[Minor] Support DragonFly build

Issue: #595

[Doc] Add documentation for the new ratelimit option

[Feature] Add maximum delay to ratelimit module

Merge pull request #594 from fatalbanana/master

[Fix] Make web interface not send password in query strings (#585)

Merge pull request #592 from moisseev/r_suspicious_url

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Fix] Make web interface not send password in query strings (#585)

[Feature] Allow to disable pthread mutexes on broken platforms

[Fix] Fix processing of empty headers

[Fix] Fix parsing of some urls in hyperscan mode

[Feature] Avoid acism usage to find gtube pattern

[Fix] Fix order of arguments in 2-ways search

[Feature] Add two way substring search algorithm

[Feature] Simplify redirector search code and avoid ac_trie

[Fix] Allow multipattern scans to be nested for the case of hyperscan

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Feature] Implement caching for hyperscan multipattern

[Feature] Add common directory for hyperscan cache to config

[Fix] Some more fixes for urls parser

[Fix] Further fixes to urls parsing

[Feature] Use more clever url matcher for hyperscan

[Feature] Allow to have different flags for different patterns

[Fix] Try to handle hyperscan error

[Fix] Fix hyperscan callback invocation

[Fix] Fix lua url

[Feature] Allow single and multiple urls extraction

[Fix] Fix excraction of URLs from Subject

[Feature] Add helper to insert URLs in task structure

[Feature] Add generic function to extract multiple URLs

[Fix] Use multipattern in url matcher

[Minor] Fix callback type

[Feature] Match the beginning of pattern as well

[Feature] Add utility methods for multipattern

[Feature] Use mutlipattern for lua_trie code

[Feature] Allow empty tries

[Feature] Optimize rspamd_re_cache_type_from_string

[Fix] Fix calling of process_regexp after flattening

[Fix] Fix plain version for table args extraction