[CritFix] Really skip filters in case of pre-result set

[CritFix] Pre-filters and post-filters were completely broken

[CritFix] Restore the intended pre-filters behaviour

Previously, filters and post-filters were checked even if pre-filter has
set some result. Now pre-result efficienly makes a trapdoor to writing
reply (as it was before 1.0).

[Fix] Fix ipv6 mask application

Release 1.2.6

* Fix parsing of URLs in texts
* Fix creating of URLs from LUA
* Fix some more URL detector issues
* Fix unit tests
* Fix JIT compilation for PCRE2 expressions
* Fix JIT usage for PCRE2
* Fix UTF8 mode in PCRE2
* Add workaround for pre-historic compilers (#605)
* Fix and rescore R_PARTS_DIFFER logic
* Properly set lua paths for tests
* Fix SA rawbody processing - exclude top part
* Store text parts content with newlines stripped
* Properly support SA body regexps
* Fix body rules in SA plugin
* Fix setting of score for parts differ
* More fixes to parts distance calculations
    - Use hashed words instead of full words for speed
    - Improve levenstein distance calculations and penalise replaces
    - Always return number from 0 to 1
    - Use g_malloc instead of alloca
* Fix percents output in R_PARTS_DIFFER
* Plug memory leak in dkim module
* Plug minor memory leak in regexps creation

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Plug minor memory leak in regexps creation

[CritFix] Plug memory leak in dkim module

[Minor] Fix percents output in R_PARTS_DIFFER

[Fix] More fixes to parts distance calculations

- Use hashed words instead of full words for speed
- Improve levenstein distance calculations and penalise replaces
- Always return number from 0 to 1
- Use g_malloc instead of alloca

[Fix] Fix setting of score for parts differ

[Fix] Fix body rules in SA plugin

[CritFix] Properly support SA body regexps

[Feature] Store text parts content with newlines stripped

[CritFix] Fix SA rawbody processing - exclude top part

[Test] Properly set lua paths for tests

[Test] Disable broken tests

[Minor] Reduce debug level

[Fix] Fix and rescore R_PARTS_DIFFER logic

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Add workaround for pre-historic compilers

Issue: #605

[Fix] Fix UTF8 mode in PCRE2

[Fix] Fix JIT usage for PCRE2

[Fix] Fix JIT compilation for PCRE2 expressions

[Test] Fix unit tests

[CritFix] Fix some more URL detector issues

[Fix] Fix creating of URLs from LUA

[CritFix] Fix parsing of URLs in texts

Release 1.2.5

* Plug an important memory leak in headers getting code
* Remove some bad domains from whitelists

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Update version to 1.2.5

[CritFix] Plug memory leak in headers getting code

[Fix] Remove some bad domains from whitelists

Release 1.2.4

* Implement new multipattern matcher that uses hyperscan if possible
* Use mutlipattern for lua_trie code
* Add utility methods for multipattern
* Use multipattern in url matcher
* Add escape functions for hyperscan
* Allow to optimize lua -> C transition by flattening table args
* Optimize hot paths in SA plugin
* Optimize rspamd_re_cache_type_from_string
* Allow empty tries
* Fix extraction of URLs from Subject
* Allow to have different flags for different patterns in multipattern
* Add common directory for hyperscan cache to config
* Implement caching for hyperscan multipattern
* Attach domain part to `R_SUSPICIOUS_URL` (by @moisseev)
* Allow multipattern scans to be nested for the case of hyperscan
* Simplify SURBL redirector search code and avoid ac_trie
* Add two way substring search algorithm
* Avoid acism usage to find gtube pattern
* Fix processing of empty headers
* Allow to disable pthread mutexes on broken platforms
* Make web interface not send password in query strings (#585) by @fatalbanana
* Add maximum delay to ratelimit module
* Backport fix for empty files inclusion from libucl
* Fix settings id setup
* Add min_learns option to classifiers
* Use more clever to utf8 conversion strategy
* Fix disabling of virtual symbols in the settings
* Rework settings to work properly in metric-less configuration
* Set the default limit for classifier
* Fix ttl based expiration from LRU cache
* Rework DKIM module to use OpenSSL for digests
* Fix mailto urls parsing with hyperscan
* Do not set obscured flag for urls starting with spaces
* Fix crash on redis learn
* Fix ratelimit ctime setting

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Fix] Fix ratelimit ctime setting

[Fix] Fix crash on redis learn

[Fix] Do not set obscured flag for urls starting with spaces

Issue: #593

Merge pull request #598 from moisseev/patch-1

Fix typos

Fix typos

[CritFix] Fix mailto urls parsing with hyperscan

[Feature] Rework DKIM module

- Use openssl instead of g_checksum for speed
- Move private parts into .c file

[CritFix] Fix ttl based expiration from LRU cache

[Doc] Improve classifiers documentation

[Feature] Set the default limit for classifier

We now disallow statistics to be used unless at least 200 learns has
been performed for the specified classifier

[Fix] Rework settings to work properly in metric-less configuration

[Fix] Fix disabling of virtual symbols

[Feature] Use more clever to utf8 conversion strategy

[Minor] Make fstrgrow non-static function

[Minor] Be more informative about configuration errors

[Feature] Add min learns to classifiers

[Fix] Fix application of settings identified by ID

[Fix] Fix settings id setup

[Fix] Backport fix for empty files inclusion from libucl

Issue: #596
Reported by: @assistcontrol

[Feature] Print rspamd version

[Minor] Support DragonFly build

Issue: #595

[Doc] Add documentation for the new ratelimit option

[Feature] Add maximum delay to ratelimit module

Merge pull request #594 from fatalbanana/master

[Fix] Make web interface not send password in query strings (#585)

Merge pull request #592 from moisseev/r_suspicious_url

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Fix] Make web interface not send password in query strings (#585)

[Feature] Allow to disable pthread mutexes on broken platforms

[Fix] Fix processing of empty headers

[Fix] Fix parsing of some urls in hyperscan mode

[Feature] Avoid acism usage to find gtube pattern

[Fix] Fix order of arguments in 2-ways search

[Feature] Add two way substring search algorithm

[Feature] Simplify redirector search code and avoid ac_trie

[Fix] Allow multipattern scans to be nested for the case of hyperscan

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Feature] Implement caching for hyperscan multipattern

[Feature] Add common directory for hyperscan cache to config

[Fix] Some more fixes for urls parser

[Fix] Further fixes to urls parsing

[Feature] Use more clever url matcher for hyperscan

[Feature] Allow to have different flags for different patterns

[Fix] Try to handle hyperscan error

[Fix] Fix hyperscan callback invocation

[Fix] Fix lua url

[Feature] Allow single and multiple urls extraction

[Fix] Fix excraction of URLs from Subject

[Feature] Add helper to insert URLs in task structure

[Feature] Add generic function to extract multiple URLs

[Fix] Use multipattern in url matcher

[Minor] Fix callback type

[Feature] Match the beginning of pattern as well

[Feature] Add utility methods for multipattern

[Feature] Use mutlipattern for lua_trie code

[Feature] Allow empty tries

[Feature] Optimize rspamd_re_cache_type_from_string

[Fix] Fix calling of process_regexp after flattening

[Fix] Fix plain version for table args extraction

[Feature] Optimize hot paths in SA plugin

[Feature] Allow to optimize lua -> C transition by flattening table args

[Feature] Add escape functions for hyperscan

[Feature] Add implementation of abstract multipattern matcher

[Minor] Update version to 1.2.4

Release 1.2.3

* New DCC module (by @smfreegard)
* Rework whitelist module:
- Now we check different elements for different checks
- MIME from for DMARC
- DKIM signature domain for DKIM
- SMTP from or HELO for SPF
* Fix regexps results combination (*critical*)
* Fix issue with expressions processing (*critical*)
* Optimize strlcpy for aligned input
* Add support of half-closed connection in lua_tcp
* Allow to print compact json in client
* Save required score in history (#581)
* Allow to attach file descriptors to control commands
* Allow to send descriptors from workers to main
* Allow to attach fd when broadcasting to workers
* Implement log pipe feature for rspamd logs analysis
* Add `log_helper` worker
* Add `URIBL_SBL_CSS` (by @smfreegard)
* Add worker scripts functionality
* Add on load hooks for rspamd_config
* Add lua scripts for log_helper worker
* Add generic maillist detector (#584)
* Implement FANN autolearn using log_helper worker
* Rework metrics configuration to allow includes
* Change default value of forced removal in composite rules
* Allow to use assembly version of blake2b on x86 cpu
* Use less precise (but faster) clock if possible
* Insert redirected URL to the urls list
* Allow to get and set callback data for rspamd symbols
* Add binary heap implementation
* Use binary heap for expire algorithms in the hash
* Use `least frequent used` expiration strategy
* Allow to get mime headers from a task
* Add support for mime headers in `regexp` module
* Update Exim patches (by @fatalbanana)
* Allow building rspamd with jemalloc
* Save multipart boundaries
* SA plugin changes:
- Properly handle MIME headers
- Fix eval:check_for_missing_to_header rule
- Implement SA compatible body regexps
- Use sabody rules in SA plugin
* LUA API changes:
- Add util.get_ticks function
- Add util.stat function
- Add task:get_symbols_numeric method
- Add method to get number of symbols in the cache
- Add lua methods to get redirected urls
- Allow to get callbacks for lua symbols
- Add config:set_symbol_callback function

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[CritFix] Fix issue with expressions processing

If the first rule in A + B + C + D > X matched then it was counted like
`1 + 1` and not as `0 + 1` as the accumulator was incorrectly treated in
that case.

[Minor] Properly place timers calculations

[Minor] Hold on with g_slice alteration

[Feature] Use sabody rules in SA plugin

[Fix] Fix sabody rules in regexp cache

[CritFix] Fix regexps results combination

When converting to vectored mode we need to remember results between
consequent calls of regexp match engine. Prior to this patch this
behaviour was broken and caused regexp rules to be matched incorrectly.