Revert "[CritFix] Pre-filters and post-filters were completely broken"

This reverts commit 36bccebd24cd0b44f77536e80816b1b3dd93e5e2.

[CritFix] Really skip filters in case of pre-result set

[CritFix] Pre-filters and post-filters were completely broken

[CritFix] Restore the intended pre-filters behaviour

Previously, filters and post-filters were checked even if pre-filter has
set some result. Now pre-result efficienly makes a trapdoor to writing
reply (as it was before 1.0).

[Fix] Fix ipv6 mask application

Release 1.2.6

* Fix parsing of URLs in texts
* Fix creating of URLs from LUA
* Fix some more URL detector issues
* Fix unit tests
* Fix JIT compilation for PCRE2 expressions
* Fix JIT usage for PCRE2
* Fix UTF8 mode in PCRE2
* Add workaround for pre-historic compilers (#605)
* Fix and rescore R_PARTS_DIFFER logic
* Properly set lua paths for tests
* Fix SA rawbody processing - exclude top part
* Store text parts content with newlines stripped
* Properly support SA body regexps
* Fix body rules in SA plugin
* Fix setting of score for parts differ
* More fixes to parts distance calculations
    - Use hashed words instead of full words for speed
    - Improve levenstein distance calculations and penalise replaces
    - Always return number from 0 to 1
    - Use g_malloc instead of alloca
* Fix percents output in R_PARTS_DIFFER
* Plug memory leak in dkim module
* Plug minor memory leak in regexps creation

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Plug minor memory leak in regexps creation

[CritFix] Plug memory leak in dkim module

[Minor] Fix percents output in R_PARTS_DIFFER

[Fix] More fixes to parts distance calculations

- Use hashed words instead of full words for speed
- Improve levenstein distance calculations and penalise replaces
- Always return number from 0 to 1
- Use g_malloc instead of alloca

[Fix] Fix setting of score for parts differ

[Fix] Fix body rules in SA plugin

[CritFix] Properly support SA body regexps

[Feature] Store text parts content with newlines stripped

[CritFix] Fix SA rawbody processing - exclude top part

[Test] Properly set lua paths for tests

[Test] Disable broken tests

[Minor] Reduce debug level

[Fix] Fix and rescore R_PARTS_DIFFER logic

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Add workaround for pre-historic compilers

Issue: #605

[Fix] Fix UTF8 mode in PCRE2

[Fix] Fix JIT usage for PCRE2

[Fix] Fix JIT compilation for PCRE2 expressions

[Test] Fix unit tests

[CritFix] Fix some more URL detector issues

[Fix] Fix creating of URLs from LUA

[CritFix] Fix parsing of URLs in texts

Release 1.2.5

* Plug an important memory leak in headers getting code
* Remove some bad domains from whitelists

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Update version to 1.2.5

[CritFix] Plug memory leak in headers getting code

[Fix] Remove some bad domains from whitelists

Release 1.2.4

* Implement new multipattern matcher that uses hyperscan if possible
* Use mutlipattern for lua_trie code
* Add utility methods for multipattern
* Use multipattern in url matcher
* Add escape functions for hyperscan
* Allow to optimize lua -> C transition by flattening table args
* Optimize hot paths in SA plugin
* Optimize rspamd_re_cache_type_from_string
* Allow empty tries
* Fix extraction of URLs from Subject
* Allow to have different flags for different patterns in multipattern
* Add common directory for hyperscan cache to config
* Implement caching for hyperscan multipattern
* Attach domain part to `R_SUSPICIOUS_URL` (by @moisseev)
* Allow multipattern scans to be nested for the case of hyperscan
* Simplify SURBL redirector search code and avoid ac_trie
* Add two way substring search algorithm
* Avoid acism usage to find gtube pattern
* Fix processing of empty headers
* Allow to disable pthread mutexes on broken platforms
* Make web interface not send password in query strings (#585) by @fatalbanana
* Add maximum delay to ratelimit module
* Backport fix for empty files inclusion from libucl
* Fix settings id setup
* Add min_learns option to classifiers
* Use more clever to utf8 conversion strategy
* Fix disabling of virtual symbols in the settings
* Rework settings to work properly in metric-less configuration
* Set the default limit for classifier
* Fix ttl based expiration from LRU cache
* Rework DKIM module to use OpenSSL for digests
* Fix mailto urls parsing with hyperscan
* Do not set obscured flag for urls starting with spaces
* Fix crash on redis learn
* Fix ratelimit ctime setting

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Fix] Fix ratelimit ctime setting

[Fix] Fix crash on redis learn

[Fix] Do not set obscured flag for urls starting with spaces

Issue: #593

Merge pull request #598 from moisseev/patch-1

Fix typos

Fix typos

[CritFix] Fix mailto urls parsing with hyperscan

[Feature] Rework DKIM module

- Use openssl instead of g_checksum for speed
- Move private parts into .c file

[CritFix] Fix ttl based expiration from LRU cache

[Doc] Improve classifiers documentation

[Feature] Set the default limit for classifier

We now disallow statistics to be used unless at least 200 learns has
been performed for the specified classifier

[Fix] Rework settings to work properly in metric-less configuration

[Fix] Fix disabling of virtual symbols

[Feature] Use more clever to utf8 conversion strategy

[Minor] Make fstrgrow non-static function

[Minor] Be more informative about configuration errors

[Feature] Add min learns to classifiers

[Fix] Fix application of settings identified by ID

[Fix] Fix settings id setup

[Fix] Backport fix for empty files inclusion from libucl

Issue: #596
Reported by: @assistcontrol

[Feature] Print rspamd version

[Minor] Support DragonFly build

Issue: #595

[Doc] Add documentation for the new ratelimit option

[Feature] Add maximum delay to ratelimit module

Merge pull request #594 from fatalbanana/master

[Fix] Make web interface not send password in query strings (#585)

Merge pull request #592 from moisseev/r_suspicious_url

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Fix] Make web interface not send password in query strings (#585)

[Feature] Allow to disable pthread mutexes on broken platforms

[Fix] Fix processing of empty headers

[Fix] Fix parsing of some urls in hyperscan mode

[Feature] Avoid acism usage to find gtube pattern

[Fix] Fix order of arguments in 2-ways search

[Feature] Add two way substring search algorithm

[Feature] Simplify redirector search code and avoid ac_trie

[Fix] Allow multipattern scans to be nested for the case of hyperscan

[Minor] Attach domain part to `R_SUSPICIOUS_URL`

[Feature] Implement caching for hyperscan multipattern

[Feature] Add common directory for hyperscan cache to config

[Fix] Some more fixes for urls parser

[Fix] Further fixes to urls parsing

[Feature] Use more clever url matcher for hyperscan

[Feature] Allow to have different flags for different patterns

[Fix] Try to handle hyperscan error

[Fix] Fix hyperscan callback invocation

[Fix] Fix lua url

[Feature] Allow single and multiple urls extraction

[Fix] Fix excraction of URLs from Subject

[Feature] Add helper to insert URLs in task structure

[Feature] Add generic function to extract multiple URLs

[Fix] Use multipattern in url matcher

[Minor] Fix callback type

[Feature] Match the beginning of pattern as well

[Feature] Add utility methods for multipattern

[Feature] Use mutlipattern for lua_trie code

[Feature] Allow empty tries

[Feature] Optimize rspamd_re_cache_type_from_string

[Fix] Fix calling of process_regexp after flattening

[Fix] Fix plain version for table args extraction

[Feature] Optimize hot paths in SA plugin

[Feature] Allow to optimize lua -> C transition by flattening table args

[Feature] Add escape functions for hyperscan

[Feature] Add implementation of abstract multipattern matcher

[Minor] Update version to 1.2.4

Release 1.2.3

* New DCC module (by @smfreegard)
* Rework whitelist module:
- Now we check different elements for different checks
- MIME from for DMARC
- DKIM signature domain for DKIM
- SMTP from or HELO for SPF
* Fix regexps results combination (*critical*)
* Fix issue with expressions processing (*critical*)
* Optimize strlcpy for aligned input
* Add support of half-closed connection in lua_tcp
* Allow to print compact json in client
* Save required score in history (#581)
* Allow to attach file descriptors to control commands
* Allow to send descriptors from workers to main
* Allow to attach fd when broadcasting to workers
* Implement log pipe feature for rspamd logs analysis
* Add `log_helper` worker
* Add `URIBL_SBL_CSS` (by @smfreegard)
* Add worker scripts functionality
* Add on load hooks for rspamd_config
* Add lua scripts for log_helper worker
* Add generic maillist detector (#584)
* Implement FANN autolearn using log_helper worker
* Rework metrics configuration to allow includes
* Change default value of forced removal in composite rules
* Allow to use assembly version of blake2b on x86 cpu
* Use less precise (but faster) clock if possible
* Insert redirected URL to the urls list
* Allow to get and set callback data for rspamd symbols
* Add binary heap implementation
* Use binary heap for expire algorithms in the hash
* Use `least frequent used` expiration strategy
* Allow to get mime headers from a task
* Add support for mime headers in `regexp` module
* Update Exim patches (by @fatalbanana)
* Allow building rspamd with jemalloc
* Save multipart boundaries
* SA plugin changes:
- Properly handle MIME headers
- Fix eval:check_for_missing_to_header rule
- Implement SA compatible body regexps
- Use sabody rules in SA plugin
* LUA API changes:
- Add util.get_ticks function
- Add util.stat function
- Add task:get_symbols_numeric method
- Add method to get number of symbols in the cache
- Add lua methods to get redirected urls
- Allow to get callbacks for lua symbols
- Add config:set_symbol_callback function

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[CritFix] Fix issue with expressions processing

If the first rule in A + B + C + D > X matched then it was counted like
`1 + 1` and not as `0 + 1` as the accumulator was incorrectly treated in
that case.

[Minor] Properly place timers calculations

[Minor] Hold on with g_slice alteration

[Feature] Use sabody rules in SA plugin

[Fix] Fix sabody rules in regexp cache