[Minor] Add HAS_FILE_URL rule for messages containing a file:// URL

These are frequently abused for distributing malware via non-HTTP
protocols, such as public Samba servers. file:// URLs may also be abused
for including files from the victims' machine in a message. Either way,
a legitimate usecase is unlikely.

Signed-off-by: twesterhever <40121680+twesterhever@users.noreply.github.com>

Merge pull request #4843 from rspamd/vstakhov-libarchive

Support libarchive

[Minor] Ask for utf8 string from libarchive

[Minor] Detect encryption when libarchive is used

[Project] Use libarchive for troublesome archives

[Minor] Escape liquid

Merge pull request #4839 from rspamd/vstakhov-another-lupa-fix

Rework `jinja_template` functions to avoid LUPA global state dependency

Merge pull request #4838 from moisseev/webui

[WebUI] Disable buttons until tables are ready

[Fix] Avoid stupid practice of polluting module's internal state

[Rework] Allow custom filters in `jinja_template`

[WebUI] Disable buttons until tables are ready

to prevent race conditions

[Minor] Remove obsolete code

Merge pull request #4830 from rspamd/vstakhov-fix-history-key

[Fix] Allow different template expansion parameters

[Fix] Allow different template expansion parameters

Probably one of the most dirty hacks I've used in the Lua code in Rspamd...

Merge pull request #4829 from rspamd/revert-4826-vstakhov-fix-history-key

Revert "[Fix] Fix history key, as we use `{=` and not `{{` in templates"

Revert "[Fix] Fix history key, as we use `{=` and not `{{` in templates"

Merge pull request #4826 from rspamd/vstakhov-fix-history-key

[Fix] Fix history key, as we use `{=` and not `{{` in templates

[Fix] Fix history key, as we use `{=` and not `{{` in templates

[Minor] Update version to 3.9.0

[Minor] Allow to have only dynamic keys in fuzzy storage

Merge pull request #4822 from rspamd/vstakhov-ctest

Build tests with CTest in Cmake

[Minor] Build tests with CTest in Cmake

Merge pull request #4818 from rspamd/vstakhov-fuzzy-keymap

Allow dynamic keypairs loading in fuzzy storage

[Test] Working with bloody robot to add some new tests

[Minor] Improve logging

[Fix] Fix initial maps load

[Test] Add tests for dynamic fuzzy keys

Merge pull request #4806 from rspamd/vstakhov-kas-improvements

[Feature] Improve Kaspersky AS integration

[Feature] Implement dynamic keys map in fuzzy storage

[Minor] Add refcounts on fuzzy keys for shared usage

[Rework] Use khash instead of glib hashes for many reasons

Merge pull request #4816 from rspamd/vstakhov-4808

[Fix] Encode headers in metadata exporter

[Fix] Encode headers in metadata exporter

Issue: #4808

[Fix] Make stat tokens allocation consistent

Merge pull request #4814 from rspamd/vstakhov-redirector-fragment

Fix issues with URL fragment in HTTP requests

[Test] Add unit tests

[Fix] Try to fix url path issue

[Minor] Slightly improve log message

[Feature] Lua_url: Add `to_http` method

Merge pull request #4813 from rspamd/vstakhov-json-syslog

[Feature] Support JSON logging when in syslog mode

[Minor] Add LOG_CONS flag to `openlog`

[Feature] Support JSON logging when in syslog mode

Merge pull request #4803 from fatalbanana/surbl_config

[Minor] Add more returnbits to surbl configuration

Merge pull request #4807 from fatalbanana/rspamd_task_docs

[Minor] rspamd_task API docs: fix broken link

[Minor] rspamd_task API docs: fix broken link

[Minor] Support keepalive and authorization

[Minor] Proper header name

[Minor] KAS: add source ip information

Merge pull request #4805 from rspamd/vstakhov-fix-rspamadm-mime-stat

[Fix] Resolve issue with bayes stat in `rspamadm` mode

Merge pull request #4804 from fatalbanana/configwizard_confdir

[Minor] configwizard: really use LOCAL_CONFDIR

[Fix] Resolve issue with bayes stat in `rspamadm` mode

[Minor] configwizard: really use LOCAL_CONFDIR

Merge pull request #4802 from rspamd/vstakhov-proxy-host-fixes

Deal with `Connection` and `Host` headers on proxying

[Minor] Add more returnbits to surbl configuration

[Fix] Deal with `Connection` and `Host` headers on proxying

[Minor] Fix doc string

Merge pull request #4801 from rspamd/vstakhov-history-prefix-templates

[Feature] Allow to add templates to redis history prefix

[Feature] Allow to add templates to redis history prefix

Issue: #4793
Closes: #4793

Merge pull request #4798 from moisseev/passthrough

[WebUI] Show pass-through module in History

Merge pull request #4796 from moisseev/webui

[Minor] Move server selection logic to common.js

Merge pull request #4795 from moisseev/adjust

[Rework] Breaking: Do not report module as action

[WebUI] Show pass-through module in History

[Rework] Breaking: Do not report module as action

in the /history response since we have the `passthrough_module` key
for that purpose.

While that might be handy in some situations,
mixing actions and module names is confusing in general.

Merge pull request #4794 from rspamd/vstakhov-multimap-addr-extraction

[Feature] Add extraction type for `from` maps

[Minor] Allow the same logic for recipients

[Feature] Add extraction type for `from` maps

Attribute name: `extract_from`. Possible values:

* `default` - try smtp, if not exists try mime
* `mime` - check mime only
* `smtp` - check smtp only
* `both` - try to match both

[Minor] Update version

Release 3.8.1

* [Fix] Fix headers insertion in the ordered list
* [Fix] Fix learn error propagation
* [Fix] Fix learning with long prefixes
* [Fix] Fix potential double free by expclicitly zeroing pointers
* [Fix] Fix storing of the bayes tokens
* [Fix] Use short comments rather than long one

[Fix] Fix potential double free by expclicitly zeroing pointers

[Minor] Add fail-safety

Merge pull request #4790 from fatalbanana/fix_rbl_warning

[Minor] rbl: fix warning

[Minor] rbl: fix warning

Merge pull request #4789 from fatalbanana/per_user_test

[Test] statistics: per-user

[Test] statistics: per-user

[Minor] Fix old test

[Fix] Fix learning with long prefixes

Issue: #4786
Closes: #4786

[Fix] Fix headers insertion in the ordered list

[Fix] Fix learn error propagation

[Minor] Add some convenience methods

[Fix] Fix storing of the bayes tokens

Merge pull request #4785 from arkamar/lua-maps-nested-comment

[Fix] Replace comment types

[Minor] Fix typo in comment

[Fix] Use short comments rather than long one

Rspamd fails to start with Lua-5.1 because long comment does not allow
nesting, see [1]. This change replaces it to short comments in order to
fix the issue but preserves this part as comment in docs.

[1] https://www.lua.org/manual/5.1/manual.html#7.1

Bug: https://bugs.gentoo.org/922522
Fixes: b189c9fea633 ("[Minor] lua_maps docs: apply formatting")
Fixes: https://github.com/rspamd/rspamd/issues/4784

[Minor] Update version to 3.8.1

Release 3.8.0

* [Project] Rspamadm fuzzyping command
* [Project] Use Redis scripts for Bayes statistics and cache
* [Project] Support  JSON logging
* [CritFix] - Fix reported length of logging structure
* [Feature] Allow to set `max_users` for Redis bayes backend
* [Feature] Escape JSON when needed
* [Feature] Proxy: Allow `encrypted_only` option
* [Feature] Reiterate on gtube patterns
* [Feature] Support ping command in fuzzy storage
* [Feature] Support suppressing DMARC reporting for particular recipients
* [Feature] rbl: support disabling or replacing url_whitelist per RBL
* [Fix] Another try to fix setproctitle
* [Fix] Cleanup session on exit
* [Fix] Do not cleanup hyperscan files unless new ones are loaded
* [Fix] Fix bad access when printing pending events on failure path
* [Fix] Fix issues with the raw header on header insertion/modification
* [Fix] Fix overflow in fuzzy_stats command
* [Fix] Fix some corner cases when parsing maps with no newlines
* [Fix] Fix various issues with canonicalisation of the paths
* [Fix] Fix wrong raw_len usage
* [Fix] Make words selection random deterministic upon content
* [Fix] Properly set config field when creating tasks from Lua
* [Fix] Really fix the language detector statistical heuristic
* [Fix] Set loaded variable explicitly
* [Fix] dkim_signing: siging_table: lowercase before lookup
* [Fix] known_senders: fix config handling
* [Fix] rbl: fix `exclude_local`

Merge pull request #4781 from fatalbanana/multimap_rawtext

[Fix] multimap: rawtext: use decoded parts

[Minor] Print some more stats

[Fix] multimap: rawtext: use decoded parts

[Minor] Fix OSX build with backwards

Issue: #4752

[Test] Remove some invalid tests for 32 bit platforms

Issue: #4754

[Fix] Really fix the language detector statistical heuristic

[Fix] Make words selection random deterministic upon content

[Minor] Cleanup

Merge pull request #4774 from rspamd/vstakhov-redis-cache-rework

Rewrite redis_cache logic in statistics

[Minor] Remove special handling

[Project] Some more work with regard to configuration

[Project] Final things on redis cache rework

[Project] Add cache config

[Minor] Fix scripts invocation

[Project] Further rework of the C part