Merge pull request #4789 from fatalbanana/per_user_test

[Test] statistics: per-user

[Test] statistics: per-user

[Minor] Fix old test

[Fix] Fix learning with long prefixes

Issue: #4786
Closes: #4786

[Fix] Fix headers insertion in the ordered list

[Fix] Fix learn error propagation

[Minor] Add some convenience methods

[Fix] Fix storing of the bayes tokens

Merge pull request #4785 from arkamar/lua-maps-nested-comment

[Fix] Replace comment types

[Minor] Fix typo in comment

[Fix] Use short comments rather than long one

Rspamd fails to start with Lua-5.1 because long comment does not allow
nesting, see [1]. This change replaces it to short comments in order to
fix the issue but preserves this part as comment in docs.

[1] https://www.lua.org/manual/5.1/manual.html#7.1

Bug: https://bugs.gentoo.org/922522
Fixes: b189c9fea633 ("[Minor] lua_maps docs: apply formatting")
Fixes: https://github.com/rspamd/rspamd/issues/4784

[Minor] Update version to 3.8.1

Release 3.8.0

* [Project] Rspamadm fuzzyping command
* [Project] Use Redis scripts for Bayes statistics and cache
* [Project] Support  JSON logging
* [CritFix] - Fix reported length of logging structure
* [Feature] Allow to set `max_users` for Redis bayes backend
* [Feature] Escape JSON when needed
* [Feature] Proxy: Allow `encrypted_only` option
* [Feature] Reiterate on gtube patterns
* [Feature] Support ping command in fuzzy storage
* [Feature] Support suppressing DMARC reporting for particular recipients
* [Feature] rbl: support disabling or replacing url_whitelist per RBL
* [Fix] Another try to fix setproctitle
* [Fix] Cleanup session on exit
* [Fix] Do not cleanup hyperscan files unless new ones are loaded
* [Fix] Fix bad access when printing pending events on failure path
* [Fix] Fix issues with the raw header on header insertion/modification
* [Fix] Fix overflow in fuzzy_stats command
* [Fix] Fix some corner cases when parsing maps with no newlines
* [Fix] Fix various issues with canonicalisation of the paths
* [Fix] Fix wrong raw_len usage
* [Fix] Make words selection random deterministic upon content
* [Fix] Properly set config field when creating tasks from Lua
* [Fix] Really fix the language detector statistical heuristic
* [Fix] Set loaded variable explicitly
* [Fix] dkim_signing: siging_table: lowercase before lookup
* [Fix] known_senders: fix config handling
* [Fix] rbl: fix `exclude_local`

Merge pull request #4781 from fatalbanana/multimap_rawtext

[Fix] multimap: rawtext: use decoded parts

[Minor] Print some more stats

[Fix] multimap: rawtext: use decoded parts

[Minor] Fix OSX build with backwards

Issue: #4752

[Test] Remove some invalid tests for 32 bit platforms

Issue: #4754

[Fix] Really fix the language detector statistical heuristic

[Fix] Make words selection random deterministic upon content

[Minor] Cleanup

Merge pull request #4774 from rspamd/vstakhov-redis-cache-rework

Rewrite redis_cache logic in statistics

[Minor] Remove special handling

[Project] Some more work with regard to configuration

[Project] Final things on redis cache rework

[Project] Add cache config

[Minor] Fix scripts invocation

[Project] Further rework of the C part

[Project] Initial implementation of the lua counterpart

[Minor] Rework redis servers config parsing

Merge pull request #4775 from fatalbanana/robot

[Test] Fix tests on Robot Framework 7.0

[Test] Fix tests on Robot Framework 7.0

[Rework] Start rewriting of the redis cache logic

Merge pull request #4772 from fatalbanana/dmarc_pingpong

[Feature] Support suppressing DMARC reporting for particular recipients

[Feature] Support suppressing DMARC reporting for particular recipients

Merge pull request #4767 from fatalbanana/logging_tests_more

[Test] Some more tests for logging

[Test] Some more tests for logging

Merge pull request #4766 from moisseev/webui

[WebUI] Normalize IPv4 for column sorting

[WebUI] Normalize IPv4 for column sorting

Merge pull request #4765 from moisseev/webui

[WebUI] Show message size in IEC (base 1024) units

[Project] Implement text tokens storage on C++ side

[Project] Add store tokens support in new bayes learn

[WebUI] Show message size in IEC (base 1024) units

Merge pull request #4764 from jvoisin/anullptr

[Fix] Fix an overzealous s/NULL/nullptr/g

Update cfg_utils.cxx

Fix another dumb s/NULL/nullptr/g

Update cfg_rcl.cxx

Fixed an overzealous s/NULL/nullptr/g

[Minor] Combine history table column definitions

Merge pull request #4762 from moisseev/webui

[Minor] Move common stuff to separate files

[WebUI] Tweak scan result layout for small devices

[Minor] Move common stuff to separate files

Merge pull request #4759 from moisseev/hfilter

[Minor] Fix typo in hfilter map

Merge pull request #4761 from fatalbanana/debian_postinst

[Minor] debian: add missing stuff to rspamd-asan package

[Minor] debian: add missing stuff to rspamd-asan package

[Dep] Update unordered_dense to 4.4.0

Merge pull request #4758 from moisseev/webui

[WebUI] Show pass-through module in scan result

[Minor] Fix typo in hfilter map

[Minor] Set FooTable cell font size with CSS

instead of column options

[WebUI] Show pass-through module in scan result

Merge pull request #4757 from moisseev/allow-local

[Minor] Log a debug message when ratelimit skipped

[Minor] Log a debug message when ratelimit skipped

for a local request

Merge pull request #4755 from fatalbanana/ratelimit_symbol

[Minor] ratelimit: make per-bucket symbol behave like global symbol

[Minor] ratelimit: make per-bucket symbol behave like global symbol

Merge pull request #4750 from fatalbanana/docs_rspamd_html

[Minor] docs: rspamd_html: fix some copypasta

[Minor] docs: rspamd_html: fix some copypasta

Merge pull request #4749 from moisseev/webui

[WebUI] Send only altered symbols in save requests

[WebUI] Send only altered symbols in save requests

Merge pull request #4748 from moisseev/webui

[WebUI] Symbols: replace individual save buttons

[Minor] Remove stupid threshold for saving symbol value

Merge pull request #4747 from fatalbanana/minor

[Minor] rbl: revisit previous change

[WebUI] Symbols: replace individual save buttons

with a sticky group

[Minor] rbl: revisit previous change

[Minor] Another issue

[Minor] Uh-oh...

[Minor] Set proper size

[Minor] Fix build

[Project] Try to do strings concatenation in C

[Feature] Proxy: Allow `encrypted_only` option

Merge pull request #4743 from fatalbanana/rbl_luapatterns_again

[Minor] rbl: try harder to identify lua patterns

[Minor] rbl: try harder to identify lua patterns

Merge pull request #4742 from fatalbanana/rbl_url_whitelist

[Feature] rbl: support disabling or replacing url_whitelist per RBL

[Feature] rbl: support disabling or replacing url_whitelist per RBL

Merge pull request #4739 from fatalbanana/bayes_redis

[Minor] Have bayes use global redis settings

[Minor] Have bayes use global redis settings

[Minor] Fix learned stats

[Minor] Link runtime to the proper statfile context

Merge pull request #4718 from rspamd/vstakhov-bayes-rework

Migrate bayes redis backend to Lua scripts

Merge pull request #4735 from moisseev/webui

[Test] Remove deprecated Stylelint rule

[Test] Remove deprecated Stylelint rule

[Project] Add some stats

Merge pull request #4732 from AdamMajer/logging_fix

[CritFix] - Fix reported length of logging structure

Merge pull request #4733 from fatalbanana/systemd_test

[Test] Test systemd logging

[Test] Test systemd logging

[Project] Various fixes

[Project] Fix compile issues and rework in more C++ style

[Rework] Use strings for int64_t

It seems there is no easy way to use int64 in Redis Lua, hence, we have
to use strings. It's much more expensive but still some advantage over
the previous schema.

[Minor] Fix keys name

Merge pull request #4730 from moisseev/webui

[Test] Unbreak ESLint

[CritFix] - Fix reported length of logging structure

The logging code contains one place where the apparent size of the
logging structure is defined and then it's actually utilized in another
place. Re-writes and refactoring this code ended up with these
values to not co-relate what was previously there resulting in a stack
overwrite in last version or currently in log truncation.

Move assignment of logging structure to the place where it's actually
used, reducing future logic de-sync dangers. Also move the g_assert() to
the end as it should be a development aid only.

[Project] Add some basic learning

[Minor] Remove obsoleted code, phew