Merge pull request #5119 from slavkoja/patch-2

Update URIBL_RED/GREY scores

Update surbl_group.conf

Merge pull request #5118 from rspamd/vstakhov-fix-5089

Fix for issue #5089 - learning of the empty tasks

[Fix] Another safe-guards for learning/classifying an empty message

Merge pull request #5115 from dragoangel/patch-7

Set expiration for history_redis to 5 days by default

Update history_redis.lua

Set expiration for history_redis to 5 days by default

Merge pull request #5110 from fatalbanana/re_grow_factor_tests

[Test] Improve grow_factor tests

[Test] Improve grow_factor tests

Fix issue with broken HTTP message to learn endpoints (#5106)

* [Fix] Check message before trying to dereference pointer

Issue: #5089

* [Minor] Fix stripping of the last characters

[Minor] Fix stripping of the last characters

Provide OpenSSL 3.0 support for lua_rsa (#5101)

* [Fix] Provide OSSL 3.0 support for lua_rsa (not working)

* [Fix] Provide full OpenSSL 3.0 for lua_rsa

* [Minor] Little clean up

* [Minor] Clean up code from debug

* [Test] Replace for fixed size fstring allocation

* [Test] Add rsa padding and signature md for pctx

* [Test] Little changes

* [Fix] Little fix for rsa_sign_memory work correctly

* [Minor] Little clean up

* [Minor] Small fix

* [Minor] Little clean up

* [Test] Add signature verification test for rsa2048

[Fix] Check message before trying to dereference pointer

Issue: #5089

Merge pull request #5104 from rspamd/vstakhov-transparent-ucl

[Project] Allow manipulations with opaque UCL objects

[Test] Add more unit tests

[Minor] Add some hacks to convert lua table into either object or an array

[Test] Fix broken test

[Minor] Restore back one more legacy conversion

[Minor] Restore legacy conversions

With new `index` method it seems much easier in fact

[Minor] Add support for transparent ucl in override_defaults

[Minor] Sime minor changes

[Minor] Fix import again

[Minor] Slight cleanup

[Project] Try to allow more transparent access of ucl elements

[Minor] Fix check

[Rework] Breaking: Rewrite cfg transform and remove legacy

What is removed:

* SURBL/Email -> rbl conversion
* IP reputation -> reputation conversion

Reasoning:

* Too hard to support forever
* Outdated
* Want to use transparent UCL instead of modifying the config from Lua

[Minor] Some minor fixes

[Project] Some more fixes

[Project] Add API method to push unwrapped UCL object

[Test] Add unit tests for ucl functions

[Fix] Make tostring in UCL a bit less brain-damaged

[Project] Add more stuff to transparent UCL

[Project] Allow manipulations with opaque UCL objects

If we export an UCL object to Lua we actually lose a lot of useful
properties of UCL. For example, we miss ordering, comments, implicit
arrays etc.

This PR is intended to allow manipulation with UCL object like plain
userdata, without unwrapping them to the Lua primitives.

[Minor] Update publicsuffix list

Closes: #5103

[Minor] More docs update

[Minor] Add instructions for update

Merge pull request #5100 from rspamd/vstakhov-fix-kp-encryption

Fix keypairs encryption/decryption

Merge pull request #5099 from rspamd/vstakhov-remove-nist-cryptobox

Remove NIST mode from cryptobox

[Test] Add test for keypairs encrypt/decrypt

[Fix] Use proper keys when doing asymmetric encryption

[Minor] Oops, fix pubkey loading

[Project] Remove NIST mode from everywhere

[Project] Remove NIST (OpenSSL) mode from cryptobox

In fact, this mode increases complexity of the crypto library for no
good reason: it is never used in Rspamd and it should not be used in fact.

It was a research project in the past that should not be supported any
longer.

[Fix] Do not install doctest stuff

Reported by: @moisseev

[Fix] Apply the same workaround for signing keys

[Fix] Add workaround for the bug in OpenSSL < 3.0.8

[Minor] CMake: show version of packages found if available

[Minor] Another fight with OpenSSL so called "consistency"

[Minor] Another try to fix p256 encryption

[Fix] More bogus sizes fix

[Minor] Some more fixes for old OSSL

[Fix] Sign key != encryption key, omg

[Test] Use proper keypairs

[Test] Fix some test

[Minor] Some more incompatibilities cleaned up

[Fix] Fix compatibility with OSSL 1.0

[Minor] Avoid some warnings

[Test] Fix unit tests

[CritFix] The max size for signing key is actually 65 bytes for p256

[Minor] Some neats

[Fix] Fix and rework various parts

Merge branch 'master' into master

Merge pull request #5094 from rspamd/vstakhov-update-doctest

[Dep] Update doctest to 2.4.11

[Dep] Update doctest to 2.4.11

[Rework] Use a more straight structure for DKIM keys

[Minor] Another formatting issue

[Minor] Restore formatting

Merge branch 'master' into master

Merge pull request #5093 from rspamd/vstakhov-rdns-separate

[Rework] Resolve rdns in a separate function

[Minor] Reduce priority as settings become broken otherwise

For future settings rework: there should be spill of settings checks
to allow dependency on symbols that are required for settings conditions.

[Rework] Resolve rdns in a separate function

Historically, it was done in `once_received` module, however, that check must
be done early, even before settings (as they could rely on hostname).

Hence, it was discussed to move this code to a separate rule.

Merge pull request #5092 from rspamd/vstakhov-log-tag-passthrough

[Project] Allow to change log tag from HTTP request

[Minor] Show HTTP result for mirrors as well

[Minor] Show better log when proxy finishes it's connection

[Minor] Propagate proxy log tag

[Minor] Pass queue-id from Milter to log tag

Merge branch 'master' into vstakhov-log-tag-passthrough

[Project] Allow to change log tag from HTTP request

Merge pull request #5083 from fatalbanana/test_milter_headers

[Test] Add tests for milter_headers

Merge pull request #5088 from moisseev/senderscore

[Conf] Add SenderScore Reputationlist RBL

Merge pull request #5091 from rspamd/vstakhov-redis-fix-scripts-loading

[Fix] Fix Redis scripts uploading when Redis is not ready

[Minor] Fix logging

[Minor] Fix status change and improve logging

Merge pull request #5084 from rspamd/vstakhov-negative-group-limits

[Feature] Allow to set negative group score limit via `min_score`

[Test] Add tests for group score limits

[Minor] Fix logic of the checks

Merge pull request #5086 from rspamd/vstakhov-redis-better-errors

[Minor] Improve errors reporting for lua_redis

[Fix] Fix Redis scripts uploading when Redis is not ready

Initially, there was no way to recover from Redis errors that are temporary
by nature (e.g. when Redis was busy with loading database).

This PR adds logic to check returned reply and adds more fine-grained
errors-per-server handling.

[Conf] Add SenderScore Reputationlist RBL

[Test] Test work on ubuntu

[Minor] Improve errors reporting for lua_redis

[Feature] Allow to set negative group score limit via `min_score`

[Test] Add more tests for milter_headers

[Test] Add tests for milter_headers

Merge branch 'rspamd:master' into master

[Minor] Add `task:set_subject` alias for sanity

Merge pull request #5079 from dragoangel/patch-7

Add name in statistic.conf

Merge branch 'master' into patch-7

Merge pull request #5077 from moisseev/senderscore

[Conf] Add SenderScore RPBL return codes

Update conf/statistic.conf

Co-authored-by: Vsevolod Stakhov <vsevolod@rspamd.com>