[Project] Neural: Implement PCA learning

[Project] Neural: Implement PCA serialisation

[Project] Neural: Add PCA loading logic

[Project] Neural: Start PCA implementation

[Minor] Lua_tensor: Add has_blas method

[Minor] Eugen -> eigen

[Minor] Lua_tensor: Fix newindex row assignment

[Minor] Lua_tensor: Add transpose and mean methods

[Minor] Lua_tensor: Add eugen method

[Minor] Lua_tensor: Add __len method

Merge pull request #3480 from moisseev/webui

[WebUI] Rework navbar buttons

[Fix] Fix types check and types usage in lua_cryptobox

[Minor] Fix keyed blake2b creation

[Fix] Allow to adjust neurons in the hidden layer

[Test] Increase resilence of the NN tests

[Minor] Allow empty string lists in config

Merge pull request #3478 from cpragadeesh/master

[Fix] Change neural plugin's loss function

[WebUI] Rework navbar buttons

- Convert navbar buttons to <button> elements
- Do not disable Refresh button when auto-refresh is disabled
- Do not refresh current tab on auto-refresh interval change

Merge pull request #3479 from fatalbanana/google_fwd

Fix FWD_GOOGLE rule (#1815)

[Minor] Fix copy&paste error

[Minor] Improve logging on map retries

[Minor] Add hack to reuse rspamd_inet_address_to_string*

[Feature] Implement address retry on connection failure

[Minor] Always try to check IPv4 address first when checking HTTP maps

[Minor] Add ptr array shuffle routine

[Fix] Fix FWD_GOOGLE rule (#1815)

[Fix] Fix storing of the original smtp from

[Minor] Allow to add all parameters into `rcpts` and `from` selectors

[Minor] Allow to use lua_tensor in kann apply

[Fix] Change neural plugin's loss function

Modified the neural network to use ceb_neg loss function.

Merge pull request #3477 from citrin/lua-magic-html

[Minor] Improve lua_magic HTML content type check

[Minor] Fix extensions calculations

Merge pull request #3476 from citrin/lua-util-str

[Minor] Add Lua functions str_startswith and str_endswith

[Minor] Improve lua_magic HTML content type check

Types which are used for html (xhtml) attachments:
text/html
application/html
application/xhtml+xml

Type which cannot be found in the wild:
text/htm

[Minor] Fix tensor projections multiplication

[Minor] Add Lua functions str_startswith and str_endswith

[Minor] Fix fortran mangling on gnu systems

[Minor] Link lapack as well

[Minor] Lua_tensor: Add __newindex feature

[Minor] Fix tensor multiplication for the vectors case

[Minor] Lua_tensor: Implement non-owning tensors (slices)

Merge pull request #3474 from citrin/clickhouse-attach

Clickhouse attach

[Minor] Save into ClickHouse unnamed attaches

Most MUA allow to save attachments (parts with Content-Disposition: attachment)
even if don't have a name.  Keep name field empty and save other
information about such attachments to ClickHouse: Content-Type, size,
digest.

Modify attachments selector as well to return hashes of unnamed
attachments.

[Minor] Do not use built-in Lua function as variable name

[Minor] Add some fail-safety

Merge pull request #3472 from citrin/api-doc

[Doc] Improve task:get_message_id() description

[Doc] Improve task:get_message_id() description

[Minor] Spamassassin: Remove ffi call

[Minor] Restore scripts flag

[Feature] Split pdf processing object and output object to allow GC

[Minor] Dkim/ARC: allow to sign merely for specific settings id

[Test] Fix tests

[Fix] Store reference of upstream list in upstreams objects

[Minor] Add null safety to rspamd_regexp_new

[Minor] Lua_text: Add __lt metamethod

Merge pull request #3471 from moisseev/webui

[WebUI] Use /auth to get data missing in /stat

[WebUI] Use /auth to get data missing in /stat

response on legacy servers.

Namely "config_id", "version" and "uptime".

[WebUI] Fix alert status reset

Merge pull request #3461 from korgoth1/master

[TEST] PHISH Senders

[Minor] Convert only finite numbers

[Minor] Improve error message when learning with passthrough result

Issue: #3339

Merge pull request #3469 from citrin/fuzzy-check

[Minor] Fix off-by-one error in log message

[Minor] Fix off-by-one error in log message

Merge pull request #3468 from citrin/bounce

[Feature] Add BOUNCE rule

[Feature] Add BOUNCE rule

Merge pull request #3466 from moisseev/webui

[WebUI] Add uptime and version to servers table

[WebUI] Highlight uptime of restarted servers

[WebUI] Add fuzzy hashes info

[WebUI] Add Bayesian statistics info

[Minor] Refactor displayStatWidgets function

Merge pull request #3464 from citrin/maillist

MAILLIST rule fixes

[Minor] Avoid double quotes escaping

[WebUI] Add uptime and version to servers table

[Minor] Improve debug logs in check_generic_list_headers

And small style improvements.

[Minor] Improve mailman mailing list detection

[Minor] Update headers used by subscribe.ru

Notably Precedence header no longer used and web links use https.
While here improve style.

Merge pull request #3463 from moisseev/webui

[WebUI] Add "rewrite subject" to Status tab widgets

[WebUI] Remove actions capitalization

[WebUI] Add "rewrite subject" to Status tab widgets

Merge pull request #3462 from moisseev/webui

[WebUI] Use /stat path to get stat

[WebUI] Use actions names as labels

[WebUI] Use /stat path to get stat

instead of /auth path

[TEST] PHISH Senders

[TEST] PHISH Senders

[TEST] PHISH Senders

[Minor] Lua_tensor: Add deserialisation

[Minor] Lua_tensor: Implement serialisation

[Minor] Lua_content: Use hex representation of fuzzy hashes

[Fix] Fix lua_next invocation

Merge pull request #3460 from moisseev/webui

[Minor] Extend /stat response

[Project] Add tensors index method

[Minor] Allow to have __index in rspamd "classes"

[Minor] Add printing and fix multiplication

[Project] Add a simple matrix Lua library

[Minor] Extend /stat response

Merge pull request #3458 from moisseev/webui

[Test] Unlock stylelint version

Merge pull request #3455 from citrin/clickhouse-retention-fix

Clickhouse retention fix

[Fix] Another try to fix email names parsing

Related to: 772964f83b82f6d597e22c8b4d08220ab7df3f43#diff-677ba97322f6447774f021d51913b00b

[Minor] Use descriptive variable name

PARTITION and PARTITION ID in ClickHouse are different:
https://clickhouse.tech/docs/en/sql-reference/statements/alter/partition/#alter-how-to-specify-part-expr
and we use PARTITION clause here.

[Minor] Fix query used to find old partitions

In ClickHouse a partition includes one or more parts.  Typically
a partition has at least a few parts.  For each part there is a row in
system.parts table and max_date can be different for different parts.

For example if we have following parts:
┌─partition──┬─table──┬───max_date─┐
│ 2020-06-01 │ rspamd │ 2020-06-07 │
│ 2020-06-08 │ rspamd │ 2020-06-10 │
│ 2020-06-08 │ rspamd │ 2020-06-14 │
│ 2020-06-15 │ rspamd │ 2020-06-21 │
└────────────┴────────┴────────────┘
and want to delete parts which don't contain data written
before 2020-06-12.

Old query will return partition which contain a part with
max_date=2020-06-14:
┌─partition──┬─table──┐
│ 2020-06-01 │ rspamd │
│ 2020-06-08 │ rspamd │
└────────────┴────────┘
and new query will return
┌─partition──┬─table──┐
│ 2020-06-01 │ rspamd │
└────────────┴────────┘

While here change <= to < so we will store at least given number of full
months.