Merge pull request #3265 from Lekensteyn/systemd-listen-fdnames

[Fix] Support listening on systemd sockets by name

Merge pull request #3264 from Lekensteyn/packaging-updates

Update packaging versions

[Fix] Support listening on systemd sockets by name

* Add support for looking up sockets by the systemd socket name, e.g.
  `systemd:rspamd-proxy.socket` or the name from `FileDescriptorName`.
  https://www.freedesktop.org/software/systemd/man/sd_listen_fds.html
* Replace EOVERFLOW error code to avoid confusing error messages.

Fixes: #2035

[Minor] use quilt for debian/source/format

* Match the build scripts and main Debian packaging.
* This allows for a separate debian/ directory in debian.tar.gz, see
  https://www.debian.org/doc/manuals/maint-guide/dother.en.html#sourcef

[Minor] debian/control: Update Vcs-Git URL and maintainer

* Let Vcs-Git point to a secure transport.
* Use Vsevolod's email address as maintainer to avoid having to patch
  this file in rspamd_build.sh. Mikhail is not the current maintainer of
  the Debian package anyway.

[Minor] Update Debian and RPM package versions

* Add script that can be used after tagging to update versions.
* Example (for this commit): `./set-version.sh 2.4`
* Clear Debian changelog, this information is not updated anyway.

[Minor] Fix compatibility with cdb://

[Minor] Fix daemonisation...

[Project] Unify cdb maps

[Project] CDB maps: Start making cdb a first class citizen

[Fix] Fix sentinel connections leak by using async connections

[Minor] Further logging improvements

[Minor] Add separate log module for lua redis

Merge pull request #3260 from d--j/patch-1

[Minor] add deprecated named HTML colors

[Minor] Allow nulls as string value + improve errors report when I'm here

[Minor] Split url and email regexps

[Minor] Fix some of the moved functions

[Minor] Fix length argument

[Minor] Fix stupid ansi format string

Merge pull request #3263 from spacefreak86/dmarc

[Minor] Fix parsing DMARC records containing upper-case letters

[Minor] Fix prototypes

[Minor] Fix parsing DMARC records containing upper-case letters

[Rework] Move local IPs check

[Minor] Add missing include

[Minor] Add missing include

[Rework] Further project structure reorganisation

[Minor] Fix unit tests

[Rework] Refactor libraries structure

* Move logger implementation to libserver
* Move fuzzy backend files to a separate subdir

TODO: Move HTTP code from libutil

[Rework] Logger: Fix logic of initialisation

[Rework] Logger: Fix issues found so far

[Rework] More logger refactoring

[Rework] Add console and syslog modules

[Rework] Start logger rework

[Project] Allow to set a custom log function to the logger

Merge pull request #3261 from citrin/fix-re-flag

[Fix] 'R' flag is for all headers regexp

[Fix] 'R' flag is for all headers regexp

According to the documentation R flag is for regexp which applied for
all headers (unencoded):
https://rspamd.com/doc/modules/regexp.html#regular-expressions

[Minor] add deprecated name HTML colors

https://drafts.csswg.org/css-color-4/#deprecated-system-colors has a list of deprecated named colors that are system dependent.
This commit adds them with default values.

[Test] Add some more tests

[Minor] Eliminate g_utf8_validate

Merge pull request #3258 from korgoth1/master

[Test] Fuzzy skip hashes

[Test] Fuzzy skip hashes

[Test] Fuzzy skip hashes

[Test] Fuzzy skip hashes

[Minor] Some fixes to the slovenian language

[Minor] Add some more heuristics for stop words detection

[Minor] Remove some strange words

[Minor] Make server header reply configurable

[Minor] Remove some old unused crap

[Fix] Filter all options for symbols to have sane characters

Merge remote-tracking branch 'upstream/master'

[Rework] Use length based strings when doing logging

[Minor] Add explicit checks for FIPS mode presence

[Test] Fuzzy skip hashes

[Fix] Fix all headers iteration

[Minor] Implement preliminary termination for hs_helper

[Minor] Oops, fix format string

[Fix] Fix maps expressions evaluation

Issue: #3256
Submitted by: @rm-minus-rf

[Minor] Further fixes in stop words detection

[Minor] Reformat languages data json

Merge pull request #3253 from Disassembler0/czech-stopwords

[Minor] Add Czech stop words

Merge pull request #3252 from andryyy/patch-16

[Minor] More german stop words

[Minor] Some more logging improvements

[Minor] Improve dkim failures logging

[Fix] Avoid strdup usage for symbols options

[Minor] Fix hyperscan loaded when invalid files are presented

[Minor] Fix error path

Add Czech stop words

More german stop words

[Fix] Allow to reset settings id from Lua (e.g. because of the priority)

Merge pull request #3250 from korgoth1/master

[Test] Setting's priority

[Test] Setting's priority

[Test] Setting's priority

[Minor] Update version to 2.4

Release 2.3

* [Conf] SPF is no longer a C module
* [Conf] Update spamtrap map path example
* [CritFix] Fix html entities decoding
* [CritFix] Fix re cache when mix of pcre and hyperscan is used
* [Feature] Allow milter code to deal with multiple headers
* [Feature] Antivirus: Add avast support
* [Feature] Dkim_signing: Allow to sign via milter_headers
* [Feature] Implement content hashes
* [Feature] Lua_text: Add regexp split iterator method
* [Feature] Lua_text: Implement flattening of the input tables
* [Feature] Send quit command to Redis
* [Feature] Speed up is_ascii function
* [Feature] Spf: Add external_relay option
* [Fix] Avoid double escaping
* [Fix] Fix O(N^2) algorithm
* [Fix] Fix arc seal validation
* [Fix] Fix base tag processing according to stupid HTML renderer behaviour
* [Fix] Fix dealing with `\0` in ucl strings and JSON
* [Fix] Fix gpg parts misdetection
* [Fix] Fix ignored symbols exporting
* [Fix] Fix processing of numeric url's
* [Fix] Fix processing of the closed tcp connections
* [Fix] Fix regexp type check for pcre2
* [Fix] Fix urls encode function
* [Fix] Fix urls shifting when doing decode to include separators
* [Fix] Fix white on white rule and add is_leaf flag
* [Fix] Further fixes in charset detection
* [Fix] Ignore diacritics in chartable module for specific languages
* [Fix] Limit size of symbols options by max_opts_len option
* [Fix] More fixes in html tag content calculations
* [Fix] Plug memory leak in fuzzy storage
* [Fix] Process high priority settings even if settings/id has been specified
* [Fix] Select a different upstream on last retransmit
* [Fix] Treat soft hyphen as zero width space
* [Fix] Try harder to watch the lifetime of the key_stat
* [Fix] Use ipv6-mapped-ipv4 addresses in radix trie
* [Project] Add logic to break execution when processing symbols*
* [Project] Add methods to set specific content for mime parts from Lua
* [Project] Lua_content: support PDF files
* [Project] Move dns_tool to using of the rspamd_spf from FFI module
* [Project] Preliminary SPF plugin in Lua
* [Project] Show debug stat for memory pool
* [Project] Some rework about specific data that is now tagged
* [Project] Start reworking of the mempool structure
* [Rework] Allow to add userdata as symbols options
* [Rework] Change mime part specifics handling
* [Rework] Move LRU SPF cache from spf plugin
* [Rework] Rework HTML tags content attachment
* [Rework] Rework options hash structure
* [Rework] Start lua_content library
* [Rework] Stop using of uthash for http headers
* [Rework] Use faster hashing approach for memory pools variables
* [Rules] Add PDF related rules

Signed-off-by: Vsevolod Stakhov <vsevolod@highsecure.ru>

[Minor] Sigh, use EVP_DigestInit_ex instead

[Minor] Fix order when setting FIPS flags

Related to https://github.com/openssl/openssl/issues/10031

[Fix] Ignore diacritics in chartable module for specific languages

Issue: #3156

[Minor] Add diacritics flag for language detector

[Minor] Remove non-reject gtube patterns unless enable_test_patterns is enabled

[Minor] Fix a455c6542212948969b6c115344e9d059606407a missing part

[CritFix] Fix html entities decoding

[Rework] Stop using of uthash for http headers

[Minor] Fix id priorities application

[Fix] Process high priority settings even if settings/id has been specified

[Fix] Fix ignored symbols exporting

Merge pull request #3246 from moisseev/webui

Webui

[Minor] Update D3 JS library to v5.15.0

[Minor] Format numbers with d3.format,

remove Humanize JS library.

Merge pull request #3245 from moisseev/webui

[WebUI] Update D3Evolution to 1.2.0

[WebUI] Update D3Evolution to 1.2.0

+ Add cursor

The cursor location follows the mouse pointer movements when it hovers over the graph
and updates the coordinates of the cursor's cross-points in the graph legend.

[Minor] Remove unused variable

[Test] Add avast test cases

[Minor] Various fixes to the avast engine

[Fix] Fix processing of the closed tcp connections

[Feature] Antivirus: Add avast support

[Minor] Further fixes for FIPS mode

[CritFix] Fix re cache when mix of pcre and hyperscan is used

[Minor] Further logging improvements

[Minor] Fix log message

[Minor] Improve logging