[Feature] Store more information about compressed files

[Feature] Add rar v4 support

[Feature] Add preliminary rarv5 support

[Fix] Avoid `table.getn` method as it has been removed in lua 5.3

Issue: #697
Reported by: @jessbo

[Feature] Add better zip files search algorithm

[Fix] Match archive name as well

[Feature] Support archives when matching patterns in multimap

[Feature] Add new utility methods to mimepart object

[Feature] Add lua API for getting info from archives

[Fix] Include some more information about archives

[Feature] Support archive files list extraction

[Rework] Remove dedicated images list

[Rework] Rename mime parts structures

[Feature] Support EXIF jpeg images

[Minor] Adjust array size for fuzzy commands

[Fix] Avoid double hashing for images

Merge pull request #694 from moisseev/phishing-FQDN

[Feature] Supprort FQDNs in phishing module maps

Fix typo

[Feature] Supprort FQDNs in phishing module maps

Merge pull request #693 from fatalbanana/robot-tests

[Test] Add & rework functional tests

[WebUI] Use local copy of d3evolution

[WebUI] Rework webui

- Remove uploaders as they are utterly broken
- Simplify actions loading
- Rework interface loading

[Test] Add & rework functional tests

 - Machine formatted test data
 - More idiomatic use of test framework
 - Added tests for fuzzy & redis statistics

[Fix] Another d3evolution update

[Fix] Fix rows calculation in graph

[Feature] Interpolate points sent to webui

[Fix] Update d3evolution version

[Feature] Enable rrd by default

[WebUI] Enable throughput graph show

[Fix] Correctly parse query type

[Fix] Treat NaN values properly in graph command

[Fix] Improve rrd diagnostic errors

[Fix] Try to avoid FP when checking for phished URLs

[Feature] Improve phishtank and openphish support

[Fix] Fix scheduling of locked map events

Merge pull request #692 from moisseev/conf-composites

[Conf] Allow easy adding composites

Merge pull request #691 from moisseev/conf-fuzzy_check

[Conf] Fix fuzzy_check.conf includes order

[Doc] Add link to fuzzy storage doc

[Conf] Allow easy adding composites

[Conf] Fix fuzzy_check.conf includes order

This fixes #672 and fixes #563.

[Feature] Show symbols description in scan output

[Feature] Implement zero-copy mode for HTTP reading

[Fix] Improve phishing module logging

[Fix] Do not leave temporary maps cached

[Fix] Fix maps locking

[Feature] Humanize numbers in stats widgets

[Feature] Always allow to terminate rspamd

Merge pull request #689 from moisseev/patch-1

[Minor] Correct grammar

Merge pull request #686 from fatalbanana/robot

Minor tweaks for test suite

Merge pull request #687 from moisseev/batv

[Feature] Add support for non-standard BATV signatures

[Minor] Correct grammar

[Feature] Add support for non-standard BATV signatures

[Test] Fix Python3 compatibility

[Test] Add generic rspamc result processor

[Feature] Add workaround for systems without sane shmem support

OSX is so POSIX, such Unix, wow!

[Fix] Fix build with the new tests framework

[Feature] Add test to check shared memory support sanity

[Minor] Add more debugging possibilites for maps code

[CritFix] Fix leak of shared memory fds and files

[Fix] Fix memory leak in unsigned maps reading

[Fix] Fix a stupid misprint in word 'phishing'

[Fix] Fix setting path for phishtank

[Doc] Fix case

[Minor] Fix URL

[Doc] Slightly update readme document

[Doc] Document how to use phishtank feed

[Fix] Always register openphish and phishtank virtual symbols

[Feature] Add preliminary phishtank support

[CritFix] Fix encrypted fuzzy requests

[Feature] Implement mapping of remote flags to local flags

[Minor] Disable version 4 of hashes

[Feature] Allow to change flag from fuzzy learn condition

[Conf] Add an example of fuzzy storage worker

[Conf] Modernize composites config

Merge pull request #683 from fatalbanana/robot

[Test] Replace functional test framework

[Test] New functional test framework

[Feature] Allow hostnames in IP maps

[Feature] Allow to query storage about number of fuzzy hashes stored

[Feature] Improve master/slave logging

[Fix] Fix size of length in fuzzy mirror wire protocol

[Feature] Allow setting fuzzy flag by symbol not by value

[Fix] Fix accepting the first update when local idx is -1

[Fix] Fix inserting values to the sources list

[Fix] Fix fuzzy storage encrypted mirroring

[CritFix] Fix writing of encrypted HTTP requests

[Fix] Send updates to mirrors only if we have some changes

[Fix] Use non-blocking mode for systemd sockets

Issue: #430
Reported by: @Twilek-de

Merge pull request #681 from moisseev/patch-3

[Minor] Update redirectors.inc

Merge pull request #682 from moisseev/patch-4

[Doc] Add IPv6 loopback to `allow_update` example

[Doc] Add IPv6 loopback to `allow_update` example

[Fix] Fix parsing of braced IPv6 addresses

[Fix] Fix openssl initialization

[Fix] Fix the case of multiple values keys

[Feature] Use new ip parsing API

[Fix] Avoid linking with actrie if hyperscan is enabled

[Feature] Add generic fucnction to parse IP maps

Issue: #679

[Rework] Include config structure to all rcl handlers

[Minor] Update redirectors.inc

[Feature] Allow to skip some initialization phases to speed up rspamadm

[Minor] Propagate fuzzy server error to a client