PHP SecurityServicesScraper

php-securityservicesscraper

php-securityServicessCraper是概念项目的证明，旨在解决数据收集，集中化和相关问题，这些问题可能会在整个环境中部署许多独立的安全工具。

该应用程序使用Laravel框架。数据收集是通过计划的工匠命令执行的。每个命令基本上都是Web搜寻器或API客户端，具体取决于目标应用程序是否提供了访问其数据的任何服务。

这些命令对其目标应用程序进行身份验证，并查询数据。当数据收集和归一化完成后，命令将其数据运送到KAFKA实例。每个命令将数据发送到一个或多个KAFKA主题，该主题是该特定数据所特有的。 Kafka充当事件队列，将数据提供给Logstash消费者（Logstash-Input-Kafka），然后将数据升级到Elasticsearch Cluster。