PHP SecurityServicesScraper

php-securityservicesscraper

php-securityServicessCraper是概念項目的證明，旨在解決數據收集，集中化和相關問題，這些問題可能會在整個環境中部署許多獨立的安全工具。

該應用程序使用Laravel框架。數據收集是通過計劃的工匠命令執行的。每個命令基本上都是Web搜尋器或API客戶端，具體取決於目標應用程序是否提供了訪問其數據的任何服務。

這些命令對其目標應用程序進行身份驗證，並查詢數據。當數據收集和歸一化完成後，命令將其數據運送到KAFKA實例。每個命令將數據發送到一個或多個KAFKA主題，該主題是該特定數據所特有的。 Kafka充當事件隊列，將數據提供給Logstash消費者（Logstash-Input-Kafka），然後將數據升級到Elasticsearch Cluster。