从 FTP 收集日志文件到 Logstash/Elasticsearch

Question

我正在调查用于收集日志文件的 Elastic 堆栈。据我了解，Elasticsearch 用于存储和索引，Logstash 用于解析它们。还有 Filebeat 可以将文件发送到 Logstash 服务器。

但似乎整个堆栈都假定您对生成日志的服务器具有 root 访问权限。就我而言，我没有 root 访问权限，但我可以通过 FTP 访问这些文件。我查看了 Logstash 的各种输入插件，但找不到合适的。

是否有 Elastic 系统的组件可以帮助进行此设置，而无需我编写（容易出错的）自定义代码？

Answer 1

也许你可以使用带有 curl 的 exec 输入插件。比如：

exec {
    codec => plain { }
    command => "curl ftp://server/logs.log"
    interval => 3000}
}