接收事件时索引不同来源的数据

yacmzcpb  于 2021-06-10  发布在  ElasticSearch
关注(0)|答案(1)|浏览(314)

很好的一天,
在elasticsearch中为一些数据编制索引时,我有点头疼,对一个好的方法有一些疑问。
到目前为止,接收到一个关于Kafka主题的事件,其中只包含应该存储在文档中的一部分数据。其余的数据需要在接收到事件后收集,并且可以从不同的api获得。为了减少工作量,logstash似乎是一个很好的方法。
有没有一种方法可以配置logstash,以便在接收到事件时从不同的api和dbs启动数据收集,然后用组合的日期组装文档,或者我一直在为索引编写耗时的自定义逻辑?我到处找了一下,但找不到关于这个问题的好答案。

oo7oh9g9

oo7oh9g91#

在logstash中,您需要的是使用来自外部api的数据来查找/丰富消息,对吗?你可以使用logstash的http\u过滤器插件

相关问题