artful Asked: 2016-08-02 13:07:54 +0800 CST2016-08-02 13:07:54 +0800 CST 2016-08-02 13:07:54 +0800 CST 流畅的弹性搜索压缩 772 我使用 fluentd ( type tail) 将日志从应用服务器转发到弹性搜索服务器。不明白以下内容: 我可以启用以减少使用type tail或其他类型的压缩传输日志的流量吗? logging compression elasticsearch fluentd 1 个回答 Voted Best Answer dutzu 2016-09-10T03:54:02+08:002016-09-10T03:54:02+08:00 如果您只使用其中的一个<match>,type elasticsearch它将通过 http 调用发送数据。 一种替代方法是拥有 2 个 fluentd 实例,一个在您跟踪的服务器上,另一个在一个弹性搜索节点上,并通过secure-forward输入/输出插件相互通信。 这些插件允许通过使用 TLS 加密的 TCP 传输,并且也将压缩。 通过这种方式,您可以减轻网络负载,并且接收 fluentd 实例上的数据将被快速推送到 elasticsearch,因为它们位于同一台机器上。
如果您只使用其中的一个
<match>
,type elasticsearch
它将通过 http 调用发送数据。一种替代方法是拥有 2 个 fluentd 实例,一个在您跟踪的服务器上,另一个在一个弹性搜索节点上,并通过
secure-forward
输入/输出插件相互通信。这些插件允许通过使用 TLS 加密的 TCP 传输,并且也将压缩。
通过这种方式,您可以减轻网络负载,并且接收 fluentd 实例上的数据将被快速推送到 elasticsearch,因为它们位于同一台机器上。