fluentd

1热度

1回答

在可用的开源日志管理工具中，我遇到了这两个，但无法弄清楚要使用哪一个。我试着搜索Graylog vs Fluentd的文章，但找不到。可能有人建议，其中一个将是很好的以下标准， *生产主从机架构与不那么高端硬件，如单核处理器与4GB RAM和体面驱动器大小以容纳日志 *通过UI 登录搜索 *基于规则 *最小的设置（如果可能） *动态添加/删除VIP从属主机在感谢警报advance Mir

0热度

1回答

使用高级消费者阅读卡夫卡日志时，存在不一致的分区滞后值

我们的30个主题都是在我们的kafka中使用10个分区创建的。我们通过分区监控所有主题/组标识的滞后。我们使用Fluentd插件来读取和路由来自kafka的日志。该插件是使用高级消费者实现的。我们为某些主题配置了一些消费者，为一些插件的主题配置了一些消费者。总体而言，除了其中的3个主题外，数据流畅无阻。问题是，对于正在处理的30个主题中的3个，我们看到分区滞后值不一致，即，通过查看特定主题/组

0热度

1回答

如何使用fluentd将1小时前的文件上传到S3？

我已经成功上传文件到S3使用fluentd。我正尝试使用fluentd将一小时前的文件上传到S3。例如，只能上传1小时前上传的文件，不能上传不是1小时前的文件。我只想上传目前一小时前的文件。如何做到这一点，我是新来的流利吗？上传过去的数据

0热度

1回答

流程嵌套JSON与Fluentd

使用Fluentd日志管道，随着输入： {"event" : {"name" : "toto", "date" : 14....11}} 我怎样才能变换领域event.date为有效日期？我想： <filter *.*> @type record_transformer <record> event.date ${Time.at(event.date).strftime('%Y-%m-%dT

0热度

1回答

流利的持久性和可靠性

由于fluentd不使用redis，但据推测内置了更好的可靠性，如何在它有机会将日志发送到弹性搜索之前解决实例发生故障的问题？这是不是很重要的担心，例如你可以高频率地设置日志的蒸发，所以如果你失去了实例，只有几行不会转移？

0热度

1回答

使用Docker的安全日志记录驱动程序？

我注意到fluentd引擎使用out_forward输出来发送日志。这意味着所有日志都以明文形式发送。有没有办法指定输出类型？我希望能够让Docker用out_secure_forward来发送日志。是否有计划启用更多配置？如果我想要安全，我应该使用不同的日志记录驱动程序吗也许使用JSON文件引擎，然后使用fluentd来安全地发货？

1热度

1回答

如何将数据从fluentd路由到运行在远程服务器（influx服务器）上的influxdb？

我有一个设置，我从我的Raspberry pi上运行的python脚本读取传感器数据。我想将传感器读数存储在我的influxdb上。我在创建数据库的influxdb中有一个账户。我将来自传感器的数据重定向到“fluentd”。所以，我的传感器数据即将变得流利，它也在我的覆盆子pi上运行。现在，我将输出的数据输出到“标准输出”，并可以在控制台上看到数据。所以，这工作正常。现在我想将这些数据路由

2热度

2回答

Fluentd + golang记录应用程序出错

我是golang和fluentd的新手。我正在尝试使用来自github.com/fluent/fluent-logger-golang/fluent的fluentd记录器库构建日志记录应用程序。在192.168.0.106 fluentd服务正在运行，并监听24224 下面是在golang登录程序。 package main import ( "github.com/fluent/f

0热度

1回答

用FluentD删除密钥

我有一个JSON文件，它是由一个工具生成的。我想在转发它之前删除一个属性。 <source> @type tail path /var/log/app/file.json pos_file /var/log/td-agent/file.pos # pos record tag file_json format json </source> <

0热度

1回答

如何从泊坞窗发送参数去fluentd对文件输出动态决定

我希望我的问候，世界集装箱输出到fluentD - 我想FluentD动态将其设置为一个文件夹的想法是这样 docker run --log-driver=fluentd --log-opt fluentdLogsDirName=docker.{{.NAME}} hello-world 和fluentd的配置文件启动容器是这样 <source> @type forward </s