fluentd

0热度

1回答

我正在使用fluentd管道nginx日志使用尾部插件elasticsearch。提供了一个正则表达式分析字段： ^(?<remote>[^ ]*) (?<host>[^ ]*) (?<user>[^ ]*) \[(?<time>[^\]]*)\] "(?<method>\S+)(?: +(?<path>[^\"]*) +\S*)?" (?<code>[^ ]*) (?<size>[^ ]*)(?

1热度

1回答

如何在使用fluentd进行码头日志时获取容器和图像名称？

我正在使用装载/ var/lib/docker/containers目录的fluentd容器，并且为每个容器尾部放置所有日志。日志存储在/var/lib/docker/containers/$container_id/$container_id-json.log中。这些不包含容器名称或图像名称。我需要能够将独立字段中的容器和图像名称添加到来自日志文件的每个日志中。容器名称和图像名称都存储在/va

1热度

1回答

Fluentd在牧场主升级后未获得正确的码头容器名称

想象一下由码头工人撰写文件指定的一组容器。这些容器在牧场主的帮助下运行。容器设置为使用fluentd日志记录驱动程序。日志记录驱动程序将消息发送到弹性搜索，我们使用Kabana查看我们的日志。此设置工作正常，直到我们执行牧场升级。在牧场主升级之后，容器名称被设置为容器的UUID值。这使得调试变得困难，因为并不是所有的调试消息都与容器名称过滤器一起工作，因为UUID将始终不同。如果将堆栈从ran

0热度

1回答

流利，插件-的grep：grep的A或B比

我们正在使用的流畅，插件-的grep：这是我的过滤器看起来像 <filter **> @type grep regexp1 level ERROR </filter> 如何我必须要改变时，我想这个过滤器过滤级别错误或致命？（所以不只是错误）？

1热度

1回答

Rails.logger语句没有流畅的标记

我试图设置通过fluentd将Rails日志发送到收集器。我正在使用act-fluent-logger-rails，lograge和fluent-plugin-parser gems。当我浏览我的网站时，GET和POST请求得到匹配，解析，标记并正确地发送到收集器，但是我无法通过Rails.logger获取任何我在日志记录期间记录的信息，没有标签。例如，在应用程序的轨道控制台： irb(main

0热度

2回答

Docker：在容器启动时更改文件中的单词

我正在为我们的fluentd创建一个docker镜像。图像包含一个名为http_forward.conf 文件它包含： <store> type http endpoint_url ENDPOINTPLACEHOLDER http_method post # default: post serializer json # default: form

-1热度

1回答

物联网流架构

我刚开始学习关于物联网和数据流。道歉，如果这个问题似乎太明显或通用。我工作的学校项目，其中包括从物联网传感器的数百个（甚至千计）数据流，存储所述数据的数据库，然后检索这些数据对基于Web的用户界面显示。需要注意的事项是：的容错性和接受不完整的数据的能力条目数据库必须具有加载由流的能力和查询数据我已经在谷歌环顾四周，了解如何构建能够支持这些要求的架构的一些想法。下面是我的想法：传感器数

0热度

1回答

如何通过建立综合我自己的RPM文件，例如TD-代理转

我想做什么：我想在CentOS 7.x的运行TD-代理的两个版本。所以，我想在我的yum repo服务器上注册默认的td-agent和td-agent-my-own。而且，为此，我想创建我自己的td-agent的rpm文件; td-agent-my-own。我做了什么：到目前为止，我下载omnibus-td-agent，和我编辑omnibus-td-agent/config/proje

0热度

2回答

Fluentd高可用性设置和复制

我有以下问题：我们在高可用性设置使用fluentd：转发器的几K - >使用聚合器进行地理区域和ES/S3在端复制插件。我们遇到了一个故障（日志没有经过几天），并且自恢复以来，我们从流利中获取了大量重复记录到我们的ES集群（包括恢复后的重复数据）。 @type copy plugin有没有可能导致这种行为的已知问题？我们代理配置： # TCP input <source> @ty

0热度

1回答

当他们只是信息时，日志显示为错误

当我在查看我的容器引擎日志时，看到很多警告。进一步深入挖掘之后，我意识到这些错误实际上只是来自heapster的日志。我相信这是由于I0730 我kubernetes集群启动日志使用的版本：1.3.2 my latest logs