Flume“假脱机目录源”递归 - 查找子目录内的文件

Question

我正在寻找Flume“假脱机目录源”递归 - 查找子目录内的文件。 这里有一些参考https://issues.apache.org/jira/browse/FLUME-1899 但是自那时以来有多个版本出来，有没有什么办法可以在后台源文件的子目录中查找子目录中的递归目录。

Answer 1

我想你可以直接使用补丁FLUME-1899-2.patch。 将“recursiveDirectorySearch”设置为您的配置文件中的ture。

注意：配置文件的ignorePattern中的正则表达式也会影响recursiveDirectory文件夹名称。因此如果您想忽略文件夹名称，您可能需要修改org/apache/flume/client/avro/ReliableSpoolingFileEventReader.java中的代码。