我有一个连续运行在YARN上的闪存串流作业。我无法看到正在运行的任何应用程序日志。作为独立的Java程序运行时,我只获取日志。在哪里查看flink streaming作业的日志?
1
A
回答
0
Flink作业的输出将写入TaskManager的标准输出。
编辑:作业完成时:纱线,你可能会使用聚合YARN日志(yarn logs -applicationId <appid>
)检索所有日志,如果你已经启用了访问该输出。
一个快速和肮脏的解决方案是例如发送您的输出在接收器插座。
1
那么在YARN上运行时没有直接的方法来检查日志。
我找到了另一种方法。我已将Flink Rolling Sink添加到正在使用YYYY-mm-dd - HH 格式将日志写入hdfs位置的流式作业中。
除此之外,创建配置单元表查询日志。
相关问题
- 1. 通过Flink仪表板提交的工作日志在哪里?
- 2. 在哪里可以找到Apache Tez的作业执行日志
- 3. hadoop streaming:应用程序日志在哪里?
- 4. HRegionServer的日志在哪里?
- 5. symfony 2.8日志查看器 - 在哪里提交?
- 6. 我在哪里可以查看Google Analytics iOS崩溃日志?
- 7. neo4j慢查询日志在哪里?
- 8. 如何在Flink Standalone中查看日志或Sysout
- 9. 如何在flink streaming作业中读写HBase
- 10. phpmyadmin操作日志存储在哪里?
- 11. Flink CsvTableSource Streaming
- 12. PHPMailer日志在哪里?
- 13. 日志在哪里申报?
- 14. 如何处理flink streaming作业中的背压?
- 15. flink-streaming-java在Apache Flink中不可用
- 16. Global.java的日志去哪里?
- 17. Jenkins日志以查看导致作业失败的原因
- 18. jenkins - 如何查看外部作业的日志目录?
- 19. Spark Streaming在哪里运行?
- 20. 我在哪里可以看到我的程序中的日志
- 21. 在哪里查看装配操作员?
- 22. hadoop streaming:如何查看应用程序日志?
- 23. YARN上的Spark日志在哪里?
- 24. 乘客的日志文件在哪里
- 25. iriscouch上couchdb的日志在哪里?
- 26. 我的日志消息在哪里?
- 27. 我的日志文件在哪里?
- 28. gnome vino-server的日志在哪里?
- 29. Jenkins:查看哪些作业共享锁
- 30. flink是否支持暂停flink作业?
直到工作完成后才能使用。 – Sohi
对于YARN日志你是对的,对于标准输出或接收器插座它的工作原理。 – ImbaBalboa