使用YourKit分析Spark应用程序

我拥有Cloudera 5.10的群集。对于剖析我正在与参数火花提交：使用YourKit分析Spark应用程序

--conf "spark.driver.extraJavaOptions= -agentpath:/root/yjp-2017.02/bin/linux-x86-64/libyjpagent.so=sampling" 
--conf "spark.executor.extraJavaOptions= -agentpath:/root/yjp-2017.02/bin/linux-x86-64/libyjpagent.so=sampling"

而且它仅适用于驱动程序的工作好。当我为执行者使用此选项时，我得到了异常

Stack trace: ExitCodeException exitCode=1: 
     at org.apache.hadoop.util.Shell.runCommand(Shell.java:601) 
     at org.apache.hadoop.util.Shell.run(Shell.java:504) 
     at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:786) 
     at org.apache.hadoop.yarn.server.nodemanager.DefaultContainerExecutor.launchContainer(DefaultContainerExecutor.java:213) 
     at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:302) 
     at org.apache.hadoop.yarn.server.nodemanager.containermanager.launcher.ContainerLaunch.call(ContainerLaunch.java:82) 
     at java.util.concurrent.FutureTask.run(FutureTask.java:266) 
     at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142) 
     at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:617) 
     at java.lang.Thread.run(Thread.java:748)

我找不到任何有用的日志和我在每个节点上遇到的相同异常。同样的，如果我'使用本手册enter link description here

而且，如果我离开只是配置驱动程序，一切工作正常，我可以使用YourKit连接到驱动可以采取什么问题吗？

来源

2017-06-12 Cecchini Barnaba

固定。这是/ root文件夹的权限问题 –

可能是执行程序启动32位JVM吗？那么应该指定32位YourKit代理的路径？

来源

2017-06-26 15:55:58

使用YourKit分析Spark应用程序

回答

相关问题