2012-04-19 57 views
1

我正在尝试剖析猪查询,但到目前为止还没有任何有用的东西。剖析猪查询

我试图来衡量CPU,磁盘I/O,内存使用情况。

任何人都可以指导我吗?

事情试过到目前为止

海星 - 工程与Hadoop的工作,但没有与猪 - 不支持生猪查询

HPROF - 工程与Hadoop的工作,但没有与猪查询。 - 生成配置文件仅适用于Hadoop的工作

两个Hadoop和猪的工作在同一个集群中被执行。

感谢您的阅读!

回答

1

可能会导致你的JXInsight /作品(这是免费的)和标记或执行查询,然后可以采取下列作业完成快照之前标记集群一些延迟的数据。

http://www.jinspired.com/site/jxinsight-opus-1-0

我们将走出来的JXInsight /作品为各种大数据平台,包括卡珊德拉,Hadoop的,猪X版本,....

如果你需要更多的权力和更多的米( cpu,io等),您可以随时查看JXInsight/OpenCore产品。

+0

威廉 - 非常感谢分享此。看起来这将会完成这项工作。我会今天尝试它,并会让你知道结果。再次感谢一吨! – athap 2012-04-19 17:01:07

+0

威廉,您的网站似乎没有任何下载链接:/我很想尝试您的产品,但无法下载它是有点问题;) – 2012-11-14 20:10:04

1

可以由猪产生的MR工作中使用HPROF或其他分析工具。见https://cwiki.apache.org/confluence/display/PIG/HowToProfile

+0

感谢您的信息。之前我尝试过Hprof,但它只为hadoop作业生成配置文件,而不是用于猪查询。您提供的链接还有其他一些看起来很有趣的选项。我会尝试一下并让你知道结果。 – athap 2012-05-03 04:33:40

+0

非常感谢user617093。这对我有效。由于这里的积分系统,我无法投票回答这个问题。但这对我很有用。再次感谢 !! – athap 2012-05-04 04:32:06