giraph

0热度

1回答

如何在giraph（或）如何让giraph读取多个输入文件的多个输入路径给gora avrostore

如何让giraph从多个输入路径读取数据。我在gora.properties使用该 gora.datastore.default = org.apache.gora.avro.store.Avrostore gora.avrostore.input.path =文件：///路径/到/文件1。 avro，file：///path/to/file2.avro 但它给出了这个错误输入路径不存在：fi

1热度

1回答

Giraph，Hadoop，Spark和Cassandra

如果我有Spark群集和Cassandra但没有Hadoop群集，我可以使用Giraph吗？目前，我正在使用GraphX并希望使用Giraph来代替。考虑到我有Spark集群并且正在使用Cassandra，这是否可能？

0热度

1回答

将图形数据从边缘输入格式转换为顶点输入格式

我正在尝试使用Giraph。要运行Giraph中的算法，我需要图形数据处于顶点输入格式。几乎所有可用的大数据在线都采用边缘列表格式。我用Java编写了一个代码将这个边界列表格式转换成VertexInputFormat。这适用于边缘近800k的小图。但是对于我需要的图表，每次运行该程序时，都会给我堆空间超出错误。我尝试将堆大小增加到最大值。仍然错误仍然存在。我正在运行的文件大小约为15GB。

1热度

1回答

尽管设置了mapred.job.tracker，Hadoop 1.2.1仍以本地模式运行。值

我正在尝试将giraph作业提交到hadoop 1.2.1群集。该集群具有名称节点主节点，映射缩减主节点和四个从节点。该作业与以下异常失败： java.util.concurrent.ExecutionException: java.lang.IllegalStateException: checkLocalJobRunnerConfiguration: When using LocalJobRu

0热度

1回答

apache giraph：java.lang.IllegalAccessError

我一直在使用Hadoop 2.7.3和Giraph 1.3.0在Ubuntu服务器上运行Apache Giraph作业。我也尝试在低版本的Giraph（1.2/1.1）上运行Hadoop 2.6的相同工作。但是在这两种情况下我收到以下错误。 Exception in thread "main" java.lang.IllegalAccessError: tried to access method

0热度

3回答

无法在Hadoop中格式化的Namenode

虽然通过执行命令 “斌/ Hadoop的NameNode的-format” 格式化namenode的我得到这个错误： hduser @ Ubuntu的：〜/ Hadoop的/ bin中$ ./hadoop的NameNode -format DEPRECATED：不推荐使用此脚本执行hdfs命令。改为使用hdfs命令。错误：无法找到或加载主类org.apache.hadoop.hdfs.serv

0热度

1回答

在没有互联网连接的机器上安装Apache Giraph

我想在RedHat群集上安装Apache Giraph 1.1.0，Hadoop 2.7.1已经在群集上安装和配置。在官方教程http://giraph.apache.org/quick_start.html中，建议下载Giraph的源代码并使用Apache Maven编译Giraph（需要Internet连接），但是，群集未连接到Internet。我的问题是：有没有办法在没有网络连接的机器上安装

0热度

1回答

Eclipse IDE和Giraph

我想用Eclipse IDE创建一个新的Giraph程序。我如何将Giraph包含到Eclipse中？我是这个主题的新手。我使用Shell环境运行Giraph程序和文本编辑来编写程序。但使用JAVA IDE似乎是最好的方法。我怎样才能做到这一点？谢谢。

0热度

1回答

远程消息的数量Giraph

我是Giraph和Hadoop中的新成员。有什么方法可以统计图形顶点之间交换的本地消息和远程消息（通过网络传输）的数量？

0热度

1回答

Apache Giraph的阵列顶点值

我需要处理一个图表，其顶点值具有数组（双精度）而不是单个双精度值。所以输入格式将是vertex_Id（字符串）\ t vertex_value（数组）\ t邻居。看文档，似乎没有支持这种格式的类。我需要哪些选项将这种格式的输入提供给Giraph？