cluster-computing

1热度

1回答

如何为每个任务设置1 gpu的slurm/salloc，但让工作使用多个gpus？

我们正在寻找与slurm salloc GPU分配一些意见。目前，给定： % salloc -n 4 -c 2 -gres=gpu:1 % srun env | grep CUDA CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 CUDA_VISIBLE_DEVICES=0 但是，我们希望不仅仅

1热度

1回答

socketError：权限被拒绝

我试图通过android代码连接到hdfs集群，但我面临着socketError中的问题。下面我包括日志文件和代码。连接正在正确建立，但在创建连接套接字时出现问题。 Connect_Ssh: DllDate: Aug 30 2017 ChilkatVersion: 9.5.0.69 UnlockPrefix: Anything for 30-day trial Architecture:

1热度

1回答

奇数如何解决分布式系统中的裂脑问题？

分布式系统建议使用奇数个主节点，如3个主节点或5个主节点以避免脑裂问题。但是它是如何解决这个问题的？如果有2个节点（A和B），1个主持人，如果A和B告诉主持人说：“我是大师”，那么大脑发生分裂。主持人不能决定哪一个是主人。如果有3个节点（A，B和C），那么，如果2个节点说Master是A，则主持人可以决定A是母版。但如果死了，然后主持人不得不从B和C中选择一个主会发生什么，如果B和C分不清

0热度

1回答

没有Kerberized卡夫卡经纪人连接到Kerberized Zookeeper

我找不到任何关于这个问题的信息，所以我会很高兴，如果有人可以帮助我这一点。我有一个服务，如一个Kerberos的集群 HBase的，MapReduce的，HDFS，动物园管理员 ......所有采用Kerberos和工作。让我们想象一下我要添加一些卡夫卡经纪人集群，但我不想Kerberize卡夫卡，因为睾丸一枪让我觉得比Kerberos的卡夫卡的想法更好。我不知道我是否错过了某些参数....

0热度

1回答

如何在jgroup replicated hashmap中给状态转移超时？

如何在Jgroup集群中指定状态传输超时？ public static ReplicatedHashMap<Integer, BaseSeatLayout> _baseSeatLayoutCache; JChannel baseRouteCache = new JChannel(props); baseRouteCache.connect("Master-Cluster"); client.

0热度

1回答

确保使用Hazelcast在数据中心之间进行复制

我有一个应用程序，它同时在的数据中心上部署了一个拉伸的Hazelcast集群。这两个数据中心通常都具有完整的功能，但有时，其中一个数据中心完全脱离网络进行SDN升级。我打算实现的是以这样一种方式配置集群，即DC中的每个主分区至少有2备份 - 一个在另一个集群中，另一个在当前集群中。为此，检查文档指向分区组的方向（http://docs.hazelcast.org/docs/2.3/manual

0热度

1回答

纱线簇上的spark scala csv export

我有一个5个节点的簇，部署了YARN。 2个Namenodes和3个Datanodes。虽然我的代码是在spark中提交的。我试图将数据导出到csv，但是当我这样做时，数据会被导出到2个datanodes，并且两个导出文件夹中都会有不同的内容。一个会有_SUCCESS文件，另一个会有导出的csv（part- *）。我的应用程序结束了一个空白路径，因为有时具有_SUCCESS文件的节点和运行应用程序

0热度

1回答

Web服务器使用tomee多个ejb服务器呼叫

我正在使用TomEE服务器，我想将我的ejb应用程序部署到多个实例并希望使用Web应用程序访问它。我想在Web应用程序和ejb应用程序之间添加负载平衡器。我怎样才能做到这一点。我已经有一个使用mod_jk的web应用程序多个实例的负载平衡器，但我需要在INITIALCONTEXT属性文件中的某处配置此配置。附上我想要构建我的应用程序体系结构的照片。 architecture pic 我在这

0热度

1回答

DRBD - 裂脑问题

使用带有起搏器的2节点DRBD（v9.0）集群。 STONITH已禁用。我已经重新启动了我的节点2（它充当主节点）。然后重新启动后，我无法登录，并显示发生了裂脑。我该如何避免这种情况？如果我启用了STONITH，它会被修复吗？如果两个节点都写入了一些数据会发生什么？

0热度

1回答

如何将janusgraph与现有的hadoop集群进行整合

我是大数据新手，目前正努力将janusgraph整合到现有的hadoop集群。你能告诉我怎么做，或者请提供一个资源链接。