cluster-computing

-3热度

1回答

我有一个小问题。计算节点具有2个插槽，每个插槽12芯。所以它有24个核心（在我的情况下是24 cpu）。当我运行并行计算，我可以使用所有CPU？换句话说，我们是否需要为后台程序腾出几个cpus？顺便说一句，我认为使用相同的芯片（同一插槽）上的CPU可避免插座之间的commmunication，这可能会加速运行。那么如何确定应该使用多少cpus来产生最快的运行？在这个问题上的任何一般性的建议

0热度

1回答

如何在DTWCLUST库R中计算质心

我在r中使用DTWCLUST包。这是我的代码。 library(dtwclust) sc1 <- read.table("D:/handling data/confirm4.csv", header=T, sep=",") hc_sbd <- dtwclust(sc1, type = 'h', k=5L, method = 'ward.D', preproc = zscore,

0热度

1回答

Docker容器中的ntpd服务已死，无法重新启动

我正在尝试使用docker和ambari装入本地hadoop群集，im问题是ambari安装检查显示NTP未运行，需要知道如果安装了ambari的服务正在运行。我在集装箱检查NTPD，并试图发动他们，但失败了 [[email protected] ~]# service ntpd start Starting ntpd: [ OK ] [[email protected]

1热度

1回答

在集群环境中使用Springboot的Websocket

我们希望在Spring引导集群环境中实现websocket。我们正在使用JWT进行身份验证。我明白我们可以使用ActiveMQ或RabbitMQ作为脚踏代理。但是我们已经在使用redis了，我们可以如何使用redis，因为我们不想增加维护另一个消息服务的额外开销？

0热度

1回答

春点燃不同的节点上集成

考虑这种情况： Spring应用程序启动其中加入一些点燃集群Ignite节点。在这个节点上开始点燃注入@SpringResource的singleton服务（并且根据点火文档，这个变量必须标记为transient）。现在这个节点停止运行，服务的副本在不知道Spring的其他节点上恢复。所以问题是：如何将春豆注入这个恢复的服务？ Thanx提前。

2热度

2回答

火花主控连接正在关闭一个请求待定从火花从属

我想设置一个2机器火花集群。我在Windows主机上使用两个VirtualBox Ubutnu 16.04访客机器进行设置。 Master是Windows 10主机上的Ubuntu 16.04 Guest，而Slave是Windows 7 Host上的Ubuntu 16.04 Guest。我也做了以下几件事：在两台机器上设置密码的ssh少。安装Java和星火两种机器上在两台机器上安装路径

0热度

1回答

slurmstepd：错误：在某个点超出步骤内存限制

我正在Bluehive中运行代码。代码有一些参数N.如果N很小，那么代码运行得很好。但是，对于稍微大的N（例如N = 10）的码被运行数个小时，并在结束时我收到以下错误消息： slurmstepd: error: Exceeded step memory limit at some point. 其中我提交批处理文件有以下代码： #!/bin/bash #SBATCH -o log.%a.t

2热度

2回答

可以通过互联网使用卡夫卡吗？

卡夫卡适合网络使用吗？更确切地说，我想要的是将kafka主题公开为“公共接口”，然后外部消费者（或生产者）可以连接到它。可能吗？如果我想在内部和外部网络中使用集群，我听说有问题，因为很难配置advertised.host.name。真的吗？我还必须公开zookeepr吗？我认为新的消费者/制片人api不再需要这一点。

0热度

1回答

卡桑德拉多相DC：需要写在本地和从任何DC

我的项目需要阅读是这样的。我们使用多数据中心（DC）cassandra集群。在写入集群期间，我只希望LOCAL DC在其节点上执行写操作，因为我们已经根据写入启动的源，将写请求路由到所需的DC。所以，我只需要LOCAL DC来处理写操作，而不需要其他DC来在其节点上执行写操作。但后来凭借跨DC的节点之间的复制，我希望跨数据中心复制写入的数据。当我首先限制写入只有一个DC时，是否可以跨DC进行这种复

1热度

1回答

为什么集群模式比Spark中的客户端模式慢得多？

我有使用GraphFrame创建的15k图形对象。这些图很小（10-100个节点，每个图10-100个边）。我只需要在每个图上应用最短路径和某些其他算法。我目前的实现是使用for循环遍历所有15k图形。令人惊讶的是，集群模式比客户端模式慢得多。我处理了10张图。以下是客户端模式和集群模式的性能指标。我试图找出为什么集群模式比客户端模式慢。我无法理解指标。配置为群集（火花独立）配置为客户端模式