snowfall

0热度

1回答

我在R降雪包中使用sfApply进行并行计算。有32000个测试运行。代码在启动计算时工作正常，它会创建46个Rscript.exe进程，每个Rscript.exe的CPU使用率为2％。整体CPU使用率约为100％，并且结果不断写入磁盘。计算通常需要几十个小时。奇怪的是，Rscript.exe进程逐渐变为非活动状态（cpu usage = 0），并且相应的cpu也处于非活动状态。两天后，通过查看C

0热度

3回答

[R降雪：平行申请表列

我有很多行和列的表男，从文本文件获得： M <- read.table("text.csv",header=TRUE,sep="\t") 要获取列的行列我成功地使用： M <- apply(M,2,rank) 我想加快计算速度，但我没有成功实现这个功能在降雪。我想： library(snowfall) sfStop() nb.cpus <- 8 sfInit(parallel=TR

0热度

2回答

CSS3降雪动画禁用内部链接

我想通过使用CSS3使用降雪动画。但是，当我使用CSS代码，我的网站大多数内部链接禁用。另外我无法从网站选择任何内容。这里我的代码： body { background-color:#333; } #snow{ background: none; font-family: Androgyne; background-image: url('http://www.w

0热度

1回答

R：根据自定义距离函数和多个条件快速匹配记录

我在R中进行了一些功能，将化学质谱（具有两列整数质量和强度的矩阵）与基于自定义光谱相似性函数和化合物的所谓保留指数（即洗脱时间）的匹配（例如，参见http://webbook.nist.gov/cgi/cbook.cgi?ID=C630035&Mask=200）。为此，每个记录的列表元素“RI”必须与库中的列表元素进行比较，并且当绝对偏差小于给定容差时，它应该将最佳谱库匹配添加到我的记录中。下面是

5热度

1回答

用降雪初始化MPI集群R

我一直试图在我的大学的集群上运行Rmpi和snowfall，但由于某种原因，无论我分配了多少计算节点，我的snowfall初始化只能在一个节点上运行。这里是我如何对其进行初始化： sfInit(parallel=TRUE, cpus=10, type="MPI") 任何想法？我会根据需要提供说明。

1热度

1回答

什么时候需要使用sfExport（R降雪包）

我正在使用降雪进行并行计算。我总是只在一台机器上安装多个CPU（> 20个内核）。我正在处理大量数据（> 20GB）。 sfExport（）需要很长时间。当我在我的笔记本电脑上运行我的测试代码并检查CPU使用情况时，有时也会在没有sfExport（）的情况下运行。我的代码的某些部分嵌套了sfLapply（）函数。像： func2 <- function(c,d, ...) { r

4热度

1回答

R：在doParallel /降雪使集群挂起

我有两台服务器在局域网上在CentOS 6.4最小的全新安装和R 3.0.1。两台计算机都安装了并行，降雪和降雪软件包。的服务器可以ssh到对方的罚款。当我试图使集群在任一方向，我得到一个密码的提示，但在输入密码后，它只是挂起那里无限期地。 makePSOCKcluster("192.168.1.1",user="username") 如何解决此问题？编辑：我还试图调用makePSOC

0热度

1回答

降雪的sfApply和sfClusterApplyLB比正常的循环或补充要慢

当我在R中应用此代码时，循环和sapply比降雪的函数更快。我究竟做错了什么？（使用的窗户8） library(snowfall) a<- 2 sfInit(parallel = TRUE, cpus = 4) wrapper <- function(x){((x*a)^2)/3} sfExport('a') values <- seq(0, 100,1) benchmark(for

5热度

3回答

如何计算大型数据集的每分钟发生次数

我有一个数据集，其中约500k约会时间在5到60分钟之间。 tdata <- structure(list(Start = structure(c(1325493000, 1325493600, 1325494200, 1325494800, 1325494800, 1325495400, 1325495400, 1325496000, 1325496000, 1325496600, 132549

4热度

1回答

如何在R中的并行方法内使用无效记录器进行记录？

我在记录中使用R中的无效记录器。我有一个使用R中的降雪实现的并行算法。并行进程的每个核心都在记录器中记录一个中间输出。但是这个输出没有显示在记录器中？我们可以在使用降雪的并行作业中使用徒劳登录器进行登录吗？添加它是如何完成的：我的具体情况有点不同。我使用我创建的共享对象从R调用C函数。该函数是一种迭代算法，我需要每隔几次迭代记录日志。我有兴趣从C函数登录到无用的记录器。为什么徒劳的记录器？