starcluster

0热度

1回答

如何将Freeimage库安装到Starcluster集群中，以便它可以与scikit-image模块一起使用？我使用Starcluster在AWS上设置了一个集群，我想运行一些需要使用scikit-image模块加载.jp2图像的脚本，这可以使用Freeimage库完成。执行此操作的命令是： skimage.io.imread("path/to/image.jp2", plugin='free

0热度

1回答

MIT StarCluster和S3

我想在现场实例上运行mapreduce作业。我使用StarCluster及其hadoop插件启动我的实例。我没有问题上传数据，然后将其放入HDFS，然后将结果从HDFS中复制回来。我的问题是，有没有办法直接从s3加载数据，并将结果返回到s3？（我不想手动将数据从s3下载到HDFS，并将HDFS的结果推送到s3，有没有办法在后台执行）？我使用的是标准的MIT starcluster AMI

0热度

1回答

AWS-Starcluster配置无法识别区

我StarCluster配置文件看起来像这样： #################################### ## StarCluster Configuration File ## #################################### [global] DEFAULT_TEMPLATE=smallcluster ####################

5热度

1回答

如何使用AWS IAM角色运行StarCluster

如何修改StarCluster配置或代码以包含IAM Role？这样当我这样做： starcluster start mycluster 的IAM角色可以自动在EC2实例启动（主机和节点）。我确实尝试了look around，但没有用的信息。

1热度

1回答

Sun Grid Engine，每个节点强制执行一个作业

我正在使用numpy在使用sun grid engine分发作业的群集上运行多个相同作业的重复（星群）。我的每个节点都有2个核心（AWS上的c3.large）。所以说我有5个节点，每个节点有2个核心。 numpy中的矩阵运算能够一次使用多个核心。我发现SGE将派出10个工作立即运行，每个工作都使用一个核心。这会导致作业的运行时间延长。看着htop，看起来每个核心的两个职位都在争夺资源。如何让qs

0热度

1回答

编译starcluster错误中的C++程序

我是Starcluster软件的新手，我正在尝试在3节点集群中编译我的第一个复杂程序。我按照群集创建的说明，将文件放在sgeadmin文件夹中，并尝试编译。以下错误弹出： [email protected]:~$ make Building file: MyApp.cpp Invoking: GCC C++ Compiler mpiCC -std=c++0x -O3 -Wall -c -f

3热度

1回答

Starcluster的替代软件？

Starcluster是众所周知的亚马逊EC2服务器。然而，它是基于Python 2开发的，如果是日期的话，它将发布。它与Python 3.x不兼容。所以我想知道有没有其他选择Starcluster？我已经在stackoverflow中搜索，但没有找到答案。有人知道吗？我期待您的建议！谢谢！

0热度

1回答

2to3支持Starcluster python3吗？

使用2to3.py让Starcluster在python3环境下工作可以吗？

0热度

1回答

检测我是否来自starcluster插件内部的主服务器

当您尝试将某个节点添加到现有的Starcluster群集时，某些插件可能会失败，具体取决于您处于主节点还是辅助节点。如果你的插件有类似： for node in nodes: do something... 当您添加一个节点与 starcluster addnode myexistingcluster 前面的表格，没有作品。那么如何试图区分插件对主节点和辅助节点的操作。如何

2热度

1回答

麻省理工学院的Starcluster错误，节点超过200个

有没有人遇到了大于200个节点的簇大小问题？每当我尝试，我得到以下错误： 7/dist-packages/boto/ec2/connection.py", line 585, in get_all_instances max_results=max_results) File "/usr/local/lib/python2.7/dist-packages/boto/ec2/conn