elastic-map-reduce

    1热度

    2回答

    我使用Amazon Elastic Map Reduce命令行工具粘合了大量系统调用。这些命令返回已经(部分?)转义的JSON文本。然后,当系统调用将其转换为R文本对象(intern = T)时,它似乎会再次转义。我需要清理它,所以它会用rjson软件包解析。 我做的系统调用是这样的: system("~/EMR/elastic-mapreduce --describe --jobflow j-2

    6热度

    2回答

    当在Hadoop流式作业中使用分布式缓存机制将文件传输到节点时,系统在作业完成后是否删除这些文件?如果他们被删除,我认为他们是,有没有办法让缓存保持多个工作?这对Amazon的Elastic Mapreduce工作方式是否一样?