Cloudera Hadoop VM 5.10 - 找到HDFS路径？

已将Cloudera VM和加载的数据文件安装到HDFS中。命令“hadoop fs -ls /”帮助我验证hdfs中的数据。但想知道它所在的物理位置？Cloudera Hadoop VM 5.10 - 找到HDFS路径？

任何建议都会有所帮助。

物理上去了这个位置/var/lib/hadoop-hdfs/cache/${user.name}/dfs/data（配置在dfs.datanode.data.dir名称中的配置。获得权限被拒绝。任何建议。 –

物理数据不能被非HDFS超级用户帐户读取。

此外，它并不意味着任何非HDFS进程都可以作为纯文本（或上传的任何内容）读取。物理位置存储原始文件的HDFS块。

您始终可以在hdfs-site.xml配置文件dfs.datanode.data.dir中找到物理磁盘安装点。然而，namenode数据目录也很重要。

2017-11-04 14:55:12

谢谢@ cricket_007。想知道\如果文件大小超过128 mb \ 64 mb，请查看文件是如何分割的。是否还有其他视觉？ –

视觉？不是真的。但地图数量创建的任务直接对应于输入分割的数量（假设输入数据可以分割） –

回答