【问题标题】:where can i find directory i have created using hadoop fs -mkdir in my ubuntu file system我在哪里可以找到我在 ubuntu 文件系统中使用 hadoop fs -mkdir 创建的目录
【发布时间】:2019-10-31 17:10:06
【问题描述】:

我是 hadoop 新手,我已经使用

创建了目录
 hadoop fs -mkdir -p /user/vinayak

这个文件夹在我的文件系统中的什么位置,我使用的是 ubuntu 18.04。

我是 hadoop 新手,不熟悉它的架构

当我尝试hadoop fs -ls /
我明白了 输出:

Found 1 items
drwxr-xr-x   - hadoopuser supergroup          0 2019-06-18 11:04 /user

这个目录在哪里找到

【问题讨论】:

    标签: java database hadoop hdfs hadoop2


    【解决方案1】:

    您不会在本地 (ubuntu) 文件系统中找到该目录。您必须使用 HDFS 的命令行实用程序 (hdfs dfs ...) 来使用它。

    【讨论】:

    • 这意味着文件是在小块数据文件中创建的
    • 你从哪里得到的?
    • 不知道在哪里,因为我无法找到目录,但我发现了许多不受支持的文件
    • 你可能想看看这个页面hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/…。它的工作方式是,您有一个 NameNode 服务(用户空间 java 进程),它将所有文件系统元数据保存在其内存中(以及一个名为 fsimage 的文件中)。因此,您的 HDFS 目录物理存储在这两个地方 - NameNode 内存和 fsimage 文件。
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2015-01-31
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多