使用kettle从HDFS上 下载、上传文件

使用kettle从HDFS上 下载、上传文件

文章目录

• 使用kettle从HDFS上 下载、上传文件
• 1. 从核心对象中找到Big data，拉出 Hadoop file input 步骤，然后输入相关信息。
• 2. 将结果输出到excel中。
• 上传
• 1. 拉出一个excel 输入，和一个 Hadoop file output ，连接起来。然后修改两者。
• 2. 上传报错，发现是没有权限。
• 3. 最终结果

下载

1. 从核心对象中找到Big data，拉出 Hadoop file input 步骤，然后输入相关信息。

2. 将结果输出到excel中。

上传

把之前下载下来的文件再传上去。

1. 拉出一个excel 输入，和一个 Hadoop file output ，连接起来。然后修改两者。

2. 上传报错，发现是没有权限。

使用命令：hadoop fs -chmod -R 777 / ，使得所有角色都拥有HDFS的权限。

3. 最终结果