hadoop上传本地文件

2024-06-20 10:00:33 业界科普

hadoop上传文件 

在Hadoop中上传文件到HDFS,可以使用以下命令:

```

hdfs dfs -copyFromLocal /local/data /hdfs/data:将本地文件上传到HDFS上(原路径只能是一个文件)。

hdfs dfs -put /tmp/ /hdfs/:和copyFromLocal区别是,put原路径可以是文件夹等。

```

如果在上传过程中遇到权限问题,可以修改/hadoop/etc/hadoop/hdfs.site.xml文件中的dfs.permissions属性为false(默认为true)。 如果遇到DataStreamer Exception问题,可以删除core.site.xml中临时文件指定的目录,重新进行格式化,然后启动集群并创建目录,最后上传文件。

版权说明: 本文版权归原作者所有,转载文章仅为传播更多信息之目的,如作者信息标记有误,请第一时间联系我们修改或删除,多谢。