首页 > 数码专栏 > 正文

hadoop上传文件到hdfs的命令

数码专栏 时间:2024-10-07 19:02:22

hadoop上传文件到hdfs命令 

要将本地文件上传到Hadoop分布式文件系统(HDFS),可以使用以下命令:

hadoop fs -put /本地文件路径 /HDFS目标路径

例如,如果要将本地文件“/home/user/data”上传到HDFS的“/user/hadoop/data”目录下,可以使用以下命令:

hadoop fs -put /home/user/data /user/hadoop/data

执行该命令后,Hadoop会将本地文件“/home/user/data”中的所有文件和子文件夹上传到HDFS的“/user/hadoop/data”目录下。如果目标路径已经存在,则会将本地文件夹中的文件覆盖到目标路径下的同名文件。如果需要避免覆盖文件,可以在上传文件夹时使用“-n”的参数,例如:

hadoop fs -put -n /home/user/data /user/hadoop/data

该命令会将本地文件夹中的文件上传到HDFS的“/user/hadoop/data”目录下,如果遇到同名文件,则跳过不上传,不会覆盖已有文件。

郑重声明:图文由自媒体作者发布,我们尊重原作版权,但因数量庞大无法逐一核实,图片与文字所有方如有疑问可与我们联系,核实后我们将予以删除。