hadoop指令操作hdfs上的数据
发布日期:2021-11-15 02:11:42 浏览次数:2 分类:技术文章

本文共 1195 字,大约阅读时间需要 3 分钟。

  1. 查看/home/input路径下的数据 hadoop fs -ls /home/input
    查看hdfs的文件内容 hadoop fs -cat /home/input/part-m-00000
  2. 通过hdfs的web地址查看
    3.传文件到某个文件夹 hadoop fs -put LICENSE.txt input
    4.删除hadoop上的文件 hadoop fs -rm [-skipTrash] /home/input/part-m-00000

以下详细指令参考

选项名称 使用格式 含义
-ls -ls <路径> 查看指定路径的当前目录结构
-lsr -lsr <路径> 递归查看指定路径的目录结构
-du -du <路径> 统计目录下个文件大小
-dus -dus <路径> 汇总统计目录下文件(夹)大小
-count -count [-q] <路径> 统计文件(夹)数量
-mv -mv <源路径> <目的路径> 移动
-cp -cp <源路径> <目的路径> 复制
-rm -rm [-skipTrash] <路径> 删除文件/空白文件夹
-rmr -rmr [-skipTrash] <路径> 递归删除
-put -put <多个linux上的文件> <hdfs路径> 上传文件
-copyFromLocal -copyFromLocal <多个linux上的文件> <hdfs路径> 从本地复制
-moveFromLocal -moveFromLocal <多个linux上的文件> <hdfs路径> 从本地移动
-getmerge -getmerge <源路径> <linux路径> 合并到本地
-cat -cat <hdfs路径> 查看文件内容
-text -text <hdfs路径> 查看文件内容
-copyToLocal -copyToLocal [-ignoreCrc] [-crc] [hdfs源路径] [linux目的路径] 从本地复制
-moveToLocal -moveToLocal [-crc] <hdfs源路径> <linux目的路径> 从本地移动
-mkdir -mkdir <hdfs路径> 创建空白文件夹
-setrep -setrep [-R] [-w] <副本数> <路径> 修改副本数量
-touchz -touchz <文件路径> 创建空白文件
-stat -stat [format] <路径> 显示文件统计信息
-tail -tail [-f] <文件> 查看文件尾部信息
-chmod -chmod [-R] <权限模式> [路径] 修改权限
-chown -chown [-R] [属主][:[属组]] 路径 修改属主
-chgrp -chgrp [-R] 属组名称 路径 修改属组
-help -help [命令选项] 帮助

转载地址:https://blog.csdn.net/qq_28358461/article/details/89510405 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:There are 2 datanode(s) running and 2 node(s) are excluded in this operation.
下一篇:com.mysql.jdbc.exceptions.jdbc4.MySQLNonTransientConnectionException

发表评论

最新留言

初次前来,多多关照!
[***.217.46.12]2024年04月14日 17时05分54秒