hadoop文件操作错误---org.apache.hadoop.ipc.RemoteException(java.io.IOException)
发布日期:2021-06-29 12:30:24
浏览次数:2
分类:技术文章
本文共 1026 字,大约阅读时间需要 3 分钟。
使用hadoop dfsadmin -report命令查看磁盘使用情况
如果是下面的情况
Configured Capacity: 0 (0 B) Present Capacity: 0 (0 B) DFS Remaining: 0 (0 B) DFS Used: 0 (0 B) DFS Used%: NaN% Under replicated blocks: 0 Blocks with corrupt replicas: 0 Missing blocks: 0 ------------------------------------------------- Datanodes available: 0 (0 total, 0 dead)
这个问题的原因是使用hadoop namenode -format格式化时格式化了多次造成那么spaceID不一致
解决方案:1、停止dfs$./stop-dfs.sh2、删除在hdfs中配置的data目录和tmp目录$ rm -r /home/data$ rm -r /home/tmp重新创建data目录和tmp目录$ mkdir data$ mkdir tmp3、重新格式化namenode$ hadoop namenode -format4、重新启动dfs$./start-dfs.sh5、查看dfs$ jps
使用hadoop dfsadmin -report查看使用情况
Hostname: masterDecommission Status : NormalConfigured Capacity: 16775028736 (15.62 GB)DFS Used: 24576 (24 KB)Non DFS Used: 8850161664 (8.24 GB)DFS Remaining: 7924842496 (7.38 GB)DFS Used%: 0.00%DFS Remaining%: 47.24%Configured Cache Capacity: 0 (0 B)Cache Used: 0 (0 B)Cache Remaining: 0 (0 B)Cache Used%: 100.00%Cache Remaining%: 0.00%Xceivers: 1Last contact: Wed Jan 24 23:29:54 PST 2018
类似这样,则成功
转载地址:https://bupt-xbz.blog.csdn.net/article/details/79162879 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!
发表评论
最新留言
表示我来过!
[***.240.166.169]2024年04月23日 14时39分21秒
关于作者
喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!
推荐文章
掌握代码背后的这种语言,让你一招通吃天下!
2019-04-29
最终榜单!2019年人工智能的15个热门趋势
2019-04-29
揭秘卷积神经网络热力图:类激活映射
2019-04-29
骂谷歌,怼百度,批腾讯,吴军为何DISS互联网公司没得怕的?
2019-04-29
网络爬虫初涉——用python爬取网络小说
2019-04-29
Pycharm+tensorflow dropout 学习(三)
2019-04-29
Pycharm+tensorflow CNN 学习(四)
2019-04-29
用python暴力破解压缩包密码
2019-04-29
基于OpenCV 将图片进行预处理,转变为MNIST图片格式
2019-04-29
PyCharm+Tensorflow CNN调用训练好的模型进行预测 (五)
2019-04-29
物联网平台Node-red初涉——访问搭建的简易服务器
2019-04-29
2020-10-27
2019-04-29
OpenCV+python识别并打印HSV颜色
2019-04-29
2021-03-29
2019-04-29
网络攻击与防御--引言
2019-04-29
网络攻击与防御--网络协议漏洞
2019-04-29
sql注入: 判断注入点类型
2019-04-29
千人千面Elasticsearch实战学习笔记
2019-04-29
最大子数组问题(递归)(java)
2019-04-29
2021年第十二届蓝桥杯软件赛省赛第二场 C/C++ 大学 A 组
2019-04-29