我要发布
仪器网/ 仪器社区/ IPC/ hadoop拷贝文件DataStreamer Excepti...

hadoop拷贝文件DataStreamer Exception: org.apache.hadoop.ipc.RemoteException:

棱子头    2012-07-29    IPC    浏览 344 次

hadoop拷贝文件DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: File /user/root/input/2 could only be replicated to 0 nodes, instead of 1 我是在redhat上实现伪分布。这个问题网上答案蛮多,目前我已经尝试过: 1、系统或hdfs是否有... hadoop拷贝文件DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: File /user/root/input/2 could only be replicated to 0 nodes, instead of 1
我是在redhat上实现伪分布。这个问题网上答案蛮多,目前我已经尝试过:
1、系统或hdfs是否有空间
2、datanode数是否正常
3、是否在safemode
4、防火墙关闭
5、重启、格式化,也手动清空了
6、配置方面,启动正常,我想应该木有问题,节点我是用的ip,没用localhost

拷文件的时候,报这个错,再次拷就会说此文件已存在,我想应该是拷进去了。但我运行hadoop-0.20.2-examples.jar 实例的时候迟迟没有动静。
我把网上的解决方案大都试过,还是解决不了。求高手指点。

精彩问答
xdev63 发布日期:2017-11-25
把namonode tmp文件清空 然后重新格式化 管用 datanode和namenode没连接好
被采纳
liling891015 发布日期:2012-07-30
拷贝失败的原因可能有很多种。hadoop拷贝是会失败的,按照hadoop fs -put ...的返回值$?,不为0的话就是失败。这时候需要删除原本的拷贝到一半的文件重新copy。可以在脚本里面写一个循环,判断是否$?为0,否则删除hdfs上的文件重新copy.。另外节点信息Z好用hostname,随便配一个在/etc/hosts里面配好解析就好了,0.20版本好像对ip的支持不是很好。
全部评论
勝島优子无悔 发布日期:2012-08-01
用命令jps先查看下datanode和TaskTack启动没有
pqj000 发布日期:2012-08-01
datanode一个都没有启动吧?看看datanode启动的日志文件先,不要盲目按网上的解决步骤操作,不一定是同一个错误
最新主题
相关版块
我要评论
X您尚未登录
账号登录
X您尚未登录
手机动态密码登录
X您尚未登录
扫码登录
官方微信

仪器网微信服务号

扫码获取最新信息


仪器网官方订阅号

扫码获取最新信息

在线客服

咨询客服

在线客服
工作日:  9:00-18:00
联系客服 企业专属客服
电话客服:  400-822-6768
工作日:  9:00-18:00
订阅商机

仪采招微信公众号

采购信息一键获取海量商机轻松掌控