hadoop 用eclipse提交Mapreduce任务,每次都报错
发布网友
发布时间:2023-08-31 03:27
我来回答
共2个回答
热心网友
时间:2023-09-06 22:27
貌似2.2.0版本需要使用JAVA的远程调式工具才行,像以前的那种放jar包安装Eclipse插件是不行的。具体我没有用过,还有MapRece任务已经过时了,基本不用了,用HIVE或者其他的吧。
热心网友
时间:2023-09-06 22:28
问题:
你使用的是hdfs,但你在Configuration中只设置了mapred.job.tracker值,这个是jobtracker的地址,你需要设置namenode的地址。而放到集群时在new Configuration时会自动加载集群的配置文件,如core-site.xml,hdfs-site.xml等
解决方法:
1)直接调用Configuration的set方法为fs.default.name设置值,值为namenode地址
2)直接将集群的三个*-site.xml配置文件放入项目的classpath下,简单方便