现在的位置: 首页 > 综合 > 正文

在eclipse下跑第一个map-reduce程序-转载分享

2019年04月17日 ⁄ 综合 ⁄ 共 739字 ⁄ 字号 评论关闭

  不得不说从一个linux,hadoop通通0起步的菜鸟,到在eclipse下跑第一个map reduce程序这一步,真的有够累的,双系统装ubuntu,jdk,eclipse,ant,hadoop各种安装配置,hadoop在命令行下运行,hadoop-eclipse-plugin编译,各种google baidu。

  以上的步骤都搞完后,特别是将hadoop-eclipse-plugin.1.2.1.jar这个插件放到eclipse下面的plugins文件夹后,就可以准备开始在eclipse下面运行hadoop程序了。当然只是准备开始,因为还要配置eclipse,具体可以参考文献[1],讲的非常的详细。

  这里只是补充下我配置时候出现的问题。

   1:run程序后出现****permission denied**的错误,检查下,原来是又犯了上一篇博文提到的低级错误,我用另外一个帐号(没有操作hadoop文件权限)在运行eclipse,结果自然没有权限对hadoop下面的文件进行操作。

   2:input path doesn't exist.......这里也是自己犯的低级错误,在配置输入输出路径的参数那里输入错了,修改过来即可。

 

  最后再share两篇文章[2,3],详细介绍了从单机到真正集群的配置。不过尚没有验证,先玩一段时间单机再上集群吧。

 

  Reference:

   (1) http://phz50.iteye.com/blog/932373

 (2)http://blog.csdn.net/xw13106209/article/details/6855962

 (3)http://wenku.baidu.com/view/c0c0ed3a580216fc700afd44

抱歉!评论已关闭.