分享

windows MyEclipse下连接hadoop并且编写调试mapReduce程序

 春和秋荣 2018-09-09

 windows下连接hadoop并且编写调试mapReduce程序

1.下载你相对版本的hadoop-eclips插件,我的是1.0.0,

2.将该插件放到你的myeclips\dropins目录下

3.重启Myeclipse,选择window-->OpenPerspective-->Others;选择Map/Reduce;

 

4.根据你的hadoop进行配置

 

5.这个时候应该可以读取你的HDFS了

 

6.新建一个Java项目

7.为你的项目引入hadoop的jar包

 

8.修改windows/System32/Drivers/etc/hosts,加上你namenode的机器名称和ip

否则会报如下错误:unknowhost

9.修改hadoop/conf/ hdfs-site.xml ,加上如下属性:

<property>

               <name>dfs.permissions</name>

                <value>false</value>

       </property>

否则run MapReduce的时候会报如下错误:

org.apache.hadoop.security.AccessControlException:Permission denied: user=Think, access=WRITE,inode="output":root:supergroup:rwxr-xr-x

 

 

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多