Hadoop 1.2.1 eclipse plugin 编译 win7 集成

﹏ヽ暗。殇╰゛Y 2022-12-23 11:19 93阅读 0赞

关于Hadoop 编译 Eclipse 插件的过程，自己操作了一次，感觉里面还是有些小点需要说明一下的

插件可以生成，但WIN7 下怎么也连接不成功，强烈怀疑。不过这个插件在centos上使用相同版本的内容后可以连接成功！虽然开始的时候也报错，但可以看到HDFS文件系统内容。

# **环境** #

**WIN7 64bit**

**Eclipse for Java EE 64bit**，**内核版本 4.3.0** **246M**  [http://mirrors.neusoft.edu.cn/eclipse/technology/epp/downloads/release/kepler/R/eclipse-jee-kepler-R-win32-x86\_64.zip][http_mirrors.neusoft.edu.cn_eclipse_technology_epp_downloads_release_kepler_R_eclipse-jee-kepler-R-win32-x86_64.zip]

**Hadoop 1.2.1** 下载源码完整版本，下载时注意文件名字和大小**60.8M** [https://issues.apache.org/jira/secure/attachment/12425381/hadoop-0.20.1-eclipse-plugin.jar][https_issues.apache.org_jira_secure_attachment_12425381_hadoop-0.20.1-eclipse-plugin.jar]

**JDK 1.7.0\_25-b17** [http://download.oracle.com/otn-pub/java/jdk/7u25-b17/jdk-7u25-windows-x64.exe][http_download.oracle.com_otn-pub_java_jdk_7u25-b17_jdk-7u25-windows-x64.exe]

**ANT** 1.9.2 [http://apache.fayea.com/apache-mirror//ant/binaries/apache-ant-1.9.2-bin.zip][http_apache.fayea.com_apache-mirror_ant_binaries_apache-ant-1.9.2-bin.zip]

# JDK安装 #

.exe格式，一路下一步，注意修改安装路径C:\\Java

安装后，我的电脑右键属性-》高级系统设置-》高级-》Path 中加入 ;C:\\Java\\jdk1.7.0\_25\\bin 注意前面的半角分号

# ANT安装 #

解压至D盘根目录，注意解压后路径格式如下：D:\\apache-ant-1.9.2

加入环境变量 ;D:\\apache-ant-1.9.1\\bin

# Eclipse安装 #

解压至D盘根目录 E:\\eclipse

# Hadoop安装 #

解压至D盘根目录D:\\hadoop-1.2.1

# 插件配置 #

官方文档位置：http://wiki.apache.org/hadoop/EclipsePlugIn

**注意：**在官方文档位置下有两个链接  [JIRA MAPREDUCE-1262][]   [JIRA MAPREDUCE-1280][]

这两个链接是官方提供好的Eclipse插件包，可以直接下载下来放置在E:\\eclipse\\plugins 目录下，重启Eclipse 后，可见

官方文字中提供了几点需要注意的地方

*  编译插件过程需要使用hadoop类文件
 *  编译前需要在D:\\hadoop-1.2.1\\src\\contrib\\eclipse-plugin\\build.properties中设置eclipse.home变量
 *  执行编译需要确认一个Hadoop版本信息

好的，按照注意点先编辑D:\\hadoop-1.2.1\\src\\contrib\\eclipse-plugin\\build.properties 文件，加入eclipse.home和版本信息（版本变量名再未加入时ant编译会报错），编辑后如下

#   Licensed under the Apache License, Version 2.0 (the "License");
    #   you may not use this file except in compliance with the License.
    #   You may obtain a copy of the License at
    #
    #       http://www.apache.org/licenses/LICENSE-2.0
    #
    #   Unless required by applicable law or agreed to in writing, software
    #   distributed under the License is distributed on an "AS IS" BASIS,
    #   WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
    #   See the License for the specific language governing permissions and
    #   limitations under the License.
    
    
    output.. = bin/
    bin.includes = META-INF/,\
                   plugin.xml,\
                   resources/,\
                   classes/,\
                   classes/,\
                   lib/
    eclipse.home=D:\eclipse
    version=1.2.1

接下来需要在文件中加入Hadoop类路径（按理说，这个不应该添加，在build文件中指向的类路径为build目录，当然前提是已经编译过Hadoop的源码，成功在./build目录中生成类文件，我们并没有编译源码，好吧直接饮用下载包中的内容）

不会ANT没关系，随便找个路径标签加进去，找到文件中eclipse-sdk-jars标签，修改成如下内容（第二个fileset就是新增的内容，可能复制代码有问题，注意一下。当然如果您熟悉ANT可以自己定义新的路径）

好了，差不多了。此时运行会报错，原因是这个文件中还需要拷贝两个文件到插件包中，和上面道理一样，由于我们没编译整个项目，所以需要修改，直接引用包中内容。

修改jar target（好多教程中，说最后执行 ant jar，实际上就是直接执行这部分，如果不加jar ，则执行project 标签 default 指向的target ，还好默认就是jar target） ，注释两个copy，新增两个copy，可以看到需要了两个jar，一个是hadoop-core-$\{version\}.jar ，另一个是commons-cli-$\{commons-cli.version\}.jar 。这两个包最后会自动打入到插件包中，可以从官网下载的文件中或自己编译的文件看到结果

恩，该有的都有了，启动cmd

切换目录至D:\\hadoop-1.2.1\\src\\contrib\\eclipse-plugin

执行 ant ，最后提示

BUILD SUCCESSFUL  
Total time: 5 seconds

**成功！**

WIN+E 资源管理器，进入目录 D:\\hadoop-1.2.1\\build\\contrib\\eclipse-plugin ，看到文件 hadoop-eclipse-plugin-1.2.1.jar ，恩，我们自己的插件出来了

拷贝 hadoop-eclipse-plugin-1.2.1.jar 文件至 D:\\eclipse\\plugins 目录，确认安装吧

# 确认安装 #

启动Eclipse 后 Window->Open Perspective->Other ，弹出对话框列表中，会出现图标为蓝色大象，文字为Map/Reduce ，就在JPA下方

集成成功！

[http_mirrors.neusoft.edu.cn_eclipse_technology_epp_downloads_release_kepler_R_eclipse-jee-kepler-R-win32-x86_64.zip]: http://mirrors.neusoft.edu.cn/eclipse/technology/epp/downloads/release/kepler/R/eclipse-jee-kepler-R-win32-x86_64.zip
[https_issues.apache.org_jira_secure_attachment_12425381_hadoop-0.20.1-eclipse-plugin.jar]: https://issues.apache.org/jira/secure/attachment/12425381/hadoop-0.20.1-eclipse-plugin.jar
[http_download.oracle.com_otn-pub_java_jdk_7u25-b17_jdk-7u25-windows-x64.exe]: http://download.oracle.com/otn-pub/java/jdk/7u25-b17/jdk-7u25-windows-x64.exe
[http_apache.fayea.com_apache-mirror_ant_binaries_apache-ant-1.9.2-bin.zip]: http://apache.fayea.com/apache-mirror//ant/binaries/apache-ant-1.9.2-bin.zip
[JIRA MAPREDUCE-1262]: https://issues.apache.org/jira/browse/MAPREDUCE-1262
[JIRA MAPREDUCE-1280]: https://issues.apache.org/jira/browse/MAPREDUCE-1280