> Linux集群 > Hadoop >

编译hadoop的eclipse插件hadoop-eclipse-plugin-1.2.1.jar

时间:2016-12-24 17:07  来源:linux.it.net.cn   作者:IT

1：下载后Hadoop-1.1.2.tar.gz文件，里面包含源代码，并解压到E:\hadoop\hadoop-1.2.1

2：在eclipse导入工程，目录选择：E:\hadoop\hadoop-1.2.1\src\contrib\eclipse-plugin

3：在项目 MapReduceTools 中新建 lib 目录，将 hadoop-1.2.1 下的 hadoop-core-1.2.1.jar，及其 lib 目录下的 commons-cli-1.2.jar、commons-lang-2.4.jar、
commons-configuration-1.6.jar、jackson-mapper-asl-1.8.8.jar、jackson-core-asl-1.8.8.jar、commons-httpclient-3.0.1.jar 拷贝到该目录。

4：修改项目的Libraries

5：修改build-contrib.xml

将E:\hadoop\hadoop-1.2.1\src\contrib目录下的build-contrib.xml文件拷贝到项目目录中，注意：build-contrib.xml文件以eclipse-plugin是在同一级目录中，拷贝完成以后修改build-contrib.xml文件。修改的内容如下。

 

 
  1. <property name="name" value="${ant.project.name}"/>  
  2. <property name="root" value="${basedir}"/>  
  3. <property name="version" value="1.2.1"/>  <!--这行为新增的内容-->  
  4. <property name="hadoop.root" location="E:/hadoop/hadoop-1.2.1"/><!--这行为修改的内容-->  
  5. <property name="eclipse.home" location="E:/work/eclipse-jee-kepler-SR2-win32/eclipse" /><!--这行为修改的内容-->  

 

 


这个是前面几行的内容


	 



	6：修改build.xml



	如果导入项目的时候选择的是copy的话，需要E:\hadoop\hadoop-1.2.1\src\contrib\eclipse-plugin下的build.xml文件拷贝到项目目录中，不是的话直接修改。



	下面是完整的内容：



	 



	

		

			 

	

	
    
		
  1. 
			<?xml version="1.0" encoding="UTF-8" standalone="no"?>  
    2. 
		
  2. 
			  
    3. 
		
  3. 
			<!--  
    4. 
		
  4. 
			   Licensed to the Apache Software Foundation (ASF) under one or more  
    5. 
		
  5. 
			   contributor license agreements.  See the NOTICE file distributed with  
    6. 
		
  6. 
			   this work for additional information regarding copyright ownership.  
    7. 
		
  7. 
			   The ASF licenses this file to You under the Apache License, Version 2.0  
    8. 
		
  8. 
			   (the "License"); you may not use this file except in compliance with  
    9. 
		
  9. 
			   the License.  You may obtain a copy of the License at  
    10. 
		
  10. 
			  
    11. 
		
  11. 
			       http://www.apache.org/licenses/LICENSE-2.0  
    12. 
		
  12. 
			  
    13. 
		
  13. 
			   Unless required by applicable law or agreed to in writing, software  
    14. 
		
  14. 
			   distributed under the License is distributed on an "AS IS" BASIS,  
    15. 
		
  15. 
			   WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.  
    16. 
		
  16. 
			   See the License for the specific language governing permissions and  
    17. 
		
  17. 
			   limitations under the License.  
    18. 
		
  18. 
			-->  
    19. 
		
  19. 
			  
    20. 
		
  20. 
			<project default="jar" name="eclipse-plugin">  
    21. 
		
  21. 
			    <!-- 1.修改 build-contrib.xml的位置，去掉"../" -->  
    22. 
		
  22. 
			  <import file="build-contrib.xml"/>  
    23. 
		
  23. 
			      
    24. 
		
  24. 
			    <!-- 2.添加如下，否则提示"软件包 org.apache.hadoop.fs 不存在" -->  
    25. 
		
  25. 
			    <path id="hadoop-jars">  
    26. 
		
  26. 
			        <fileset dir="${hadoop.root}/">  
    27. 
		
  27. 
			        <include name="hadoop-*.jar"/>  
    28. 
		
  28. 
			        </fileset>  
    29. 
		
  29. 
			    </path>         
    30. 
		
  30. 
			  
    31. 
		
  31. 
			  <path id="eclipse-sdk-jars">  
    32. 
		
  32. 
			    <fileset dir="${eclipse.home}/plugins/">  
    33. 
		
  33. 
			      <include name="org.eclipse.ui*.jar"/>  
    34. 
		
  34. 
			      <include name="org.eclipse.jdt*.jar"/>  
    35. 
		
  35. 
			      <include name="org.eclipse.core*.jar"/>  
    36. 
		
  36. 
			      <include name="org.eclipse.equinox*.jar"/>  
    37. 
		
  37. 
			      <include name="org.eclipse.debug*.jar"/>  
    38. 
		
  38. 
			      <include name="org.eclipse.osgi*.jar"/>  
    39. 
		
  39. 
			      <include name="org.eclipse.swt*.jar"/>  
    40. 
		
  40. 
			      <include name="org.eclipse.jface*.jar"/>  
    41. 
		
  41. 
			  
    42. 
		
  42. 
			      <include name="org.eclipse.team.cvs.ssh2*.jar"/>  
    43. 
		
  43. 
			      <include name="com.jcraft.jsch*.jar"/>  
    44. 
		
  44. 
			    </fileset>   
    45. 
		
  45. 
			  </path>  
    46. 
		
  46. 
			  
    47. 
		
  47. 
			  <!-- Override classpath to include Eclipse SDK jars -->  
    48. 
		
  48. 
			  <path id="classpath">  
    49. 
		
  49. 
			    <pathelement location="${build.classes}"/>  
    50. 
		
  50. 
			    <pathelement location="${hadoop.root}/build/classes"/>  
    51. 
		
  51. 
			    <path refid="eclipse-sdk-jars"/>  
    52. 
		
  52. 
			    <path refid="hadoop-jars"/> <!--这行为添加的内容-->  
    53. 
		
  53. 
			  </path>  
    54. 
		
  54. 
			  
    55. 
		
  55. 
			  <!-- Skip building if eclipse.home is unset. -->  
    56. 
		
  56. 
			  <target name="check-contrib" unless="eclipse.home">  
    57. 
		
  57. 
			    <property name="skip.contrib" value="yes"/>  
    58. 
		
  58. 
			    <echo message="eclipse.home unset: skipping eclipse plugin"/>  
    59. 
		
  59. 
			  </target>  
    60. 
		
  60. 
			  
    61. 
		
  61. 
			 <target name="compile" depends="init, ivy-retrieve-common" unless="skip.contrib">  
    62. 
		
  62. 
			    <echo message="contrib: ${name}"/>  
    63. 
		
  63. 
			    <javac  
    64. 
		
  64. 
			     encoding="${build.encoding}"  
    65. 
		
  65. 
			     srcdir="${src.dir}"  
    66. 
		
  66. 
			     includes="**/*.java"  
    67. 
		
  67. 
			     destdir="${build.classes}"  
    68. 
		
  68. 
			     debug="${javac.debug}"  
    69. 
		
  69. 
			     deprecation="${javac.deprecation}">  
    70. 
		
  70. 
			     <classpath refid="classpath"/>  
    71. 
		
  71. 
			    </javac>  
    72. 
		
  72. 
			  </target>  
    73. 
		
  73. 
			  
    74. 
		
  74. 
			  <!-- Override jar target to specify manifest -->  
    75. 
		
  75. 
			  <target name="jar" depends="compile" unless="skip.contrib">  
    76. 
		
  76. 
			    <mkdir dir="${build.dir}/lib"/>  
    77. 
		
  77. 
			    <!--这行为添加的内容-->  
    78. 
		
  78. 
			    <copy file="${hadoop.root}/hadoop-core-${version}.jar" tofile="${build.dir}/lib/hadoop-core-${version}.jar" verbose="true"/>  
    79. 
		
  79. 
			    <!--这行为添加的内容-->  
    80. 
		
  80. 
			    <!-- 
    81. 
		
  81. 
			    <copy file="${hadoop.root}/build/ivy/lib/Hadoop/common/commons-cli-${commons-cli.version}.jar"  todir="${build.dir}/lib" verbose="true"/> 
    82. 
		
  82. 
			     -->  
    83. 
		
  83. 
			     <copy file="${hadoop.root}/lib/commons-cli-1.2.jar" todir="${build.dir}/lib" verbose="true"/>  
    84. 
		
  84. 
			     <copy file="${hadoop.root}/lib/commons-lang-2.4.jar" todir="${build.dir}/lib" verbose="true"/>  
    85. 
		
  85. 
			     <copy file="${hadoop.root}/lib/commons-configuration-1.6.jar" todir="${build.dir}/lib" verbose="true"/>  
    86. 
		
  86. 
			     <copy file="${hadoop.root}/lib/jackson-mapper-asl-1.8.8.jar" todir="${build.dir}/lib" verbose="true"/>  
    87. 
		
  87. 
			     <copy file="${hadoop.root}/lib/jackson-core-asl-1.8.8.jar" todir="${build.dir}/lib" verbose="true"/>  
    88. 
		
  88. 
			     <copy file="${hadoop.root}/lib/commons-httpclient-3.0.1.jar" todir="${build.dir}/lib" verbose="true"/>  
    89. 
		
  89. 
			      
    90. 
		
  90. 
			    <jar  
    91. 
		
  91. 
			      jarfile="${build.dir}/hadoop-${name}-${version}.jar"  
    92. 
		
  92. 
			      manifest="${root}/META-INF/MANIFEST.MF">  
    93. 
		
  93. 
			      <fileset dir="${build.dir}" includes="classes/ lib/"/>  
    94. 
		
  94. 
			      <fileset dir="${root}" includes="resources/ plugin.xml"/>  
    95. 
		
  95. 
			    </jar>  
    96. 
		
  96. 
			  </target>  
    97. 
		
  97. 
			  
    98. 
		
  98. 
			</project>  
    99. 
	





7：修改MANIFEST.MF

在Bundle-ClassPath添加下面的内容


	 



	 



	

		

			 

	

	
    
		
  1. 
			Bundle-ClassPath: classes/,  
    2. 
		
  2. 
			 lib/hadoop-core.jar,  
    3. 
		
  3. 
			 lib/  
    4. 
	





8：Ant 编译


	 



	a. 右键 MapReduceTools 工程，Properties—>Builders—>New—>Ant Builder

	b. 修改New_Builder编辑界面中的内容

	Name (见名知意): hadoop_Builder

	Buildfile (build.xml的位置): 项目路径下面\build.xml



	

	3. 修改完成保存

	4. 点击Project—>Build Project进行生成

	点击Project—>Build Project开始进行生成，这时候我们会看到控制台输出一堆相关的编译信息，编译成功会看到在控制台输出 BUILD SUCCESSFUL 。编译结果在 E:\hadoop\hadoop-1.2.1\build\contrib\eclipse-plugin目录下。



	

		

			 

	

	
    
		
  1. 
			Buildfile: E:\work\workspace1\MapReduceTools\build.xml  
    2. 
		
  2. 
			  
    3. 
		
  3. 
			check-contrib:  
    4. 
		
  4. 
			  
    5. 
		
  5. 
			init:  
    6. 
		
  6. 
			        [echo] contrib: eclipse-plugin  
    7. 
		
  7. 
			  
    8. 
		
  8. 
			init-contrib:  
    9. 
		
  9. 
			  
    10. 
		
  10. 
			ivy-download:  
    11. 
		
  11. 
			         [get] Getting: http://repo2.maven.org/maven2/org/apache/ivy/ivy/2.1.0/ivy-2.1.0.jar  
    12. 
		
  12. 
			         [get] To: E:\hadoop\hadoop-1.2.1\ivy\ivy-2.1.0.jar  
    13. 
		
  13. 
			         [get] Not modified - so not downloaded  
    14. 
		
  14. 
			  
    15. 
		
  15. 
			ivy-probe-antlib:  
    16. 
		
  16. 
			  
    17. 
		
  17. 
			ivy-init-antlib:  
    18. 
		
  18. 
			  
    19. 
		
  19. 
			ivy-init:  
    20. 
		
  20. 
			[ivy:configure] :: Ivy 2.1.0 - 20090925235825 :: http://ant.apache.org/ivy/ ::  
    21. 
		
  21. 
			[ivy:configure] :: loading settings :: file = E:\hadoop\hadoop-1.2.1\ivy\ivysettings.xml  
    22. 
		
  22. 
			  
    23. 
		
  23. 
			ivy-resolve-common:  
    24. 
		
  24. 
			  
    25. 
		
  25. 
			ivy-retrieve-common:  
    26. 
		
  26. 
			[ivy:cachepath] DEPRECATED: 'ivy.conf.file' is deprecated, use 'ivy.settings.file' instead  
    27. 
		
  27. 
			[ivy:cachepath] :: loading settings :: file = E:\hadoop\hadoop-1.2.1\ivy\ivysettings.xml  
    28. 
		
  28. 
			  
    29. 
		
  29. 
			compile:  
    30. 
		
  30. 
			        [echo] contrib: eclipse-plugin  
    31. 
		
  31. 
			       [javac] E:\work\workspace1\MapReduceTools\build.xml:69: warning: 'includeantruntime' was not set, defaulting to build.sysclasspath=last; set to false for repeatable builds  
    32. 
		
  32. 
			  
    33. 
		
  33. 
			jar:  
    34. 
		
  34. 
			BUILD SUCCESSFUL  
    35. 
		
  35. 
			Total time: 1 second  
    36. 
	





安装插件

安装插件到eclipse的话就需要将 hadoop-eclipse-plugin-1.2.1.jar 放入 到eclipse的plugins 目录下，重启 eclipse即可。







  (责任编辑：IT)		
							

						

					

					

						
    
					
    
				
    
				
			
    
			
    
				
    
					
    
						
    最近关注
    
						
					
    
					
    
						
    热点内容