存档

文章标签 ‘eclipse’

hadoop源码导入eclipse

2015年3月20日 没有评论

1 生成Eclipse工程文件

$ cd hadoop-maven-plugins
$ mvn install
$ cd hadoop-2.5.2-src
$ mvn eclipse:eclipse -DskipTests

2 在Eclipse中导入源代码
“File” >> “Import” >> “Existing Projects into Workspace”，选择hadoop-2.5.2-src，然后确认。

3 错语修复
导入后遇到错误，共有59个错误，但总体上分为3类。解决方法如下：

错误1： org.apache.hadoop.ipc.protobuf. 无法解析
解决方法如下，依次执行下述命令:

$ cd hadoop-2.5.2-src/hadoop-common-project/hadoop-common/src/test/proto
$ protoc –java_out=../java *.proto

最后，刷新Eclipse中的所有工程。至此，只剩下 6 个错误。

错误2：AvroRecord cannot be resolved to a type TestAvroSerialization.java
解决方法如下：
首先，下载 avro-tools-1.7.7.jar（点击下载）。存放于 hadoop-2.5.0-src 目录中。
然后执行下述命令：

$ cd hadoop-2.5.2-src/hadoop-common-project/hadoop-common/src/test/avro
$ java -jar ~/hadoop-2.5.2-src/avro-tools-1.7.7.jar compile schema avroRecord.avsc ../java

最后，刷新Eclipse工程。只剩下 3个错误。

错误3： Project ‘hadoop-streaming’ is missing required source … Build Path Problem
解决方法如下：
右键 hadoop-streaming 项目->properties->左边Java Build Path->Source->选定错误项->右边Remove。

至此，在Eclipse中创建Hadoop工程完成。

分类: Hadoop 标签: , ,