java - 在同一个 Maven 项目中使用多个 Guava 版本

标签 java maven hadoop guava

我的项目中有以下两个依赖:

<dependency>
  <groupId>com.google.javascript</groupId>
  <artifactId>closure-compiler</artifactId>
  <version>v20141215</version>
  <exclusions>
      <exclusion>
          <groupId>com.google.protobuf</groupId>
          <artifactId>protobuf-java</artifactId>
      </exclusion>
  </exclusions>
</dependency>

<dependency>
  <groupId>org.apache.hadoop</groupId>
  <artifactId>hadoop-common</artifactId>
  <version>2.4.0</version>
</dependency>

正如您在依赖树中看到的,它们都包含不同版本的 Guava:

[INFO] --- maven-dependency-plugin:2.1:tree (default-cli) @ extraction ---

[INFO] +- com.google.javascript:closure-compiler:jar:v20141215:compile
[INFO] |  +- com.google.javascript:closure-compiler-externs:jar:v20141215:compile
[INFO] |  +- args4j:args4j:jar:2.0.26:compile
[INFO] |  +- com.google.guava:guava:jar:18.0:compile
[INFO] |  +- com.google.code.gson:gson:jar:2.2.4:compile
[INFO] |  \- com.google.code.findbugs:jsr305:jar:1.3.9:compile
[INFO] +- org.apache.hadoop:hadoop-common:jar:2.4.0:compile
[INFO] |  +- org.apache.hadoop:hadoop-annotations:jar:2.4.0:compile
[INFO] |  |  \- jdk.tools:jdk.tools:jar:1.7:system
[INFO] |  +- (com.google.guava:guava:jar:11.0.2:compile - omitted for conflict with 18.0)
[INFO] |  +- ...

众所周知的问题是 Guava 不向后兼容。因此我需要两个 jar 。

我得到的错误如下:

Error:  tried to access method com.google.common.base.Stopwatch.<init>()V from class org.apache.hadoop.mapreduce.lib.input.FileInputFormat

此处已报告:https://issues.apache.org/jira/browse/HADOOP-10961

此外,他们建议使用着色 Maven 插件来处理它: https://groups.google.com/a/cloudera.org/forum/#!topic/cdh-user/d5_HqUSvVl4

我在这里试过:

<build>
<plugins>
   <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-compiler-plugin</artifactId>
        <version>3.1</version>
        <configuration>
            <source>1.6</source> <!-- If you want to use Java 8, change this to "1.8" -->
            <target>1.6</target> <!-- If you want to use Java 8, change this to "1.8" -->
        </configuration>
    </plugin>
    <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-shade-plugin</artifactId>
        <version>2.3</version>
        <executions>
            <execution>
                <phase>package</phase>
                <goals>
                    <goal>shade</goal>
                </goals>
                <configuration>
                    <relocations>
                        <relocation>
                            <pattern>com.google</pattern>
                            <shadedPattern>project.shaded.com.google</shadedPattern>
                        </relocation>
                    </relocations>
                </configuration>
            </execution>
        </executions>
    </plugin>
</plugins>
</build>

但我仍然得到同样的错误。

谁能帮我解决这个 Maven 问题?

谢谢, 菲利克斯

最佳答案

我建议找到与 Hadoop 2.4 一起运行的最新版本的 Guava,并将其作为显式依赖项包括在内。然后将 Guava 排除在从闭包编译器和 Hadoop deps 中瞬时获取。

我建议使用 v16,因为它在 StopWatch 类上仍然具有零参数构造函数:参见 Guava 16

当然,此解决方案取决于使用闭包编译器的 Guava 16。

关于java - 在同一个 Maven 项目中使用多个 Guava 版本,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/28368289/

相关文章:

java - mongodb:java:如何使用具有现有值的表达式更新 MongoDB 中的字段

java - 在多分支管道中调用作业

java - 非静态变量,不能从 main 方法中的静态上下文中引用

java - 关于最大化调整大小控件的 Swing 问题

java - 膨胀类 ImageView 和 ImageButton 时出错

java - 无法在项目上执行目标 org.apache.maven.plugins :maven-compiler-plugin:3. 5.1:编译(默认编译)

apache - 在 Ubuntu 上安装 Mahout 时 Maven BUILD FAILURE

java - Hadoop 配置文件输出 - 在哪里和什么?

hadoop - Apache Pig程序

hadoop - 并发执行 “single-threaded” hadoop:瓶颈在哪里?