【问题标题】:Maven import avro definition from dependant jarMaven 从依赖 jar 导入 avro 定义
【发布时间】:2019-12-05 10:05:50
【问题描述】:

我有两个使用 avro-maven-plugin 进行代码生成的 maven 项目。我面临的问题 是这些项目中的一个有一个 avro 对象,该对象使用对另一个 avro 对象的引用 第二个maven项目。虽然我将第二个项目生成的 jar 包含为 maven 依赖项,但我无法找到为第二个项目生成代码的方法。

本质上考虑我的第二个项目有一个像下面这样的 avro 定义的情况

{
  "namespace": "my.second.project.avro",
  "name": "listNode",
  "type": "record",
  "fields":[
        {
            "name":"eventList",
            "type":{
                "type": "array",  
                "items": "my.first.project.AvroDefinition.avsc"
            }
         }
    ] 
}

在此定义中,它指的是 AvroDefinition.avsc,它包含在依赖项 jar 之一中, 但我找不到任何方法来提取 AvroDefinition.avsc 并将其用于代码生成 第二个项目。 顺便说一句,avro-maven-plugin 的设置如下:

   <plugin>
        <groupId>org.apache.avro</groupId>
        <artifactId>avro-maven-plugin</artifactId>
        <version>1.9.1</version>
        <executions>
            <execution>
                <phase>generate-sources</phase>
                <goals>
                    <goal>schema</goal>
                    <goal>protocol</goal>
                    <goal>idl-protocol</goal>
                </goals>
                <configuration>
                    <imports>
                        <import>${project.basedir}/src/main/avro/include/</import>
                    </imports>
                    <sourceDirectory>${project.basedir}/src/main/avro/</sourceDirectory>                        
                    <outputDirectory>${project.basedir}/src/main/java/</outputDirectory>
                    <stringType>String</stringType>
                </configuration>
            </execution>
        </executions>
    </plugin>

我得到的错误如下:

Execution default of goal org.apache.avro:avro-maven-plugin:1.9.1:schema failed: 
Undefined name: "my.first.project.AvroDefinition.avsc"

无论如何,我希望我可以使用 maven 远程资源插件,但我无法让它工作,所以我的问题是这怎么可能?如何从依赖 jar 导入 avro 定义以生成我的代码?

【问题讨论】:

  • 我以前做过,但是只使用了AVDL...avsc文件无法导入其他文件
  • 感谢您的信息,我终于找到了一个解决方法,通过 maven 远程资源插件,并按照这个线程 stackoverflow.com/questions/30669013/…
  • 酷。请随时使用可行的解决方案在下面回答您自己的问题

标签: maven avro avro-tools


【解决方案1】:

我终于找到了一个解决方案,不过更多的是一种解决方法,使用两个 maven 插件 (maven-resources-plugin) 和 (maven-remote-resources-plugin)。

基本上第一个插件 (maven-resources-plugin) 只是用来将 avsc 文件复制到项目的资源目录中,因此如果您已经在指定目录中有文件,则可以省略此步骤

实际工作是通过 (maven-remote-resources-plugin) 完成的,它需要在 src/main/resources 目录中找到要包含在 jar 中的文件(顺便说一下,由于某种原因我无法使用插件选项)(因此上面的步骤)

<plugin>
   <artifactId>maven-remote-resources-plugin</artifactId>
   <version>1.6.0</version>
   <executions>
     <execution>
       <goals>
         <goal>bundle</goal>
       </goals>
     </execution>
   </executions>
   <configuration>
     <includes>
        <include>**/*.avsc</include>
     </includes>
   </configuration>
</plugin>

这样做可确保 avsc 文件包含在 jar 中,然后在您的第二个项目/模块中,您需要从插件中执行此目标(见下文)以提取 avsc 文件并生成代码

<plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-remote-resources-plugin</artifactId>
    <version>1.6.0</version>
    <configuration>
      <resourceBundles>
        <resourceBundle>{groupId}:{artifactId}:{version}</resourceBundle>
      </resourceBundles>
    </configuration>
    <executions>
      <execution>
        <phase>generate-sources</phase>
        <goals>
          <goal>process</goal>
        </goals>
      </execution>
    </executions>
</plugin>

注意两件事,首先在 resourceBundles 选项中包含依赖 jar,其次将执行阶段设置为 generate-sources 而不是默认的 generate-resources 否则它将无法工作,因为 avro-maven-plugin 确实在generate-sources 生命周期,到那时它应该有 avsc 文件。

最后,您还应该在 avro-maven-plugin 的导入部分中包含以下行

<import>${project.build.directory}/maven-shared-archive-resources/</import>

这基本上是默认情况下从 maven-remote-resources-plugin 导出 avsc 文件的目录

【讨论】:

    【解决方案2】:

    基于已接受的答案,我能够仅使用 maven-remote-resources-plugin 使其工作。打开 Maven 调试日志后,我注意到没有导入远程资源包,即使它们正在创建。这是由于每个相关 JAR 中的 remote-resources.xml 文件为空。

    另一篇帖子为我指明了正确的方向,Maven remote resource plugin issue

    我需要添加

    <includes>
        <include>**/*.avsc</include>
    </includes>
    

    到每个依赖 pom.xml 中的 maven-remote-resource-plugin 配置。

    在主项目的pom.xml 中,我需要显式导入每个远程模式,以避免出现 NullPointerException。我将此添加到pom.xml中的Avro插件的配置中

    <imports>
        <import>${project.build.directory}/maven-shared-archive-resources/MyAvroSchema.avsc</import>
    </imports>
    

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2016-07-20
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-12-25
      相关资源
      最近更新 更多