未安装提供程序“gs”

Question

我在这里找到了两篇类似的帖子，但一篇没有得到答复，另一篇是关于 android 的。我有一个 Spring Boot 项目，我想在我的应用程序中访问 GCP 存储文件。

在本地一切正常，我可以访问我的存储桶并在我的存储中读取和存储文件。但是当我将它上传到 gcp kubernetes 时，我得到了以下异常：

"java.nio.file.FileSystemNotFoundException: Provider "gs" not 安装在 java.nio.file.Paths.get(Paths.java:147) ~[na:1.8.0_212] 在 xx.xx.StorageService.saveFile(StorageService.java:64) ~[classes!/:0.3.20-SNAPSHOT]

我出现的代码行如下：

public void saveFile(MultipartFile multipartFile, String path) {
    String completePath = filesBasePath + path;
    
    Path filePath = Paths.get(URI.create(completePath)); // <- exception appears here
    Files.createDirectories(filePath);
    multipartFile.transferTo(filePath);
        
}

}

completePath 可能会导致类似“gs://my-storage/path/to/file/image.jpg”

我有以下依赖项：

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-gcp-starter-storage</artifactId>
    <version>1.2.6.RELEASE</version>
</dependency>
<dependency>
    <groupId>com.google.cloud</groupId>
    <artifactId>google-cloud-nio</artifactId>
    <version>0.122.5</version>
</dependency>

有人知道在哪里看吗？ 除了基础设施之外，唯一真正的区别是我没有明确不在 kubernetes 上使用身份验证，因为根据文档，它不是必需的

从 Google Cloud Platform 使用 Google Cloud 库时 Compute Engine、Kubernetes Engine 或 App Engine 等环境， 无需额外的身份验证步骤。

Answer 1

看起来这里传统的 Spring Boot 打包并没有以所需的方式打包依赖项。通常你会看到类似的东西：

<plugin>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-maven-plugin</artifactId>
    <version>2.4.5</version>
    <executions>
        <execution>
            <goals>
                <goal>repackage</goal>
            </goals>
        </execution>
    </executions>
</plugin>

但是，要访问“gs”提供程序，它需要位于“lib/”文件夹中。您可以通过复制依赖项然后创建 JAR 来手动打包它（这是基于springboot-helloworld 示例：

<plugin>
  <groupId>org.apache.maven.plugins</groupId>
  <artifactId>maven-dependency-plugin</artifactId>
  <executions>
      <execution>
          <id>copy-dependencies</id>
          <phase>prepare-package</phase>
          <goals>
              <goal>copy-dependencies</goal>
          </goals>
          <configuration>
              <outputDirectory>
                  ${project.build.directory}/lib
              </outputDirectory>
          </configuration>
      </execution>
  </executions>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-jar-plugin</artifactId>
<configuration>
    <archive>
        <manifest>
            <addClasspath>true</addClasspath>
            <classpathPrefix>lib/</classpathPrefix>
            <mainClass>
              com.example.appengine.springboot.SpringbootApplication
            </mainClass>
        </manifest>
    </archive>
</configuration>
</plugin>

原为posted on GitHub。

Answer 2

gs:// 语法不是通用的；某些 Google 工具和服务（例如 gsutil）支持它，但许多 URL 库并不知道它。

您可以更改为使用其中一种 GCS API 的 HTTP 语法，例如，

https://my-storage.storage.googlapis.com/path/to/file/image.jpg

请注意，上面的 HTTP URL 将需要身份验证，因此您可能希望使用像 google-cloud-java 这样支持发出经过身份验证的 GCS 请求的库。

Answer 3

按照Averi Kitsch's answer 并使用相同的springboot-helloworld 示例，我能够在更新pom.xml 后使其在本地工作。但是，就像它为您所做的一样，它仅在我在本地运行它时才有效，而当我将它部署在 Google Cloud 上时它会失败。问题是我使用的 Dockerfile 忽略了 /target/lib 目录中的所有 jar 文件，我需要将该目录复制到映像中。请注意，我使用的是 Google Cloud Run，但我相信这应该适用于大多数使用 Dockerfile 的部署。

这就是我最终得到的结果：

Dockerfile

FROM maven:3.8-jdk-11 as builder

WORKDIR /app
COPY pom.xml .
COPY src ./src

RUN mvn package -DskipTests

FROM adoptopenjdk/openjdk11:alpine-jre

COPY --from=builder /app/target/springboot-helloworld-*.jar /springboot-helloworld.jar

# IMPORTANT! - Copy the library jars to the production image!
COPY --from=builder /app/target/lib /lib

CMD ["java", "-Djava.security.egd=file:/dev/./urandom", "-jar", "/springboot-helloworld.jar"]

pom.xml

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  <modelVersion>4.0.0</modelVersion>
  <groupId>com.example.appengine</groupId>
  <artifactId>springboot-helloworld</artifactId>
  <version>0.0.1-SNAPSHOT</version>

  <parent>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-parent</artifactId>
    <version>2.5.4</version>
    <relativePath/>
  </parent>

  <properties>
    <maven.compiler.target>11</maven.compiler.target>
    <maven.compiler.source>11</maven.compiler.source>
  </properties>

  <dependencies>
    <dependency>
      <groupId>org.springframework.boot</groupId>
      <artifactId>spring-boot-starter-web</artifactId>
    </dependency>
    <dependency>
      <groupId>com.google.cloud</groupId>
      <artifactId>google-cloud-nio</artifactId>
      <version>0.123.8</version>
    </dependency>
  </dependencies>

  <build>
    <plugins>
      <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-dependency-plugin</artifactId>
        <executions>
          <execution>
            <id>copy-dependencies</id>
            <phase>prepare-package</phase>
            <goals>
              <goal>copy-dependencies</goal>
            </goals>
            <configuration>
              <outputDirectory>
                ${project.build.directory}/lib
              </outputDirectory>
            </configuration>
          </execution>
        </executions>
      </plugin>
      <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-jar-plugin</artifactId>
        <configuration>
          <archive>
            <manifest>
              <addClasspath>true</addClasspath>
              <classpathPrefix>lib/</classpathPrefix>
              <mainClass>
                com.example.appengine.springboot.SpringbootApplication
              </mainClass>
            </manifest>
          </archive>
        </configuration>
      </plugin>
    </plugins>
  </build>

</project>