AWS Neptune 连接失败 - 使用 CURL 命令从 S3 存储桶将数据加载到 Neptune 集群

Question

我正在尝试将 RDF N-triples 数据从 S3 存储桶批量加载到 Neptune 加载程序中。我已经按照以下链接 https://docs.aws.amazon.com/neptune/latest/userguide/bulk-load-data.html 创建了一个 S3 存储桶、IAM 角色、端点和 Neptune 集群。

我正在尝试使用命令提示符从 Windows 本地执行 CURL 命令以加载数据，

curl -X POST -H "Content-Type: application/json" https://<clusterEndpoint>:<clusterPort>/loader -d "{\"source\":\"s3://<bucketName>\",\"format\":\"ntriples\",\"iamRoleArn\":\"arn:aws:iam::<account-id>:role/<role-name>\",\"region\":\""<region>\",\"failOnError\":\"FALSE\",\"parallelism\":\"MEDIUM\",\"updateSingleCardinalityProperties\":\"FALSE\",\"queueRequest\":\"TRUE\"}"

在执行上述 Curl 命令时，我收到以下错误，

Failed to connect to <neptuneClusterEndoint> port <portNumber>: Timed out

另外，当我尝试使用命令 curl http://<neptuneCluster>:<portNumber>/status 检查集群状态时，我遇到了同样的超时错误。

我正在尝试使用 Curl 命令进行 Neptune 加载而不创建 EC2 实例。我可以知道为什么我收到连接失败错误吗？有没有办法使用 curl 命令成功加载 Neptune？

Answer 1

curl 命令需要能够访问 Neptune VPC。例如，这可以通过 SSH 隧道上的 EC2 堡垒主机。当您试图避免使用 EC2 时，您需要设置一种替代方式来访问 Neptune，例如负载均衡器。只要 Lambda 函数可以访问 VPC，您也可以使用 Lambda 函数。您可以决定连接许多其他方式，但由于 Neptune 不公开公共 IP 地址，您需要为 curl 命令配置访问该 VPC 的方式。另请注意，如果您在 Neptune 集群上启用了 IAM 身份验证，则必须使用 SigV4 凭证对请求进行签名。

如果您配置了 Neptune Notebook，则只需使用 %load 命令，它还可以为您处理任何 SigV4 需求。