使用 SPARQL UPDATE LOAD 将数据导入到 Neptune

使用 SPARQL UPDATE LOAD 直接将文件从 Amazon S3 加载到 Neptune

由于 Neptune 不允许您在使用 SPARQL UPDATE LOAD 时将 IAM 角色传递给 Amazon S3，因此所讨论的 Amazon S3 桶必须是公有的，或者您必须在 LOAD 查询中使用预签名的 Amazon S3 URL。

要为 Amazon S3 文件生成预签名 URL，您可以使用如下 Amazon CLI 命令：

aws s3 presign --expires-in (number of seconds) s3://(bucket name)/(path to file of data to load)

然后，您就可以在 LOAD 命令中使用生成的预签名 URL：

curl https://(a Neptune endpoint URL):8182/sparql \
  --data-urlencode 'update=load (pre-signed URL of the remote Amazon S3 file of data to be loaded) \
                           into graph (named graph)'

有关更多信息，请参阅身份验证请求：使用查询参数。Boto3 文档中介绍了如何使用 Python 脚本生成预签名 URL。

此外，要加载的文件的内容类型必须正确设置。

1. 将文件上传到 Amazon S3 时，使用 -metadata 参数设置文件的内容类型，如下所示：

   aws s3 cp test.nt s3://bucket-name/my-plain-text-input/test.nt --metadata Content-Type=text/plain
   aws s3 cp test.rdf s3://bucket-name/my-rdf-input/test.rdf --metadata Content-Type=application/rdf+xml

2. 确认媒体类型信息实际存在。运行：

   curl -v bucket-name/folder-name

   此命令的输出应显示您在上传文件时设置的媒体类型信息。

3. 然后，您可以使用 SPARQL UPDATE LOAD 命令将这些文件导入到 Neptune：

   curl https://your-neptune-endpoint:port/sparql \
     -d "update=LOAD <https://s3.amazonaws.com/bucket-name/my-rdf-input/test.rdf>"

使用 Web 服务器，通过 SPARQL UPDATE LOAD 将文件加载到 Neptune 中

1. 在运行于 VPC 中且托管了 Neptune 和要加载的文件的计算机上安装 Web 服务器。例如，使用 Amazon Linux，您可以如下所示安装 Apache：

   sudo yum install httpd mod_ssl
   sudo /usr/sbin/apachectl start

2. 定义您将要加载的 RDF 文件内容的 MIME 类型。SPARQL 使用 Web 服务器发送的 Content-type 标头确定内容的输入格式，因此您必须为 Web 服务器定义相关的 MIME 类型。

   例如，假设您使用以下文件扩展名来标识文件格式：

   • .nt 表示 NTriples。

   • .nq 表示 NQuads。

   • .trig 表示 Trig。

   • .rdf 表示 RDF/XML。

   • .ttl 表示 Turtle。

   • .n3 表示 N3。

   • .jsonld 表示 JSON-LD。

   如果您使用 Apache 2 作为 Web 服务器，您将编辑文件 /etc/mime.types 并添加以下类型：

    text/plain nt
    application/n-quads nq
    application/trig trig
    application/rdf+xml rdf
    application/x-turtle ttl
    text/rdf+n3 n3
    application/ld+json jsonld

3. 确认 MIME 类型映射可以正常使用。在您启动并运行 Web 服务器并托管了所选格式的 RDF 文件之后，您可以通过从本地主机向 Web 服务器发送请求来测试配置。

   例如，您可以如下所示发送请求：

   curl -v http://localhost:80/test.rdf

   然后，在 curl 的详细输出中您应看到如下所示的行：

   Content-Type: application/rdf+xml

   这指示已成功定义内容类型映射。

4. 现在，您已准备好使用 SPARQL UPDATE 命令加载数据：

   curl https://your-neptune-endpoint:port/sparql \
       -d "update=LOAD <http://web_server_private_ip:80/test.rdf>"