使用 Spark Cassandra Connector 建立与 Amazon Keyspaces 的连接的先决条件 - Amazon Keyspaces(Apache Cassandra 兼容)
Amazon Web Services 文档中描述的 Amazon Web Services 服务或功能可能因区域而异。要查看适用于中国区域的差异,请参阅 中国的 Amazon Web Services 服务入门 (PDF)

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用 Spark Cassandra Connector 建立与 Amazon Keyspaces 的连接的先决条件

在使用 Spark Cassandra Connector 连接到 Amazon Keyspaces 之前,您需要确保安装以下内容。Amazon Keyspaces 与 Spark Cassandra Connector 的兼容性已通过以下推荐版本进行了测试:

  • Java 版本 8

  • Scala 2.12

  • Spark 3.4

  • Cassandra Connector 2.5 及更高版本

  • Cassandra 驱动程序 4.12

  1. 要安装 Scala,请按照 https://www.scala-lang.org/download/scala2.html 中的说明进行操作。

  2. 要安装 Spark 3.4.1,请按照以下示例进行操作。

    curl -o spark-3.4.1-bin-hadoop3.tgz -k https://dlcdn.apache.org/spark/spark-3.4.1/spark-3.4.1-bin-hadoop3.tgz # now to untar tar -zxvf spark-3.4.1-bin-hadoop3.tgz # set this variable. export SPARK_HOME=$PWD/spark-3.4.1-bin-hadoop3 ```