本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
使用 Spark Cassandra Connector 建立与 Amazon Keyspaces 的连接的先决条件
在使用 Spark Cassandra Connector 连接到 Amazon Keyspaces 之前,您需要确保安装以下内容。Amazon Keyspaces 与 Spark Cassandra Connector 的兼容性已通过以下推荐版本进行了测试:
-
Java 版本 8
-
Scala 2.12
-
Spark 3.4
-
Cassandra Connector 2.5 及更高版本
-
Cassandra 驱动程序 4.12
-
要安装 Scala,请按照 https://www.scala-lang.org/download/scala2.html
中的说明进行操作。 -
要安装 Spark 3.4.1,请按照以下示例进行操作。
curl -o spark-3.4.1-bin-hadoop3.tgz -k https://dlcdn.apache.org/spark/spark-3.4.1/spark-3.4.1-bin-hadoop3.tgz # now to untar tar -zxvf spark-3.4.1-bin-hadoop3.tgz # set this variable. export SPARK_HOME=$PWD/spark-3.4.1-bin-hadoop3 ```