`AWS runtime for Apache Spark` (emr-spark-8.0.0)

次の表に、 AWS runtime for Apache Spark (emr-spark-8.0.0) で使用できるアプリケーションバージョンを示します。

GA リリース – これは、Apache Spark 4.0.2 AWS runtime for Apache Sparkを搭載したの一般提供リリースです。このリリースは、EMR Serverless、EC2 上の EMR、EKS 上の EMR で利用できます。
リージョンの可用性 - 中東 (バーレーン) AWS リージョンと中東 (アラブ首長国連邦) リージョンを除く、EMR Serverless が利用可能なすべてのリージョンで使用できます。
既知の制限事項 - ネイティブ FGAC をサポートする Spark Connect セキュアエンドポイントは、このリリースでは利用できません。
追加のドキュメント - 追加の Apache Spark ドキュメントについては、「Apache Spark 4.0.2 リリースドキュメント」を参照してください。

Apache Spark 4.0.2 の使用を開始するには、CLI を使用して EMR Serverless AWS アプリケーションを作成します。


aws emr-serverless create-application --type SPARK \
  --release-label emr-spark-8.0.0 \
  --name spark4-serverless \
  --region us-east-1

このリリースは、プレビューリリース (emr-spark-8.0-preview) よりも優先されます。プレビューは Spark 4.0.1 に限定され、FGAC、Hudi、データコネクタ、Persistent Spark History Server がありませんでした。
の --typeパラメータは SPARK (大文字) create-applicationを使用します。

リリースバージョン

AWS runtime for Apache Spark (emr-spark-8.0-preview)

AWS runtime for Apache Spark (emr-spark-8.0.0)