As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Tempo de execução da AWS para Apache Spark (emr-spark-8.0.0)
A tabela a seguir lista as versões do aplicativo disponíveis com AWS runtime for Apache Spark (emr-spark-8.0.0).
| Aplicação | Versão |
|---|---|
| Spark | 4.0.2-amzn-0 |
| Iceberg | 1.10.1-amzn-0 |
| Delta | 4.0.0-amzn-1-spark |
| Hudi | 1.1.0-amzn-0 |
Notas de lançamento do AWS Runtime para Apache Spark (emr-spark-8.0.0)
-
Versão GA — Esta é a versão de disponibilidade geral
AWS runtime for Apache Sparkcom o Apache Spark 4.0.2. Essa versão está disponível no EMR Serverless, no EMR no EC2 e no EMR no EKS. -
Disponibilidade regional — Disponível em todas as AWS regiões em que o EMR Serverless está disponível, exceto nas regiões do Oriente Médio (Bahrein) e Oriente Médio (EAU).
-
Limitações conhecidas: o endpoint seguro do Spark Connect com suporte nativo ao FGAC não está disponível nesta versão.
-
Documentação adicional - Para obter documentação adicional do Apache Spark, consulte a documentação de lançamento do Apache Spark 4.0.2
.
Conceitos básicos
Para começar a usar o Apache Spark 4.0.2, crie um aplicativo EMR Serverless usando a CLI: AWS
aws emr-serverless create-application --type SPARK \ --release-label emr-spark-8.0.0 \ --name spark4-serverless \ --region us-east-1
Observações
Essa versão substitui a versão prévia (emr-spark-8.0-preview). A prévia foi limitada ao Spark 4.0.1 e não tinha FGAC, Hudi, conectores de dados e Persistent Spark History Server.
O
--typeparâmetro paracreate-applicationusosSPARK(maiúsculas).