AbsaOSS / AbsaOSS/spline-spark-agent

spark-3.5-spline-agent not working with Glue 5.0 spark 3.5

Abierto
#865 3 comentarios 0 reacciones 0 asignados Ver en GitHub
Lenguaje dominante
Scala
Estrellas
210
Forks
102
Merge medio
1 d 1 h
PR fusionados (30 d)
1

Descripción

Hi,

I tried using **Spark-3.5-spline-agent-bundle_2.12-2.2.1.jar** with **AWS Glue 5.0,** but encountered an error: **IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'**.

However, when I use the following options:

**Key: --java-options
Value: --add-opens=java.base/sun.net.www.protocol.jar=ALL-UNNAMED**

the job runs successfully, though the runtime increases by **approximately 1.5 minutes.**

Is there an alternative solution to resolve this issue?

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Evaluación

Este issue todavía no se ha evaluado.

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.