AbsaOSS / AbsaOSS/spline-spark-agent
spark-3.5-spline-agent not working with Glue 5.0 spark 3.5
Offen
- Vorherrschende Sprache
- Scala
- Sterne
- 210
- Forks
- 102
- Ø Merge
- 1 T. 1 Std.
- Gemergte PRs (30 T.)
- 1
Beschreibung
Hi,
I tried using **Spark-3.5-spline-agent-bundle_2.12-2.2.1.jar** with **AWS Glue 5.0,** but encountered an error: **IllegalArgumentException: Error while instantiating 'org.apache.spark.sql.hive.HiveSessionStateBuilder'**.
However, when I use the following options:
**Key: --java-options
Value: --add-opens=java.base/sun.net.www.protocol.jar=ALL-UNNAMED**
the job runs successfully, though the runtime increases by **approximately 1.5 minutes.**
Is there an alternative solution to resolve this issue?
Beitragsleitfaden
Für dieses Repository ist kein Beitragsleitfaden indexiert
Bewertung
Dieses Issue wurde noch nicht bewertet.