使用spark2.4.0-cdh6.3.2版本去将数据查出来再写入2.1.1-cdh6.3.2，jar包冲突，可有好的解决方法
Ouverte
- Langage dominant
- Java
- Étoiles
- 6.4k
- Forks
- 1.2k
- Merge moyen
- 1 j 23 h
- PR mergées (30 j)
- 115
Description
使用spark2.4.0-cdh6.3.2版本去将数据查出来再写入2.1.1-cdh6.3.2，jar包冲突，可有好的解决方法
Guide de contribution
Ouvrir le guide de contribution
Piste de recherche
Commencez par examiner l’image jointe et reproduisez le workflow de lecture et d’écriture des données avec Spark 2.4.0-CDH6.3.2 et 2.1.1-CDH6.3.2. Documentez les JARs en conflit et le contexte d’exécution ; l’issue est terminée lorsque le transfert fonctionne sans conflits de dépendances.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- java, spark
- Domaine
- data-engineering, databases
- Type d'issue
- Bug
- Difficulté
- 4/5
- Temps estimé
- 3-5 jours
- Activité
- À l'abandon
- Clarté
- À clarifier
- Accessibilité débutants
- 15/100