NVIDIA / NVIDIA/GenerativeAIExamples
Incorrect Validation Warning When Using Multimodal Context With No Other Prompt References
Personne n'a encore pris cette issue.
- Langage dominant
- Jupyter Notebook
- Étoiles
- 4.2k
- Forks
- 1.1k
- Merge moyen
- 10 h 15 min
- PR mergées (30 j)
- 1
Description
When an image is passed as context using the multi_modal_context parameter and no other column is referenced in the prompt, the validator throws an incorrect warning, PROMPT_WITHOUT_REFERENCES.
See visual-question-answering.ipynb to reproduce the error.
Guide de contribution
Ouvrir le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Piste de recherche
Commencez par nemo/NeMo-Data-Designer/advanced/multimodal/visual-question-answering-using-vlm.ipynb et exécutez l’exemple de visual-question-answering pour reproduire l’avertissement PROMPT_WITHOUT_REFERENCES. Suivez le chemin du validateur utilisé par multi_modal_context ; le travail est terminé lorsqu’un contexte contenant uniquement une image ne produit plus cet avertissement, tandis que les véritables prompts sans références continuent de le produire.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- jupyter-notebook
- Domaine
- ai
- Type d'issue
- Bug
- Difficulté
- 3/5
- Temps estimé
- 1-2 jours
- Activité
- À l'abandon
- Clarté
- Plutôt claire
- Accessibilité débutants
- 45/100