bigscience-workshop / bigscience-workshop/pii_processing
add backtrans for regex pipeline
- Langage dominant
- Python
- Étoiles
- 9
- Forks
- 6
- Métriques de merge des PR
- Aucune PR mergée en 30 j
Description
in test_regex.py, add ability to do backtrans, first trans to english, perform ner, then translate back to target_lang, and match the ner entity between back transed text and original text.
Guide de contribution
Aucun guide de contribution indexé pour ce dépôt
Piste de recherche
Commencez dans test_regex.py et lisez le pipeline de regex existant afin d’identifier ses points d’entrée pour la traduction et la NER. Suivez le flux de test actuel, puis vérifiez qu’il traduit vers l’anglais, effectue la NER, retraduit vers target_lang et met en correspondance les entités entre le texte retraduit et le texte original.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Évaluation
- Stack technique
- python
- Domaine
- security
- Type d'issue
- Fonctionnalité
- Difficulté
- 3/5
- Temps estimé
- 1-2 jours
- Activité
- À l'abandon
- Clarté
- Plutôt claire
- Accessibilité débutants
- 45/100