bigscience-workshop / bigscience-workshop/pii_processing

add backtrans for regex pipeline

Ouverte
#6 0 commentaires 0 réactions 0 personnes assignées Voir sur GitHub
Langage dominant
Python
Étoiles
9
Forks
6
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

in test_regex.py, add ability to do backtrans, first trans to english, perform ner, then translate back to target_lang, and match the ner entity between back transed text and original text.

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Piste de recherche

Commencez dans test_regex.py et lisez le pipeline de regex existant afin d’identifier ses points d’entrée pour la traduction et la NER. Suivez le flux de test actuel, puis vérifiez qu’il traduit vers l’anglais, effectue la NER, retraduit vers target_lang et met en correspondance les entités entre le texte retraduit et le texte original.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
security
Type d'issue
Fonctionnalité
Difficulté
3/5
Temps estimé
1-2 jours
Activité
À l'abandon
Clarté
Plutôt claire
Accessibilité débutants
45/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.