bigscience-workshop / bigscience-workshop/pii_processing
add backtrans for regex pipeline
Aperta
- Lingua principale
- Python
- Stelle
- 9
- Fork
- 6
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
in test_regex.py, add ability to do backtrans, first trans to english, perform ner, then translate back to target_lang, and match the ner entity between back transed text and original text.
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Direzione di ricerca
Inizia in test_regex.py e leggi la pipeline regex esistente per identificare i relativi punti di ingresso per la traduzione e la NER. Segui il flusso di test attuale, quindi verifica che traduca in inglese, esegua la NER, traduca nuovamente in target_lang e confronti le entità tra il testo ritradotto e quello originale.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- security
- Tipo di issue
- Funzionalità
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 45/100