bigscience-workshop / bigscience-workshop/pii_processing
add custom lexicon
- Lingua principale
- Python
- Stelle
- 9
- Fork
- 6
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
Add a custom lexicon to test_regex.py or even better to ontology_manager.py. Currently ontology_manager.py using a pattern match to find words potentially in a lexicon/ontology. You might want to have an exact dictionary to do a lexcion match, like "Barack Obama": "PUBLIC_FIGURE"}
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Direzione di ricerca
Inizia leggendo test_regex.py e ontology_manager.py, in particolare il percorso attuale di pattern matching per i termini del lessico o dell’ontologia. Segui il modo in cui viene classificato un termine rilevato, quindi definisci il comportamento del dizionario personalizzato usando l’esempio fornito e aggiungi la copertura per la corrispondenza esatta. Il lavoro è completo quando le voci personalizzate vengono riconosciute con le relative labels configurate senza interrompere la corrispondenza esistente.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python
- Ambito
- security
- Tipo di issue
- Funzionalità
- Difficoltà
- 3/5
- Tempo stimato
- 1-2 giorni
- Stato di attività
- Ferma
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 35/100