astrodbtoolkit / astrodbtoolkit/AstrodbKit
Address unicode issues in database
- Lingua principale
- Python
- Stelle
- 12
- Fork
- 5
- Metriche di merge delle PR
- Nessuna PR unita negli ultimi 30g
Descrizione
When working with the database there are sometimes explicit representations of unicode characters (eg, \u2212) instead of what they should be (-). We need to investigate where this is happening; it is possible the input data is wrong (and thus a matter for the SIMPLE scripts) but we can probably force an encoding on the output JSON to ensure it doesn't happen on the file representation. The problem with having a mix of unicode characters is searching exact values can be much harder.
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Direzione di ricerca
Inizia tracciando il percorso dei valori del database attraverso gli script SIMPLE fino al JSON di output, verificando se \u2212 viene introdotto dai dati di input o dalla serializzazione. Riproduci la rappresentazione Unicode mista e individua dove dovrebbe essere gestita la codifica; il lavoro è completato quando i caratteri equivalenti hanno rappresentazioni coerenti nei file e le ricerche di valori esatti funzionano in modo affidabile.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- json, python, sqlalchemy
- Ambito
- databases
- Tipo di issue
- Bug
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 28/100