astrodbtoolkit / astrodbtoolkit/AstrodbKit

Address unicode issues in database

Aperta
#50 2 commenti 0 reazioni 0 assegnatari Vedi su GitHub
bug
Lingua principale
Python
Stelle
12
Fork
5
Metriche di merge delle PR
Nessuna PR unita negli ultimi 30g

Descrizione

When working with the database there are sometimes explicit representations of unicode characters (eg, \u2212) instead of what they should be (-). We need to investigate where this is happening; it is possible the input data is wrong (and thus a matter for the SIMPLE scripts) but we can probably force an encoding on the output JSON to ensure it doesn't happen on the file representation. The problem with having a mix of unicode characters is searching exact values can be much harder.

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Direzione di ricerca

Inizia tracciando il percorso dei valori del database attraverso gli script SIMPLE fino al JSON di output, verificando se \u2212 viene introdotto dai dati di input o dalla serializzazione. Riproduci la rappresentazione Unicode mista e individua dove dovrebbe essere gestita la codifica; il lavoro è completato quando i caratteri equivalenti hanno rappresentazioni coerenti nei file e le ricerche di valori esatti funzionano in modo affidabile.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
json, python, sqlalchemy
Ambito
databases
Tipo di issue
Bug
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Da chiarire
Idoneità per principianti
28/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.