CodeForPhilly / CodeForPhilly/pbf-scraping

New Criminal Filings still not getting all cases

Ouverte
#54 9 commentaires 0 réactions 0 personnes assignées Voir sur GitHub

Personne n'a encore pris cette issue.

bug data-scraping
Langage dominant
Python
Étoiles
10
Forks
4
Métriques de merge des PR
Aucune PR mergée en 30 j

Description

Even after merging in the fix for getting the correct page count, our New Criminal Filings scraping script (0_scrape.py) is not getting the right number of cases. Today's run, which scraped cases from yesterday, scraped 32 cases. There are 44 total: https://www.courts.phila.gov/NewCriminalFilings/date/default.aspx?search=2020-11-10

Guide de contribution

Aucun guide de contribution indexé pour ce dépôt

Par où commencer

  1. Lisez l'issue en entier, puis le guide de contribution du projet.
  2. Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
  3. Forkez le dépôt et travaillez sur une branche.
  4. Ouvrez une pull request qui référence le numéro de l'issue.

Piste de recherche

Commencez par 0_scrape.py et reproduisez l’exécution sur la page « New Criminal Filings » pour le 2020-11-10. Comparez les résultats du scraper avec les 44 affaires affichées par le site du tribunal et cherchez où 12 affaires sont omises. C’est terminé lorsque le script récupère toutes les affaires pour cette date et que sa sortie est vérifiée par rapport à la page source.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python
Domaine
data-engineering
Type d'issue
Bug
Difficulté
3/5
Temps estimé
1-2 jours
Activité
À l'abandon
Clarté
Plutôt claire
Accessibilité débutants
35/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.