CodeForPhilly / CodeForPhilly/pbf-scraping

New Criminal Filings still not getting all cases

オープン
#54 コメント 9 件 リアクション 0 件 担当者 0 名 GitHub で見る
bug data-scraping
主要言語
Python
スター
10
フォーク
4
PR マージ指標
30日以内にマージされた PR はありません

説明

Even after merging in the fix for getting the correct page count, our New Criminal Filings scraping script (0_scrape.py) is not getting the right number of cases. Today's run, which scraped cases from yesterday, scraped 32 cases. There are 44 total: https://www.courts.phila.gov/NewCriminalFilings/date/default.aspx?search=2020-11-10

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

調査の方向性

0_scrape.py から始め、2020-11-10 の「New Criminal Filings」ページに対する実行を再現します。スクレーパーの結果を裁判所サイトに表示される44件の事件と比較し、12件の事件がどこで除外されているかを追跡します。その日付のすべての事件をスクリプトが取得し、その出力がソースページと照合されて検証済みになれば完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
python
領域
data-engineering
issue の種類
バグ
難易度
3/5
見積もり時間
1〜2日
活発さ
停滞
明瞭さ
おおむね明確
初心者へのやさしさ
35/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。