CodeForPhilly / CodeForPhilly/pbf-scraping
New Criminal Filings still not getting all cases
オープン
bug
data-scraping
- 主要言語
- Python
- スター
- 10
- フォーク
- 4
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
Even after merging in the fix for getting the correct page count, our New Criminal Filings scraping script (0_scrape.py) is not getting the right number of cases. Today's run, which scraped cases from yesterday, scraped 32 cases. There are 44 total: https://www.courts.phila.gov/NewCriminalFilings/date/default.aspx?search=2020-11-10
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
0_scrape.py から始め、2020-11-10 の「New Criminal Filings」ページに対する実行を再現します。スクレーパーの結果を裁判所サイトに表示される44件の事件と比較し、12件の事件がどこで除外されているかを追跡します。その日付のすべての事件をスクリプトが取得し、その出力がソースページと照合されて検証済みになれば完了です。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- python
- 領域
- data-engineering
- issue の種類
- バグ
- 難易度
- 3/5
- 見積もり時間
- 1〜2日
- 活発さ
- 停滞
- 明瞭さ
- おおむね明確
- 初心者へのやさしさ
- 35/100