unclecode/crawl4ai

在 GitHub 查看

🚀🤖 Crawl4AI: Open-source LLM Friendly Web Crawler & Scraper. Don't be shy, join here: https://discord.gg/jP8KfhDhyN

星标: 83.9k
派生: 8.7k
开放的新手 issue: 0
已索引 issue: 43
平均合并: 3 天 7 小时
30 天内合并 PR: 11

主要语言: Python
许可证: Apache-2.0
最近 GitHub push: 2026年8月31日
最近索引: 2026年9月20日
贡献指南: 贡献指南
行为准则: 行为准则
新手标签: 没有已索引的新手标签

适合新手全部

未关闭全部

目前已索引 43 个未关闭的 Issue

[Bug]: Playground Advanced Config panel is non-functional — still sends the removed `code` protocol to /config/dump 未关闭

⚙ Done 🐞 Bug 🐳 Docker 📌 Root caused

难度 4/5 3-5 天新手友好度 52/100

unclecode/crawl4ai#2260 · 1 条评论 · 2026年9月14日创建
[Bug]: DefaultTableExtraction drops <th> row headers and ignores rowspan, producing misaligned result.tables 未关闭

⚙ Done 🐞 Bug

难度 3/5 1-2 天新手友好度 78/100

unclecode/crawl4ai#2258 · 1 条评论 · 2026年9月13日创建
Discord GitHub Notifications fails for every new stargazer 未关闭

⚙️ In-progress 🐞 Bug 📌 Root caused

难度 3/5 1-2 天新手友好度 58/100

unclecode/crawl4ai#2255 · 2 条评论 · 2026年9月13日创建
[docs] DOM XSS: unescaped innerHTML interpolation in docs/apps/linkdin graph view template (5 sinks) 未关闭

🐞 Bug 📌 Root caused

难度 4/5 3-5 天新手友好度 68/100

unclecode/crawl4ai#2251 · 5 条评论 · 2026年9月12日创建
[Bug]: BFSDeepCrawlStrategy re-scans the full level for parent lookup (O(n²)); BestFirstCrawlingStrategy can enqueue the same URL twice 未关闭

⚙ Done 🐞 Bug

难度 4/5 3-5 天新手友好度 55/100

unclecode/crawl4ai#2242 · 2 条评论 · 2026年9月9日创建
ManagedBrowser SEGV_ACCERR crash with --disable-features=OptimizationHints in --headless=new (macOS arm64) 未关闭

⚙ Done

难度 2/5 1-3 小时新手友好度 88/100

unclecode/crawl4ai#2239 · 1 条评论 · 2026年9月8日创建
[Bug]: browser_mode=builtin fails with "CDP endpoint not ready" — Chromium segfaults (SIGSEGV) when spawned from gunicorn worker (v0.9.3) 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 48/100

unclecode/crawl4ai#2238 · 1 条评论 · 2026年9月8日创建
[Bug]: MCP SSE transport rejects concurrent requests on connect with "Received request before initialization was complete" (-32602) 未关闭

⚙️ In-progress 🐞 Bug 📌 Root caused

难度 4/5 3-5 天新手友好度 66/100

unclecode/crawl4ai#2233 · 2026年9月7日创建
[Bug]: Pooled browsers get ~5 s/navigation slower with use, and the janitor never recycles a busy pool 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 42/100

unclecode/crawl4ai#2231 · 1 条评论 · 2026年9月6日创建
[Bug]: Disallow: /*? in robots.txt blocks the whole website. 未关闭

⚙️ In-progress 🐞 Bug

难度 3/5 1-2 天新手友好度 72/100

unclecode/crawl4ai#2225 · 2 条评论 · 2026年9月1日创建
[Bug]: Playground: /md and /llm endpoints always fail because Advanced Config `code` is sent to /config/dump 未关闭

⚙️ In-progress 🐞 Bug

难度 2/5 1-3 小时新手友好度 86/100

unclecode/crawl4ai#2222 · 2 条评论 · 2026年8月31日创建
Clarify supported versions in SECURITY.md after v0.9.2 release 未关闭

⚙️ In-progress

难度 2/5 1-3 小时新手友好度 58/100

unclecode/crawl4ai#2216 · 1 条评论 · 2026年8月30日创建
page_timeout is silently capped at 60s over HTTP with no way to raise it 未关闭

⚙️ In-progress 🐞 Bug 📌 Root caused

难度 4/5 3-5 天新手友好度 58/100

unclecode/crawl4ai#2211 · 1 条评论 · 2026年8月28日创建
[Bug]: MCP "ask" tool exposes an empty parameters schema ({"type":"object"} with no "properties"), rejected by strict tool-calling clients 未关闭

🐞 Bug 🩺 Needs Triage

难度 3/5 1-2 天新手友好度 72/100

unclecode/crawl4ai#2207 · 1 条评论 · 2026年8月27日创建
[Bug]: Post-navigation page operations have no timeout, and page cleanup is skipped on task cancellation — pages can leak and crawls can hang forever 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 52/100

unclecode/crawl4ai#2205 · 2026年8月27日创建
[Bug]: Docker pool's permanent browser never serves any request - signature is computed without the egress proxy, so no `/crawl` can ever match it 未关闭

⚙️ In-progress 🐞 Bug

难度 3/5 1-2 天新手友好度 74/100

unclecode/crawl4ai#2204 · 1 条评论 · 2026年8月27日创建
[Bug]: Browser pages and renderer processes accumulate for weeks on non-streaming /crawl (Docker 0.9.2) 未关闭

⚙️ In-progress 📌 Root caused

难度 4/5 3-5 天新手友好度 48/100

unclecode/crawl4ai#2202 · 3 条评论 · 2026年8月26日创建
[Bug]: Docker server fails to boot after mcp 2.0.0 release — mcp_bridge uses the removed v1 low-level API 未关闭

难度 1/5 1 小时以内新手友好度 84/100

unclecode/crawl4ai#2147 · 3 条评论 · 2026年8月18日创建
Feature request: opt-in block_internal_urls egress filter for the library layer 未关闭

✨ Enhancement

难度 5/5 一周以上新手友好度 45/100

unclecode/crawl4ai#2146 · 2 条评论 · 2026年8月17日创建
[Bug]: preserve_tags/preserve_classes are a no-op for excluded tags (aside, nav, footer, header, form) 未关闭

🐞 Bug 🩺 Needs Triage

难度 3/5 1-2 天新手友好度 78/100

unclecode/crawl4ai#2125 · 2 条评论 · 2026年8月6日创建
[Bug]: Docker memory guard reads host RAM when no container limit is set — cgroup v2 "max" defeats get_container_memory_percent 未关闭

难度 2/5 1-3 小时新手友好度 72/100

unclecode/crawl4ai#2123 · 1 条评论 · 2026年8月5日创建
[Bug]: crawler.base_config boolean values are silently ignored (regression from #1505) 未关闭

🐞 Bug 🩺 Needs Triage

难度 4/5 3-5 天新手友好度 55/100

unclecode/crawl4ai#2121 · 1 条评论 · 2026年8月5日创建
[Bug]: A timeout occurs when attempting to connect via MCP from LM Studio. 未关闭

🐞 Bug 🩺 Needs Triage

难度 4/5 3-5 天新手友好度 35/100

unclecode/crawl4ai#2120 · 1 条评论 · 2026年8月4日创建
PruningContentFilter drops whitespace-only spans in <pre>/<code> — #1181's bug, still present on the fit_markdown path 未关闭

难度 3/5 1-2 天新手友好度 45/100

unclecode/crawl4ai#2110 · 2 条评论 · 2026年7月30日创建
unclecode-litellm shadows the upstream litellm package; the quarantine that motivated the fork has been lifted 未关闭

难度 3/5 1-2 天新手友好度 52/100

unclecode/crawl4ai#2098 · 1 条评论 · 2026年7月25日创建
[Bug]: arm64 image ships ~2.4GB of build-time waste (core dumps + duplicate Chromium cache), root-caused to QEMU CI emulation 未关闭

⚙️ In-progress 🐞 Bug

难度 3/5 1-2 天新手友好度 62/100

unclecode/crawl4ai#2092 · 1 条评论 · 2026年7月22日创建
[Bug]: AsyncWebCrawler.arun_many() stream closure does not await dispatcher cleanup in 0.9.2 未关闭

🐞 Bug 🩺 Needs Triage

难度 3/5 1-2 天新手友好度 72/100

unclecode/crawl4ai#2083 · 1 条评论 · 2026年7月16日创建
[Bug]: BFSDeepCrawlStrategy.can_process_url() rejects valid single-label hostnames (netloc without a dot) 未关闭

🐞 Bug 🩺 Needs Triage

难度 3/5 1-2 天新手友好度 68/100

unclecode/crawl4ai#2079 · 1 条评论 · 2026年7月15日创建
Config option to disable is_blocked() post-crawl content veto 未关闭

难度 4/5 3-5 天新手友好度 55/100

unclecode/crawl4ai#2058 · 2 条评论 · 2026年7月8日创建
Add Circle/x402 paid crawl endpoint for autonomous agents 未关闭

难度 5/5 一周以上新手友好度 25/100

unclecode/crawl4ai#2024 · 2026年6月20日创建
Feature request: opt-out for the mandatory token when binding non-loopback (Kubernetes / trusted-network deployments) 未关闭

难度 4/5 3-5 天新手友好度 48/100

unclecode/crawl4ai#2023 · 2 条评论 · 1 个 reaction · 2026年6月19日创建
Feature Request: Auto-Follow Single-Frame Framesets 未关闭

✨ Enhancement

难度 4/5 3-5 天新手友好度 55/100

unclecode/crawl4ai#1974 · 1 条评论 · 2026年5月20日创建
[Bug]: Markdown export loses heading hierarchy and table structure 未关闭

❓ Question

难度 4/5 3-5 天新手友好度 42/100

unclecode/crawl4ai#1964 · 3 条评论 · 2026年5月11日创建
[Bug]: MCP scrape tools lack wait_until / SPA support that REST API and CLI provide 未关闭

⚙️ In-progress 🐞 Bug 📌 Root caused

难度 4/5 3-5 天新手友好度 52/100

unclecode/crawl4ai#1963 · 2 条评论 · 2026年5月11日创建
📝 Integration Proposal: CAJAL — Scientific Paper Agent for Crawl4AI 未关闭

难度 5/5 一周以上新手友好度 25/100

unclecode/crawl4ai#1956 · 2026年5月4日创建
[Bug]: Browser hangs indefinitely on WSL when system proxy is required 未关闭

❓ Question

难度 4/5 3-5 天新手友好度 45/100

unclecode/crawl4ai#1930 · 3 条评论 · 2026年4月22日创建
[Bug]: Not Compatible with Python 3.14 (lxml dependency failure) 未关闭

⚰️ Wontfix

难度 3/5 1-2 天新手友好度 52/100

unclecode/crawl4ai#1903 · 2 条评论 · 4 个 reaction · 2026年4月6日创建
[Bug]: `downloaded_files` race condition causes cross-contamination between CrawlResults 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 45/100

unclecode/crawl4ai#1889 · 1 条评论 · 2026年3月31日创建
[Bug]: LLMExtractionStrategy not applied when CrawlerRunConfig.cache_mode=ENABLED 未关闭

✊🏼 On-hold 🐞 Bug 📌 Root caused

难度 3/5 1-2 天新手友好度 52/100

unclecode/crawl4ai#1455 · 2 条评论 · 2025年8月29日创建
Bring Docker API server to feature parity with Crawl4AI v0.7.x 未关闭

⚙️ Under Review ✨ Enhancement

难度 5/5 一周以上新手友好度 25/100

unclecode/crawl4ai#1452 · 3 条评论 · 4 个 reaction · 2025年8月28日创建
[Bug]: Memory Leak on Repeated /md Requests via Docker (MacOS) — Container Crashes Randomly Over Time 未关闭

❓ Question 🐳 Docker

难度 4/5 3-5 天新手友好度 45/100

unclecode/crawl4ai#1256 · 15 条评论 · 10 个 reaction · 2025年6月29日创建
[Bug]: RateLimiter provides ineffective protection against failures 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 35/100

unclecode/crawl4ai#1095 · 2 条评论 · 2025年5月10日创建
[Bug]: When extracting data with scroll_full_page, only the final elements get parsed 未关闭

⚙️ In-progress 🐞 Bug

难度 4/5 3-5 天新手友好度 47/100

unclecode/crawl4ai#731 · 22 条评论 · 3 个 reaction · 2025年2月20日创建

unclecode/crawl4ai

把新 issue 发到你的邮箱