Examples Of Web Crawlers
一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )
Asset-Profil
Coding- und Entwickler-Agents
Code review, repo analysis, testing, CI, GitHub, DevOps, and developer workflow skills.
Szenario
Coding-Agents
I need a coding agent that can understand a repository, edit code, and review pull requests.
Agent-Fit
Claude Code + Browser agents + CLI
Geeignet für Codex, Claude Code, Cursor, CLI oder benutzerdefinierte Agents.
Installieren
Bereit
npx skills add shengqiangzhang/examples-of-web-crawlers
Wartung
Veraltet
1 Jahre seit dem letzten Push
Risiko
Prüfung nötig
Repository appears stale
GitHub-Qualität
15K
84/100 Qualität · 86/100 Vertrauen
Abdeckungs-Tags
Review-Notizen
Repository appears stale · Financial research output is not financial advice; require human review before any live investment decision
Agent-Adoptionskarte
Vertrauen, Audit und Installationsbereitschaft auf einen Blick
Diese Werte kombinieren öffentliche Repository-Metadaten, OpenAgentSkill-Reviewsignale, Wartungsaktualität und Installationsbereitschaft. Sie helfen bei der Vorauswahl, ersetzen aber keine menschliche Prüfung.
Qualität
StarkSolid option that is likely worth shortlisting for production workflows.
Vertrauen
Vor Installation prüfenGutes Shortlist-Signal, aber der Agent sollte Auditnotizen, Installationsrichtlinien und Ergebnisbelege vor der Ausführung prüfen.
Audit
Prüfung nötigMaschinenlesbare Prüfung von Installationsbereitschaft, Sicherheitsmetadaten, Wartung und Akzeptanzrisiko.
OpenAgentSkill Trust Score v5
Menschliche Prüfung vor Installation
Nach menschlicher oder Sandbox-Prüfung als primären Kandidaten verwenden.
Stars
15K GitHub-Stars
Repository-Aktivität
15K Stars und 3.8K Forks
Wartung
1 Jahre seit dem letzten Push
Lizenz
MIT
Installieren
npx skills add shengqiangzhang/examples-of-web-crawlers
Installationssicherheit
Standard-Paket- oder Laufzeit-Installationspfad
Berechtigungsfläche
network or browser access
Agent-Ergebnisse
Noch keine Agent-Ergebnisdaten
Dokumentation
Starker README/SKILL.md-Kontext
Risikoübersicht
Vor Produktion prüfen
- Financial research output is not financial advice; require human review before any live investment decision.
- Repository looks stale
- Recent maintenance: 1y since push
Installationsbereitschaft
Installationspfad verfügbar
- Installationspfad ist verfügbar
- Repository-Belege sind verfügbar
- Lizenz ist angegeben
- Noch keine Agent-Proven-Ergebnisbelege
Agent-lesbare Metadaten
Maschinenlesbare Entscheidungsdaten für diesen Skill.
Nutze diesen Block oder das eingebettete JSON, um zu entscheiden, ob ein Agent diesen Skill installieren, eine Alternative wählen oder zuerst menschliche Prüfung anfordern soll.
Geeignete Aufgaben
- Web-Scraping-Workflows
- Claude-Code-Teams
- Teams, die GitHub-Adoptionssignale schätzen
- Crawl target URLs
Geeignete Agents
Installationsentscheidung
- Befehl
- npx skills add shengqiangzhang/examples-of-web-crawlers
- Richtlinie
- Prüfen
- Menschliche Prüfung
- Ja
Vertrauen und Risiko
- Vertrauen
- 78/100
- Audit
- 80/100
- Risikoebene
- Prüfung nötig
Ergebnis-Loop
- Endpoint
- /api/agent/outcome
- Event-ID
- resolve
- Ergebnisse
- 5
Installationsbefehl
npx skills add shengqiangzhang/examples-of-web-crawlersNicht verwenden, wenn
- teams that require actively maintained dependencies
- production agents without a repository review
- Repository looks stale
- Repository appears stale
- Financial research output is not financial advice; require human review before any live investment decision
Agent-Sicherheit v2
64/100 · Vor Installation prüfen
Nutzbarer Kandidat, aber der Agent sollte Berechtigungs- und Auditnotizen vor der Installation anzeigen.
Vor der Installation in einem echten Arbeitsbereich ist menschliche Freigabe erforderlich.
Mittel
Browser automation
Skill may drive a browser or interact with web pages.
Mittel
Netzwerkzugriff
Die Skill ruft wahrscheinlich Remote-Seiten, APIs, Repositories oder externe Dienste ab.
- Repository appears stale
Installationsziele
Diesen Skill im Agent-Workflow installieren
Über den öffentlichen Endpunkt erhältst du Befehl, Sicherheitscheckliste, Ziel-Prompts und kanonische Links.
OpenAgentSkill CLI
Resolve policy, run the source installer safely, and report a verified install receipt.
$ npx --yes https://github.com/Leon-Drq/openagentskill/releases/download/cli-v0.2.1/openagentskill-0.2.1.tgz install shengqiangzhang-examples-of-web-crawlersAgent-Auflösungsplan
Lass einen Agent die Eignung vor der Installation prüfen.
Die Resolve API liefert die beste Skill, Alternativen, Sicherheitsrichtlinien, Auditnotizen, Installationsziel und einen direkt nutzbaren Prompt.
JSON öffnen
/api/agent/resolve?task=Use%20Examples%20Of%20Web%20Crawlers%20for%20an%20agent%20workflow&agent=codex&max_risk=medium
Resolve-Text
/api/agent/resolve?task=Use%20Examples%20Of%20Web%20Crawlers%20for%20an%20agent%20workflow&agent=codex&max_risk=medium&format=text
Installationsübergabe
/api/skills/shengqiangzhang-examples-of-web-crawlers/install
Agent sollte prüfen
- Task fit and alternatives from Resolve API.
- Audit score, trust score, and safety policy warnings.
- Install target compatibility for Codex, Claude Code, Cursor, or CLI.
Prompt kopieren
Task: Use Examples Of Web Crawlers in this workspace.
Resolve first: https://www.openagentskill.com/api/agent/resolve?task=Use%20Examples%20Of%20Web%20Crawlers%20for%20an%20agent%20workflow&agent=codex&max_risk=medium
Review install handoff: https://www.openagentskill.com/api/skills/shengqiangzhang-examples-of-web-crawlers/install
Install command: npx skills add shengqiangzhang/examples-of-web-crawlers
Before running it, summarize audit warnings, required permissions, and the fallback skill if install is risky.Agent-Übergabe
Gib dem Agent den Installationspfad, nicht noch ein Verzeichnis.
Über den öffentlichen Endpunkt erhältst du Befehl, Sicherheitscheckliste, Ziel-Prompts und kanonische Links.
Installationsübergabe
/api/skills/shengqiangzhang-examples-of-web-crawlers/install
LLM-Textformat
/api/skills/shengqiangzhang-examples-of-web-crawlers/install?format=text
Alternativen finden
/api/skills/search?q=Examples%20Of%20Web%20Crawlers&limit=3
Agent-Prompt
Use Examples Of Web Crawlers for this task. Review https://www.openagentskill.com/api/skills/shengqiangzhang-examples-of-web-crawlers/install, then install with: npx skills add shengqiangzhang/examples-of-web-crawlersRegistry-Metadaten
Agent-lesbares Profil für die automatische Skill-Auswahl.
Die Registry API stellt Entscheidungs-, Vertrauens-, Audit-, Use-Case- und Installationssignale ohne UI-Scraping bereit.
Manifest
/api/registry/manifest/shengqiangzhang-examples-of-web-crawlers
LLM-Text
/api/registry/manifest/shengqiangzhang-examples-of-web-crawlers?format=text
Installationsalias
/api/registry/install/shengqiangzhang-examples-of-web-crawlers
Empfehlen
/api/registry/recommend?task=Use%20Examples%20Of%20Web%20Crawlers%20in%20an%20agent%20workflow&limit=3
Agent-Fit
Web-Scraping
Use-Case-Tags
Plattformen
HTML, Crawler, Claude Code, Browser agents
Audit-Bericht
Prüfung nötig · 80/100
Maschinenlesbare Prüfung von Installationsbereitschaft, Sicherheitsmetadaten, Wartung und Akzeptanzrisiko.
Agent-Entscheidungspanel
Primäre Wahl für Web-Scraping
Use this as a leading candidate, then validate the README and install path in your own agent stack.
Rolle im Stack
Primäre Wahl
Primäre Eignung
Web-Scraping
Vertrauenslabel
Produktionsbereit
Installationspfad
Befehl bereit
Verwenden wenn
- Web-Scraping-Workflows
- Claude-Code-Teams
- Teams, die GitHub-Adoptionssignale schätzen
Evidenz
- 14,655 GitHub-Stars
- install command or GitHub repo available
- Qualitätsprofil 84/100
- 15 OpenAgentSkill-Interaktionen
zuerst prüfen
- Repository looks stale
Implementierungspfad
- 1Installieren Sie es in einem Sandbox-Agent und führen Sie eine Web-Scraping-Aufgabe vollständig aus.
- 2Compare output quality, latency, and failure behavior against at least one alternative.
- 3Promote it into production only after reviewing repository permissions, license, and maintenance signals.
Vertrauensprofil
Vor Installation prüfen
Gutes Shortlist-Signal, aber der Agent sollte Auditnotizen, Installationsrichtlinien und Ergebnisbelege vor der Ausführung prüfen.
GitHub-Akzeptanz
Bestanden15K GitHub-Stars
Star-/Fork-Aktivität
Bestanden15K Stars und 3.8K Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbar
Aktuelle Wartung
Beheben1 Jahre seit dem letzten Push
Lizenzklarheit
BestandenMIT
Positive Signale
- Manuell verifizierte Auflistung
- KI-Prüfung genehmigt
- Installationspfad ist verfügbar
- Repository-Belege sind verfügbar
- Large GitHub adoption signal
- Der Installationsbefehl weist kein offensichtliches Hochrisikomuster auf
- Ergebniszyklus ist bereit, benötigt aber den ersten echten Agent-Lauf
Vor Installation prüfen
- Financial research output is not financial advice; require human review before any live investment decision.
- Repository looks stale
- Recent maintenance: 1y since push
- Noch keine echten Agent-Ergebnisberichte
- Vor unbeaufsichtigter Installation ist menschliche Prüfung erforderlich
Empfohlene Aktion
Nach menschlicher oder Sandbox-Prüfung als primären Kandidaten verwenden.
Qualitätsprofil
Stark Kandidat für Agent-Workflows
Solid option that is likely worth shortlisting for production workflows.
Workflow-Eignung
Diese Skill in diesen Szenarien nutzen
Collect structured data
Web scraping
I need my agent to scrape websites and extract structured data from pages.
Build and ship code
Coding agents
I need a coding agent that can understand a repository, edit code, and review pull requests.
Operate web apps
Browser automation
I need my agent to control a browser, fill forms, and verify web app workflows.
Workflow-Eignung
Zum vollständigen Workflow hinzufügen
Scrape, clean, and reuse web data
Web data pipeline
A practical workflow for agents that crawl public pages, extract clean content, normalize data, and hand it to downstream research or RAG workflows.
Inspect, patch, and verify code
Coding review agent
A workflow for software agents that inspect repositories, review pull requests, generate tests, and turn findings into shippable patches.
Operate and verify web apps
Browser QA agent
A workflow for agents that navigate products, fill forms, take screenshots, and verify real user flows across web applications.
Alternativen-Shortlist
Vor Installation vergleichen
Similar skills that may fit this task.
Crawl4AI
Open-source LLM-friendly web crawler and scraper
Scrapegraph AI
Python scraper based on AI
Page Agent
Control web interfaces with natural language agents
Scrapling
Adaptive web scraping for agent data collection
Übersicht
一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )
Imported by the skill-only GitHub discovery pipeline because it matches agent skill, automation, RAG, or developer-tool signals. Protocol-server projects are excluded from automated imports.
Plattformkompatibilität
Technische Details
- Version
- 1.0.0
- Lizenz
- MIT
- Letzte Aktualisierung
- 18. Aug. 2026
- Veröffentlicht
- 23. Mai 2026
Frameworks & Tools
Entscheidungsübersicht
Primäre Wahl
14,655 GitHub-Stars
Audit
Installationsprüfung
Installations- und Adoptionsprüfung
- Sicherheit
- 89/100
- Wartung
- 38/100
- Installieren
- 92/100
Von Agent belegte Evidenz
Von Agent belegte Evidenz
Ergebnisberichte nach Resolve, Prüfung, Installation und einem begrenzten Lauf.
- Erfolgsrate
- —
- Letzter Fehler
- —
- Ergebnisse
- 0
- Ausgabequalität
- —
- Fehlgeschlagen
- 0
- Nicht relevant
- 0
- Installationen
- 0
- Durch Risiko blockiert
- 0
- Einrichtung erforderlich
- 0
- Produktion
- 0
Noch keine Agent-Ergebnisdaten. Der erste Lauf kann Erfolg, Einrichtungsbedarf, Risikoblockaden, Fehler oder Irrelevanz über /api/agent/outcome melden.
Installieren
Zum Agent-Workflow hinzufügen
Kostenlos und Open Source. Bericht vor der Installation in Produktions-Agents prüfen.
Wachstums-Loop
Share-Kit
Szenariobasierter Entwurf für Examples Of Web Crawlers, bereit für einen manuellen X-Post.
Examples Of Web Crawlers: 一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python cra... 14.7K stars https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers?ref=x
Optionale Antwort mit Installationsbefehl
Listing + install path for Examples Of Web Crawlers: https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers?ref=x Install: npx skills add shengqiangzhang/examples-of-web-crawlers
Quelle des Eintrags
Community-indexiert
Dieser Eintrag wurde aus öffentlichen Quellen indexiert und ist erst nach Genehmigung eines Maintainer-Anspruchs offiziell.
- Ersteller
- shengqiangzhang
- Indexiert von
- OpenAgentSkill Community-Index
Die Zuordnung verlinkt auf das öffentliche Repository oder Creator-Profil. Creator können den Eintrag beanspruchen, um Eigentümersignale zu aktualisieren.
Diesen Skill beanspruchenEigentümeranspruch
Diesen Skill-Eintrag beanspruchen
Dieser Community-indexiert-Eintrag wird shengqiangzhang zugeschrieben, ist aber noch nicht offiziell markiert. Beanspruche ihn, um ein verifiziertes Eigentümersignal hinzuzufügen und künftige Launch-, Installations- und Audit-Updates vertrauenswürdiger zu machen.
Creator-Backlink-Kit
Evidenz-Badges in deine README einfügen
Zeige den kanonischen Eintrag, aktuelle Vertrauens- und Audit-Signale sowie echte Agent-Proven-Evidenz dort, wo Entwickler das Repository bewerten.
[](https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers)
[](https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers)
[](https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers/audit)
[](https://www.openagentskill.com/skills/shengqiangzhang-examples-of-web-crawlers)Autor
shengqiangzhang✓
@shengqiangzhang
Plattform-Fit
Gesundheitssignale
- GitHub-Stars
- 14.7K
- Qualitätswert
- 57/100
- Letzter GitHub-Push
- 28. Juni 2025
- Framework-Hinweise
- 2
- OpenAgentSkill-Aufrufe
- 8
- Installationskopien
- 0
- Externe Klicks
- 0
Community-Signal
Teile mit, ob dieser Skill für deinen Agent-Workflow nützlich ist. Zusammengefasstes Feedback verbessert das Ranking im Laufe der Zeit.
Vertrauen & Sicherheit
Vor Installation prüfen
- GitHub-Akzeptanz15K GitHub-StarsBestanden
- Star-/Fork-Aktivität15K Stars und 3.8K Forks; Issue-Aktivität ist in den aktuellen Metadaten nicht verfügbarBestanden
- Aktuelle Wartung1 Jahre seit dem letzten PushBeheben
- LizenzklarheitMITBestanden
- README/SKILL.md-VollständigkeitMetadaten enthalten ausreichend Nutzungs- und Workflow-KontextBestanden
- Abhängigkeits-/Laufzeitrisikonetwork or browser surfaceBestanden