Guide de workflow
Un workflow d’agent vérifiable pour Pipeline de données web.
Un workflow d’agent vérifiable pour Pipeline de données web.
Résultat attendu
Carte du workflow
Transformez le résultat demandé en tâche d’agent claire et vérifiable.
Sélectionnez les capacités de l’étape actuelle plutôt qu’une catégorie générale.
Réalisez la plus petite étape utile après vérification des sources, permissions et périmètre.
Examinez les preuves et le résultat avant l’étape suivante.
Capacités suggérées
Classées selon la pertinence du workflow, la qualité, l’adoption GitHub et la fraîcheur de maintenance. C’est un guide de décision, pas une commande unique.
Description du dépôt (original)
Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Puppeteer, Playwright, Cheerio, JSDOM, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawleeDescription du dépôt (original)
The API to search, scrape, and interact with the web at scale. 🔥
$ npx skills add firecrawl/firecrawlDescription du dépôt (original)
Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawlee-pythonDescription du dépôt (original)
Python scraper based on AI
$ npx skills add ScrapeGraphAI/Scrapegraph-aiDescription du dépôt (original)
🔥 The open-source no-code platform for web scraping, crawling, search and AI data extraction • Turn websites into structured APIs in minutes 🔥
$ npx skills add getmaxun/maxunDescription du dépôt (original)
Open-source LLM-friendly web crawler and scraper
$ npx skills add unclecode/crawl4aiDescription du dépôt (original)
👾 Fast and simple video download library and CLI tool written in Go
$ npx skills add iawia002/luxDescription du dépôt (original)
Elegant Scraper and Crawler Framework for Golang
$ npx skills add gocolly/collyBon usage
Pas adapté quand
Besoin d’un pack exécutable ?
Les packs incluent ordre d’installation, liens d’audit et plan d’Agent lisible par machine.