ワークフローガイド
「Web データパイプライン」向けの、レビュー可能な Agent ワークフローです。
「Web データパイプライン」向けの、レビュー可能な Agent ワークフローです。
期待する結果
ワークフローマップ
要求を明確でレビュー可能な Agent タスクにします。
広いカテゴリではなく現在の段階に合う能力を選びます。
ソース、権限、範囲を確認してから最小限の有効な作業を実行します。
次の段階に進む前に根拠と結果を確認します。
推奨能力
このワークフローへの適合性、品質、GitHub の採用、保守の新しさで順位付けしています。単一のインストール命令ではなく判断ガイドです。
リポジトリ説明（原文）
Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Puppeteer, Playwright, Cheerio, JSDOM, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawleeリポジトリ説明（原文）
The API to search, scrape, and interact with the web at scale. 🔥
$ npx skills add firecrawl/firecrawlリポジトリ説明（原文）
Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawlee-python$ npx skills add ScrapeGraphAI/Scrapegraph-aiリポジトリ説明（原文）
🔥 The open-source no-code platform for web scraping, crawling, search and AI data extraction • Turn websites into structured APIs in minutes 🔥
$ npx skills add getmaxun/maxunリポジトリ説明（原文）
Open-source LLM-friendly web crawler and scraper
$ npx skills add unclecode/crawl4aiリポジトリ説明（原文）
👾 Fast and simple video download library and CLI tool written in Go
$ npx skills add iawia002/luxリポジトリ説明（原文）
Elegant Scraper and Crawler Framework for Golang
$ npx skills add gocolly/colly適した用途
適さない場合
実行可能な Pack が必要ですか？
Skill Pack にはインストール順、監査リンク、機械可読な Agent 計画が含まれます。