Panduan alur kerja
Alur kerja agent yang dapat ditinjau untuk Pipeline data web.
Alur kerja agent yang dapat ditinjau untuk Pipeline data web.
Hasil yang diharapkan
Peta alur kerja
Ubah hasil yang diminta menjadi tugas agent yang jelas dan dapat ditinjau.
Pilih kemampuan untuk tahap saat ini, bukan kategori yang terlalu luas.
Lakukan langkah berguna terkecil setelah memeriksa sumber, izin, dan cakupan.
Tinjau bukti dan hasil sebelum melanjutkan ke tahap berikutnya.
Kemampuan yang disarankan
Diurutkan berdasarkan relevansi alur kerja, kualitas, adopsi GitHub, dan kebaruan pemeliharaan. Ini panduan keputusan, bukan satu perintah pemasangan.
Deskripsi repositori (asli)
Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Puppeteer, Playwright, Cheerio, JSDOM, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawleeDeskripsi repositori (asli)
The API to search, scrape, and interact with the web at scale. 🔥
$ npx skills add firecrawl/firecrawlDeskripsi repositori (asli)
Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
$ npx skills add apify/crawlee-pythonDeskripsi repositori (asli)
Python scraper based on AI
$ npx skills add ScrapeGraphAI/Scrapegraph-aiDeskripsi repositori (asli)
🔥 The open-source no-code platform for web scraping, crawling, search and AI data extraction • Turn websites into structured APIs in minutes 🔥
$ npx skills add getmaxun/maxunDeskripsi repositori (asli)
Open-source LLM-friendly web crawler and scraper
$ npx skills add unclecode/crawl4aiDeskripsi repositori (asli)
👾 Fast and simple video download library and CLI tool written in Go
$ npx skills add iawia002/luxDeskripsi repositori (asli)
Elegant Scraper and Crawler Framework for Golang
$ npx skills add gocolly/collyCocok untuk
Bukan jalur yang tepat ketika
Butuh paket yang dapat dijalankan?
Skill Pack mencakup urutan pemasangan, tautan audit, dan rencana Agent yang dapat dibaca mesin.