由于 trendforge.devlive.top 访问受限,请切换到 trendforge.devlive.org 域名
web-crawler
话题找到数量
apify/crawlee
Crawlee——一个用于构建可靠爬虫的Node.js网络爬取和浏览器自动化库。支持JavaScript与TypeScript。可为人工智能、大语言模型、检索增强生成或GPT提取数据。从网站下载HTML、PDF、JPG、PNG等文件。兼容Puppeteer、Playwright、Cheerio、JSDOM及原始HTTP请求。支持有头模式与无头模式。提供代理轮换功能。
adithya-s-k/omniparse
摄取、解析并优化任意数据格式 ➡️ 从文档到多媒体 ➡️ 以增强与GenAI框架的兼容性
firecrawl/firecrawl-mcp-server
🔥 官方 Firecrawl MCP 服务器 - 为 Cursor、Claude 及其他 LLM 客户端添加强大的网络爬取功能
KnockOutEZ/wigolo
您的AI编程代理首选网页——基于MCP的本地优先搜索、抓取、爬取与研究。无需API密钥,无需云端,零成本查询。公开测试版。