cra

面向AI的网页数据API——将整个网站转换为LLM就绪的Markdown或结构化数据🔥

使用PyTorch从零开始逐步实现类ChatGPT大型语言模型

🕷️ 一个自适应网络爬虫框架，能够处理从单个请求到大规模爬取的所有任务！

为您的AI代理赋予观察整个互联网的能力。读取并搜索Twitter、Reddit、YouTube、GitHub、Bilibili、小红书——一个命令行工具，零API费用。

Scrapy：Python 快速高级网页爬取与抓取框架

创建可监控并代您执行的智能体。您的智能体随时待命！

易采集：一个可视化无代码/免编程的网络爬虫工具，支持通过图形化界面设计和执行采集任务。别名：ServiceWrapper面向Web应用的智能化服务封装系统。

学习它。构建它。为他人交付它。

舒适地监控您的网络流量 🕵️‍♂️

🕵️‍♂️ 通过用户名从数千个网站收集个人档案

👾 使用 Go 语言编写的快速简洁视频下载库与命令行工具

使用AI编程代理，通过一条命令克隆任意网站

一款能通过所有机器人检测测试的隐形Chromium浏览器。可直接替代Playwright，并附带源码级指纹补丁。30/30项测试全部通过。

基于人工智能的Python爬虫工具

全球最快最先进的密码恢复工具

Crawlee——一个用于构建可靠爬虫的Node.js网络爬取和浏览器自动化库。支持JavaScript与TypeScript。可为人工智能、大语言模型、检索增强生成或GPT提取数据。从网站下载HTML、PDF、JPG、PNG等文件。兼容Puppeteer、Playwright、Cheerio、JSDOM及原始HTTP请求。支持有头模式与无头模式。提供代理轮换功能。

轻量级 WebAssembly 运行时，快速、安全且符合标准规范

在Minecraft Java版中高精度生成现实世界的任意地点

下一代爬虫和蜘蛛框架。

🔥 开源无代码网页抓取、爬虫、搜索与AI数据提取平台 • 数分钟内将网站转为结构化API 🔥

NotebookLM/Perplexity开源替代方案，支持连接搜索引擎、Slack、Linear、Jira、ClickUp、Confluence、Notion、YouTube、GitHub、Discord等外部资源。加入Discord社区：https://discord.gg/ejRNvftDp9

⬛️ CLI tool and library for saving complete web pages as a single HTML file

提供Java版Minecraft服务器的Docker镜像，启动时自动下载指定版本

John the Ripper jumbo版 - 支持数百种哈希和加密类型的高级离线密码破解工具，可在多种操作系统、CPU、GPU甚至部分FPGA上运行