#web-scraping

6 个项目

Rust 2026年8月22日

一款轻量级Rust网页抓取工具，仅占用14MB内存，输出干净的Markdown格式，方便LLM直接使用。

JavaScript 2026年8月16日

一个 Chrome 扩展程序，可实时检测反爬虫系统、CAPTCHA 和 21 种指纹识别技术，帮助开发者和安全研究人员识别任意网站上运行的防护措施。

JavaScript 2026年8月16日

pullmd 将任意网页转换为干净的 Markdown 格式，供 LLM 代理使用。它能去除广告和导航杂项，保留内容结构，同时节省 token 消耗。

Python 2026年8月16日

无需手动解析 DevTools，将任何网站转换为现成的 API 客户端。reverse-api-engineer 项目可自动化整个流程。

TypeScript 2026年7月18日

wigolo 将你的电脑变成 AI 代理的本地网络智能中心。无需 API 密钥、无需订阅、不会向第三方发送数据。以下是它的功能。

JavaScript 2026年6月28日

AnythingLLM 将您的文档转化为可对话的智能知识库。支持 20+ 种 LLM、无代码智能体和多模态处理。

62,215