Rust
LLM用の高速ウェブサイトパーサーを14メガバイトのRAMで動かす方法
わずか14MBのRAMを使用し、LLM用にクリーンなMarkdownを出力する軽量RustベースのWebスクレイピングツール。
言語
ホーム言語
セクション
わずか14MBのRAMを使用し、LLM用にクリーンなMarkdownを出力する軽量RustベースのWebスクレイピングツール。
リアルタイムでbot対策システム、CAPTCHA、21種類のフィンガープリント技術を検出するChrome拡張機能。開発者やセキュリティ研究者が任意のウェブサイトで動作している保護技術を特定をサポートします。
pullmdは、WebページをLLMエージェント向けのクリーンなMarkdownに変換します。広告やナビゲーションのノイズを取り除き、コンテンツ構造を保持しながらトークンを節約します。
DevToolsを手動で解析せずに、WebサイトをそのままAPIクライアントに変える。reverse-api-engineerプロジェクトが全工程を自動化する。
wigoloはコンピュータをAIエージェント向けのローカルWebインテリジェンスハブに変えます。APIキー不要、サブスクリプション不要、サードパーティへのデータ送信不要。何ができるのかをご紹介します。
AnythingLLMは、ドキュメントをチャット可能なスマートナレッジベースに変換します。20以上のLLM、ノーコードエージェント、マルチモーダル処理に対応。