OSS ・ ブラウザ自動化・Webデータ取得★ 192,389
firecrawl/firecrawlFirecrawl
カテゴリ ブラウザ自動化・Webデータ取得
Firecrawl:WebページをAIが読みやすいMarkdownや構造化データに変換して返すWebデータAPI
用途
何ができるか
URLを渡すと、ページの本文をMarkdownや指定した形式のJSONに変換して返すツール。サイト全体のクロール、検索、スクリーンショット取得にも対応する。AIエージェントやRAGに「いまのWebの情報」を渡す入口として使われる。提供元のクラウドAPIが主な使い方だが、リポジトリからセルフホストもできる。
向いている用途
- RAGやナレッジベースに取り込むWebページの収集
- AIエージェントに最新のWeb情報を読ませる
- 競合・見込み客などの調査の自動化
実際の使われ方(活用事例)
Credalが、月600万件超のURL取得で本番のAIエージェントを支える
企業向けAIエージェント基盤のCredalが、エージェントが参照するWebデータの取得にFirecrawlを使い、月600万件を超えるURLを処理していると紹介されている。
出典Firecrawl公式ブログ(英語)営業AIの11xが、見込み客リサーチを自動化
AI営業担当を提供する11xが、見込み客の企業サイトの調査にFirecrawlを使用。記事では累計1,100万リクエスト超、17万5,000ドメインを処理したとしている。
出典Firecrawl公式ブログ(英語)※ 事例の数値は、出典元(提供元の導入事例や利用者の記事)による発表・報告です。当サイトでの検証はしていません。
導入の手軽さ
●●●●○ 手軽 — クラウド版はAPIキーを取ればすぐ使える。セルフホストはDocker Composeで起動できるが、一部機能はクラウド版のみ。
pip install firecrawl-py※ 代表的な導入コマンドの例です。最新の手順は公式ドキュメントを確認してください。
ライセンス
GNU AGPL v3.0(SPDX: AGPL-3.0)。改変したものをネットワーク越しのサービスとして提供する場合、ソースコードの公開義務がある。社内利用やクラウドAPIの利用だけなら影響は小さい。
ライセンスの説明は要点のみです。利用前にリポジトリのLICENSEファイル原文を確認してください。
リポジトリ情報
REPOSITORY
github.com/firecrawl/firecrawl
★ 192,389・最終push 2026-10-17(2026-10-18 取得)・掲載 2026-10-17・内容確認 2026-10-17
公式サイト:firecrawl.dev