Firecrawlとは？AIエージェント向けWebデータ基盤を解説

こんにちは、Hodaです！

一言で言うと、FirecrawlはWebページを「AIがそのまま食べられる形」に変換してくれるAPI基盤です。URLを渡すだけでクリーンなMarkdownや構造化JSONが返ってくるので、RAGパイプラインやAIエージェントの「Webから情報を取ってくる」部分を自前で組まずに済みます。開発者向けのツールで、ノーコードでポチポチ使うタイプのサービスではありません。

結論:こんな人におすすめ

• AIエージェントやRAGにWebの最新情報を食わせたい開発者
• ドキュメントサイトやブログなど、比較的守りの緩いページを大量に処理したい人
• 自前でヘッドレスブラウザやプロキシ管理をする手間を省きたい人

逆に、AmazonやLinkedInのような対策の厳しいサイトを狙うなら、後述の理由からFirecrawl単体では厳しめです。

Firecrawlとは

Firecrawlは2022年、Y Combinatorのプログラムを経て立ち上がった開発チームによるサービスです。創業メンバーはCaleb Peffer氏、Eric Ciarla氏、Nicolas Silberstein Camara氏の3名で、以前手がけていた社内ドキュメント向けAIチャット「Mendable」の経験から、「AIにWeb全体へのアクセスを与える」方向に舵を切って生まれたのがFirecrawlです。

2025年8月にはNexus Venture Partners主導でシリーズAとして1,450万ドルを調達し、累計調達額は1,620万ドルとなっています。ShopifyやZapier、Replitなどが利用企業として挙げられており、GitHub上のスター数も15万を超える人気オープンソースプロジェクトです。

主な機能は次の通りです。

• Scrape: 1つのURLをMarkdown・HTML・JSON・スクリーンショットなどの形式で取得
• Crawl: 起点URLからサイト全体を再帰的に巡回して取得
• Map: サイト内のURL一覧を高速に洗い出す
• Search: Web検索を行い、上位結果の中身までまとめて取得
• Extract: 自然言語やスキーマ指定でページから構造化データだけを抜き出す
• Interact / Browser: クリックやスクロール、フォーム入力などページ操作を伴う取得
• Agent(プレビュー): URLを指定せず、自然言語の指示だけでWeb上を自律的に調査させる

コア機能はAGPLライセンスのオープンソースとしても公開されており、自前でホストすることも可能です。ただし後述の通り、クラウド版と比べると使える機能に差があります。

CursorやClaude CodeからはMCP(Model Context Protocol)経由で直接呼び出せる公式MCPサーバーも用意されており、コマンド1本と自分のAPIキーを渡すだけでエディタから検索・スクレイプ・クロールが行えるようになります。この点は以前書いたCursorのMCPサーバーまとめ記事とも重なる部分なので、あわせて読んでみてください。

Firecrawl を使うメリット（Playwright / Puppeteer との比較で）

単に外部サイトをスクレイピングする場合、Playwright や Puppeteer で実際にブラウザを操作すれば同じデータは取得できます。Firecrawl を選ぶ理由は「できる／できない」ではなく、そこにかかる開発・運用コストの差にあります。

ブラウザ運用を持たなくていい

Windows ローカル、GitHub Actions、将来のサーバ、どこでも「URL を渡して HTML（または Markdown）が返る」だけで済みます。Playwright は Chromium のバイナリサイズ、バージョンずれ、CI 上のタイムアウト、ヘッドレス特有の落ち方まで自分で面倒を見ることになります。

ブロックされにくい（可能性）

外部サイトの中にはデータセンター IP や単純な headless ブラウザを弾くものがあります。Firecrawl はプロキシやブラウザフィンガープリントの対策をサービス側で担っています。Playwright でも突破は可能ですが、そこが一番工数のかかる部分です。

サーバーレスと相性がいい

現状の取り込みは CLI / GitHub Actions が中心なので必須ではありませんが、Netlify Functions のような環境で Chromium を丸ごと動かすのは現実的ではありません。API 呼び出し1本で済むならサーバーレスでも扱いやすくなります。

JS レンダリングやリトライ処理を自分で書かなくていい

Playwright は CSS セレクタの特定、動的コンテンツ待ちのロジック、タイムアウト処理まで自前で書く必要があり、コードの半分近くが「要素が見つからなかった時の防御処理」になりがちです。それに対してFirecrawlはスキーマを定義して一行のプロンプトを書くだけで済みます。サイトの複雑さに応じてレンダリング方法を自動で調整してくれる点も、セレクタを都度書き直す運用と比べて手間が違います。

出力が最初から Markdown・構造化データになっている

Firecrawl はページを Markdown や JSON として返すため、生の HTML をパースする工程が要りません。抽出したいデータ構造（スキーマ）を渡せばそのまま構造化データが返ってくるので、LLM に食わせる前処理をほぼ省略できます。

サイト全体のクロールが標準機能として使える

/crawl はサイトマップやリンクをたどって配下ページを自動で発見し、再帰処理やページネーションのロジックを自分で書かずに済みます。JS レンダリングやレート制御も自動で行われます。/map を使えばサイトマップ・検索結果・過去のクロール履歴からリンク一覧だけを高速に取得でき、1万件規模でも1クレジットで済みます。ハブ＆スポーク的にサイト構造を把握してから対象を絞り込みたい場面と相性がいい機能です。

逆に、ログイン操作やクリックの連打など複雑な操作フローが必要な場合、あるいは月間のページ数が非常に多くコストを最優先で抑えたい場合は、Playwright や Puppeteer（あるいは Crawlee のような OSS フレームワーク）で自前運用する方が向いています。

料金プラン

料金は月払い・年払いで変わり、年払いだと割安になります。2026年10月時点の年払い基準の目安は以下の通りです。

クレジットの消費量は機能によって異なり、Scrape・Crawl・Mapは1ページ1クレジットですが、Searchは10件の検索結果ごとに2クレジット、ブラウザ操作を伴うInteractは1分あたり2クレジットというように、使う機能次第で実際の消費ペースは変わります。Extractのように別課金になっている機能もあるため、具体的なコスト計算は別記事で詳しく扱う予定です。

向いている人・向いていない人

向いている人

• Webの情報をAIエージェントやRAGに継続的に取り込みたい開発者
• ドキュメントサイトやブログ、SaaSの料金ページなど、比較的守りの緩い対象を扱う人
• CursorやClaude Codeのようなツールから、コード1本でWeb取得を組み込みたい人

向いていない人

• ノーコードでポチポチ使いたい、コードを書きたくない人
• Amazonや主要SNSなど、対策の厳しいサイトを安定して取得したい人
• 毎月の利用量が読みにくく、コストを厳密に固定したい人

注意点:守りの堅いサイトはやや苦手

Firecrawlはドキュメントサイトやブログのような一般的なページには強い一方、独立系のベンチマーク機関Proxywayが2025年秋に行った調査では、対策の厳しい15サイトを対象にした計測でFirecrawlの成功率は毎秒2リクエストの条件で34%程度、10リクエストではさらに下がるという結果が出ています。同じ調査でトップの事業者は90%台の成功率を記録しており、この分野では他社の専門サービスに軍配が上がる形です。

よくある質問

Firecrawlは無料で使えますか?

はい。2026年7月時点では、無料プランで毎月1,000クレジットが継続的に付与されます(クレジットカード登録不要)。基本的なScrape・Crawl・Mapであれば1ページ1クレジットなので、月1,000ページ程度までは無料で試せます。

FirecrawlとPuppeteerやPlaywrightのようなブラウザ自動化ツールとの違いは何ですか?

PuppeteerやPlaywrightは「ブラウザを自分で操作するためのライブラリ」で、取得したHTMLの整形やクロール管理は自分で実装する必要があります。FirecrawlはそれらをAPIの内側に隠し、最初からAI向けに整形されたMarkdownやJSONを返してくれる点が大きな違いです。

セルフホストでも全機能が使えますか?

いいえ。コアのScrape・Crawl・Mapはセルフホストでも利用できますが、Agent機能やブラウザサンドボックス、クラウド版の対ボット対策(Fire-engine)などはクラウド版限定です。セルフホストは検証用途やシンプルな用途向けと考えた方が無難です。

CursorやClaude CodeでFirecrawlを使うにはどうすればいいですか?

公式のMCPサーバーが提供されているため、CursorやClaude CodeのMCP設定にAPIキーを渡して追加するだけで、エディタ内から検索・スクレイプ・クロールを呼び出せるようになります。

こちらは公式のYoutube動画です。実際にFirecrawlを使って、他のサイトのデザインをコピーして、自サイトにする手順を紹介しています。