# Crawl4AIかホスト型APIか? 自前のWebページリーダーを動かすべき時

> WebページをMarkdownに変換するなら Crawl4AI かホスト型APIか? ライセンス、robots.txtのデフォルト、セルフホスティングのコスト、2026-10-22に確認したホスト型の価格。

- URL: https://webreaderapi.com/ja/compare/crawl4ai-vs-api/
- 最終更新: 2026-10-22
- 発行者: WebReaderAPI (https://webreaderapi.com)

オープンソースのツールを使えば、自社のサーバー上でWebページを無料でMarkdownに変換できます。ホスト型APIはページ単位で課金し、サーバーを代わりに運用します。このページでは、ライセンスやrobots.txtのデフォルトからブラウザやメンテナンスまで、各選択肢にかかる本当のコストを説明します。

**概要 — Crawl4AIをセルフホスティングすべきか、ホスト型のWebページリーダーAPIを使うべきか?**

安定した量があり、ブラウザとサーバーを運用する人員がいる場合は Crawl4AI(Apache-2.0、帰属表示の要件あり)をセルフホスティングしてください。ただし、robots.txtのチェックはデフォルトで無効である点に注意してください。量が不安定な場合や運用作業を避けたい場合はホスト型APIを使ってください。Crawl4AI Cloudは10,000クレジットで$10から、**WebReaderAPI** は10,000ページで$3.75から、KYC不要で暗号資産で支払い(2026年10月22日)。

## WebページをMarkdownに変換するオープンソースツールはどれですか?

2026年10月時点の主な選択肢を、それぞれのリポジトリとドキュメントが示すライセンスとデフォルトとともに示します。

| ツール | ライセンス | JavaScriptをレンダリング | デフォルトでrobots.txt | MCPサーバー |
| --- | --- | --- | --- | --- |
| Crawl4AI | Apache-2.0、加えてREADMEでの帰属表示要件 | はい(Playwright) | 無効: `check_robots_txt` のデフォルトは False | はい、自社のサーバー上で |
| Firecrawl(セルフホスト) | AGPL-3.0のコア。SDKと一部のUIパーツはMIT | あり（Playwrightサービス） | オン | あり（firecrawl-mcp-server、MIT） |
| Microsoft MarkItDown | MIT | いいえ | ドキュメントに記載なし | あり（markitdown-mcp） |
| Trafilatura | Apache-2.0（v1.8.0より前はGPLv3+） | いいえ | スパイダーはRobots Exclusion Standardに従います | 記載なし |
| Mozilla Readability | Apache-2.0 | なし。DOMが必要で、取得は行いません | 該当なし | 見つかりません |
| Jina Reader（オープンソース版） | Apache-2.0 | あり（Puppeteer） | 記載なし | リポジトリにはありません |

*価格確認日：2026年10月22日.*

以下に挙げるGitHubリポジトリとドキュメントを、2026-10-22に読んだ内容です。

## Webリーダーのセルフホスティングには実際いくらかかるのか？

ソフトウェアは無料ですが、運用は無料ではありません。ホスティングの価格をゼロと比較する前に、次の点を数えてください:

- **サーバーとブラウザ。** 静的ページならCPUはほとんど要りませんが、JavaScriptページはリクエストごとにヘッドレスブラウザが必要で、それに見合うメモリも要ります。ピーク時には、それ以外の時間は遊んでいる余剰キャパシティが必要です。
- **メンテナンス。** ブラウザのバージョン、本文抽出のルール、依存関係は変わります。Crawl4AIは2026年10月14日にv0.9.5を、MarkItDownは2026年10月21日に0.1.9をリリースしました。各アップデートをテストしてデプロイする人が必要です。
- **ネットワーク。** 外向きの帯域幅、DNS、タイムアウト、リトライは自分で調整するものです。サイトがあなたのサーバーのアドレスからのトラフィックを拒否することもあり、その場合の正しい対応は拒否を尊重することです。
- **ポリシー。** Crawl4AIは、あなたがオンにしない限り`check_robots_txt`をオフのままにし、User-Agentを設定またはランダム化できます。独自のrobots.txtと識別ルールを決めて徹底するのも仕事のうちです。
- **セキュリティ。** MarkItDownのREADMEは、現在のプロセスの権限でI/Oを行い、信頼できない環境では入力をサニタイズすべきだと警告しています。任意のURLを取得するサービスは、プライベートアドレスやローカルアドレスも拒否しなければなりません。

## ホスト型リーダーはそれに比べて何を請求するのか？

ホスト型APIは、そうしたコストを1ページあたりの価格に変えます。2026年10月22日時点の2つの例です:

| | Crawl4AI Cloud | WebReaderAPI（当社） |
|---|---|---|
| 入門 | Starter 月額$10、10,000クレジット | 10,000ページで$3.75 |
| 静的ページ | 0.5クレジット | 1クレジット |
| ブラウザを使うページ | 1クレジット（「real browser」） | 2クレジット |
| 上位プラン | Builder $99で125,000クレジット、Scale $499で750,000クレジット | 1,000,000ページで$74.25、5,000,000ページで$350 |
| 未使用クレジット | 月次クレジットは繰り越されず、追加クレジットは失効しない | 失効しない |
| 支払い | Stripe経由のカード | BTC, USDT, USDC, ETH, SOL, LTC |
| robots.txt | 顧客は各サイトのrobots指示を守る必要がある（利用規約） | サービスが毎回の読み取り時に確認 |

Crawl4AI CloudはCrawl4AIのメンテナーが運営しており、価格は変更される可能性のある「ソフトローンチ」と表示しています。クレジットは$0.001相当なので、Starterでは静的ページ1,000ページあたり$0.50かかります。

## セルフホスティングはいつ選ぶべきか？

セルフホスティングは、次の3つが当てはまるときに元が取れます。利用量が多く安定している、すでにサーバーとブラウザを運用している、そしてAPIでは得られない制御が必要な場合です。

- **カスタム抽出。** Crawl4AIのCSS、XPath、LLMスキーマ、またはReadabilityやTrafilaturaの上に載せる独自ルール。
- **データの所在。** ページがあなたのインフラから出ることはありません。
- **Webページ以外の入力。** MarkItDownはWord、Excel、PowerPoint、EPubなどを変換できますが、WebリーダーAPIにはできません。
- **ライセンスの適合。** Apache-2.0とMITのツールはクローズドな製品に使えます。FirecrawlのAGPL-3.0のコアは、ネットワークサービスとして提供する場合に変更を共有することを求めます。

## ホスト型APIがより良い選択になるのはどんなときか？

ワークロードが不均衡、チームが小規模、またはリーダーが製品そのものではなくエージェント内のツールである場合は、サーバーを運用するよりもページを買うほうが適しています。

- **急増する、または季節性のある利用量。** 年に2回のクロールではブラウザ群を正当化できません。WebReaderAPIなら、プリペイドクレジットに有効期限はありません。未使用のページは使うまでアカウントに残ります。
- **エージェント。** ホスト型エンドポイントは数分でMCP、LangChain、OpenAIのツールに組み込めます。[当社のMCPサーバー](https://webreaderapi.com/ja/docs/mcp/)をご覧ください。
- **自分で作らなくてよいポリシー。** 当社はrobots.txtを尊重します。クローラーはWebReaderAPIとして名乗り、自身向けまたはすべてのロボット向けに書かれたルールに従い、サイトが禁止したページは読み取りません。拒否されたページは課金されません。サイトがrobots.txtでContent-Signal: ai-input=noを宣言している場合、そのページをあなたのために読み取ることはありません。
- **カード不要の支払い。** WebReaderAPIはKYC不要でBTC, USDT, USDC, ETH, SOL, LTCを受け付けます。

## 両方を組み合わせることはできるか？

はい、多くのチームがそうしています。すでに手元にあるPDFやOffice文書などはMarkItDownなどのオープンソースのコンバーターで処理し、ライブのWebページ、とくに自前のブラウザが必要になるJavaScriptページにはホスト型リーダーを呼び出します。

出力形式は両側で同じにしてください。ソースURLとタイトル付きのMarkdownにすれば、チャンキングやインデックスのコードは文書の出どころを気にしません。当社の[RAGガイド](https://webreaderapi.com/ja/use-cases/rag/)では、その形式を実際に示しています。

## WebReaderAPIでホスト型リーダーを使うといくらかかるのか？

2026年10月22日時点で、暗号資産で支払うページ単位のクレジット: 静的ページは1クレジット、ブラウザを使う場合は2クレジット、失敗または拒否されたページは無料。クレジットは失効しません。

| プラン | 数量 | 料金 | 単価 |
| --- | --- | --- | --- |
| テスト | 10,000ページ | $3.75 | $0.38/1Kページ |
| 構築 | 100,000ページ | $21.75 | $0.22/1Kページ |
| ボリューム | 1,000,000ページ | $74.25 | $0.07/1Kページ |
| 一括 | 5,000,000ページ | $350 | $0.07/1Kページ |

すべてのプランに含まれるもの: 本文抽出 · 必要な場合はJavaScriptをレンダリング · 失敗・拒否されたページは課金なし · クレジットの有効期限なし

**お支払いの前に**

- 最低チャージ額$25。 暗号資産で一度チャージすれば、残高から任意のプランを購入できます。
- 残高に有効期限はなく、いつでもページクレジットの購入に使えます。パックの価格が最低入金額を下回る場合、その最低額に達するためだけに追加した分は、お支払いから30日以内であればご依頼によりUSDTまたはUSDCで返金します（ただし未使用分に限ります）。それ以外の残高は、法令に別段の定めがある場合を除き返金されません.
- お支払いがブロックチェーン上で確認され次第、残高に反映されます。 ネットワーク承認の目安時間: BTC 約20分 · USDT TRC-20 約1分 · USDT ERC-20 約5分 · USDC ERC-20 約5分 · ETH 約5分 · SOL 約1分 · LTC 約15分

## Webリーダーのセルフホスティング: よくある質問

### Crawl4AIは商用利用が無料か？

READMEにはApache-2.0の下でライセンスされ、商用利用が可能だと書かれ、さらにユーザーはバッジかテキスト行のいずれかでクレジット表記を含める必要があると付け加えています。リリース前にライセンスとREADMEをご自身でお読みください。

### Crawl4AIはrobots.txtを尊重するか？

設定した場合のみです。`check_robots_txt`パラメータのデフォルトはFalseです。Trueに設定すると、クロール前にrobots.txtのルールを確認してキャッシュします。User-Agentも設定またはランダム化できるため、どう振る舞うかはあなた自身のポリシーが決めます。

### Crawl4AIの代わりにFirecrawlをセルフホストできるか？

はい。FirecrawlのコアはAGPL-3.0でオープンソース化されており、デフォルトでrobots.txtを尊重します。AGPLは、ソフトウェアをネットワークサービスとして提供する場合に変更を公開することを求めます。これは商用製品にとって重要です。

### PDFやOfficeファイルを変換するツールはどれですか？

MITライセンスのMicrosoft MarkItDownは、PDF、Word、PowerPoint、Excel、HTML、EPubなどをMarkdownに変換します。JavaScriptで描画されるページには対応していません。WebReaderAPIはURLからPDFを読み取れ、最大100ページまで対応します。

### Crawl4AI Cloudの料金はいくらですか？

2026年10月22日時点：Starterは月額$10で10,000クレジット、Builderは$99で125,000クレジット、Scaleは$499で750,000クレジットです。静的ページは0.5クレジット、ブラウザページは1クレジットです。サイトでは、これらの価格は変更される可能性のあるソフトローンチとされています。

## ソース

1. [unclecode/crawl4aiリポジトリ](https://github.com/unclecode/crawl4ai) — GitHub (read 2026-10-22)
2. [Crawl4AIのパラメータ](https://docs.crawl4ai.com/api/parameters/) — Crawl4AI docs (read 2026-10-22)
3. [Crawl4AIのセルフホスティング](https://docs.crawl4ai.com/core/self-hosting/) — Crawl4AI docs (read 2026-10-22)
4. [PyPIのcrawl4ai](https://pypi.org/project/crawl4ai/) — PyPI (read 2026-10-22)
5. [Crawl4AI Cloud](https://crawl4ai.com/) — Crawl4AI (read 2026-10-22)
6. [microsoft/markitdownリポジトリ](https://github.com/microsoft/markitdown) — GitHub (read 2026-10-22)
7. [PyPIのmarkitdown](https://pypi.org/project/markitdown/) — PyPI (read 2026-10-22)
8. [adbar/trafilaturaリポジトリ](https://github.com/adbar/trafilatura) — GitHub (read 2026-10-22)
9. [mozilla/readabilityリポジトリ](https://github.com/mozilla/readability) — GitHub (read 2026-10-22)
10. [firecrawl/firecrawlリポジトリ](https://github.com/firecrawl/firecrawl) — GitHub (read 2026-10-22)
11. [jina-ai/readerリポジトリ](https://github.com/jina-ai/reader) — GitHub (read 2026-10-22)

---

WebReaderAPI: WebReaderAPIはAIエージェント向けのWebリーダーAPIで、あらゆる公開WebページをクリーンなMarkdownに変換します。暗号資産で支払い、本人確認書類のアップロードは不要です。$0.07/1Kページから購入できるプリペイドクレジットに有効期限はなく、robots.txtを尊重します。KYC不要 — 身分証もセルフィーも書類も不要。暗号資産で支払い。