# Crawl4AI oder eine gehostete API? Wann Sie Ihren eigenen Web Reader betreiben sollten

> Crawl4AI oder gehostete API für Webseiten in Markdown? Lizenzen, robots.txt-Standardwerte, Self-Hosting-Kosten und Preise, geprüft am 22.10.2026.

- URL: https://webreaderapi.com/de/compare/crawl4ai-vs-api/
- Zuletzt aktualisiert: 2026-10-22
- Herausgeber: WebReaderAPI (https://webreaderapi.com)

Open-Source-Tools können Webseiten kostenlos auf Ihren eigenen Servern in Markdown umwandeln. Gehostete APIs berechnen pro Seite und betreiben die Server für Sie. Diese Seite legt dar, was jede Wahl wirklich kostet, von Lizenzen und robots.txt-Standardwerten bis zu Browsern und Wartung.

**Kurze Antwort — Sollte ich Crawl4AI selbst hosten oder eine gehostete Web-Reader-API nutzen?**

Hosten Sie Crawl4AI selbst (Apache-2.0, mit Attributionspflicht), wenn Sie stetiges Volumen und Leute haben, die Browser und Server betreiben; beachten Sie, dass die robots.txt-Prüfung standardmäßig aus ist. Nutzen Sie eine gehostete API, wenn das Volumen schwankt oder Sie keinen Betriebsaufwand wollen: Crawl4AI Cloud beginnt bei $10 für 10.000 Credits und **WebReaderAPI** bei 3,75 $ für 10.000 Seiten, mit Krypto bezahlt, ohne KYC (22. Oktober 2026).

## Welche Open-Source-Tools wandeln Webseiten in Markdown um?

Die wichtigsten Optionen im Oktober 2026, mit der Lizenz und den Standardwerten, die ihre eigenen Repositories und Docs angeben.

| Tool | Lizenz | Rendert JavaScript | robots.txt standardmäßig | MCP-Server |
| --- | --- | --- | --- | --- |
| Crawl4AI | Apache-2.0, plus Attributionspflicht in der README | Ja (Playwright) | Aus: `check_robots_txt` ist standardmäßig False | Ja, auf Ihrem eigenen Server |
| Firecrawl (self-hosted) | AGPL-3.0-Kern; SDKs und einige UI-Teile unter MIT | Ja (Playwright-Service) | An | Ja (firecrawl-mcp-server, MIT) |
| Microsoft MarkItDown | MIT | Nein | Nicht dokumentiert | Ja (markitdown-mcp) |
| Trafilatura | Apache-2.0 (GPLv3+ vor v1.8.0) | Nein | Sein Spider folgt dem Robots Exclusion Standard | Keine genannt |
| Mozilla Readability | Apache-2.0 | Nein; benötigt ein DOM und ruft nichts ab | Nicht zutreffend | Keine gefunden |
| Jina Reader (Open-Source-Zweig) | Apache-2.0 | Ja (Puppeteer) | Nicht erwähnt | Nicht im Repository |

*Preise geprüft am 22. Oktober 2026.*

Aus den unten aufgeführten GitHub-Repositories und der Dokumentation, gelesen am 2026-10-22.

## Was kostet das Self-Hosting eines Web-Readers wirklich?

Die Software ist kostenlos; der Betrieb ist es nicht. Bevor Sie einen Hosting-Preis mit null vergleichen, rechnen Sie diese Punkte mit:

- **Server und Browser.** Statische Seiten brauchen wenig CPU, aber JavaScript-Seiten brauchen einen Headless-Browser pro Anfrage, mit entsprechendem Arbeitsspeicher. Lastspitzen brauchen Reservekapazität, die den Rest der Zeit ungenutzt bleibt.
- **Wartung.** Browser-Versionen, Extraktionsregeln und Abhängigkeiten ändern sich. Crawl4AI hat am 14. Oktober 2026 v0.9.5 veröffentlicht, MarkItDown 0.1.9 am 21. Oktober 2026. Jemand muss jedes Update testen und ausrollen.
- **Netzwerk.** Ausgehende Bandbreite, DNS, Timeouts und Retries liegen bei Ihnen. Seiten können Traffic von den Adressen Ihrer Server ablehnen, und die richtige Antwort ist dann, die Ablehnung zu respektieren.
- **Richtlinien.** Crawl4AI lässt `check_robots_txt` aus, sofern Sie es nicht einschalten, und erlaubt Ihnen, den User-Agent festzulegen oder zu randomisieren. Ihre eigenen robots.txt- und Identifikationsregeln festzulegen und durchzusetzen, gehört zur Aufgabe.
- **Sicherheit.** Die README von MarkItDown warnt, dass es I/O mit den Rechten des aktuellen Prozesses ausführt und dass Eingaben in nicht vertrauenswürdigen Umgebungen bereinigt werden sollten. Ein Dienst, der beliebige URLs abruft, muss außerdem private und lokale Adressen ablehnen.

## Was verlangen gehostete Reader im Vergleich?

Gehostete APIs verwandeln diese Kosten in einen Preis pro Seite. Zwei Beispiele vom 22. Oktober 2026:

| | Crawl4AI Cloud | WebReaderAPI (unser Angebot) |
|---|---|---|
| Einstieg | Starter $10 pro Monat, 10.000 Credits | 3,75 $ für 10.000 Seiten |
| Statische Seite | 0,5 Credits | 1 Credit |
| Seite mit Browser | 1 Credit ("real browser") | 2 Credits |
| Größere Tarife | Builder $99 für 125.000 Credits; Scale $499 für 750.000 | 74,25 $ für 1.000.000 Seiten; 350 $ für 5.000.000 Seiten |
| Ungenutzte Credits | Monatliche Credits verfallen; zusätzliche Credits verfallen nie | Verfallen nie |
| Zahlung | Karte über Stripe | BTC, USDT, USDC, ETH, SOL, LTC |
| robots.txt | Kunden müssen die robots-Direktiven der Seiten beachten (AGB) | Wird vom Dienst bei jedem Abruf geprüft |

Crawl4AI Cloud wird von den Crawl4AI-Maintainern betrieben und kennzeichnet seine Preise als "soft launch", die sich ändern können. Ein Credit ist $0,001 wert, eine statische Seite kostet im Starter-Tarif also $0,50 pro 1.000.

## Wann sollte ich selbst hosten?

Self-Hosting lohnt sich, wenn drei Dinge zutreffen: Ihr Volumen ist hoch und gleichmäßig, Sie betreiben bereits Server und Browser, und Sie brauchen Kontrolle, die eine API nicht bieten kann.

- **Individuelle Extraktion.** Die CSS-, XPath- und LLM-Schemas von Crawl4AI oder Ihre eigenen Regeln zusätzlich zu Readability oder Trafilatura.
- **Datenresidenz.** Seiten verlassen Ihre Infrastruktur nie.
- **Eingaben jenseits von Webseiten.** MarkItDown konvertiert Word, Excel, PowerPoint, EPub und mehr, was eine Web-Reader-API nicht tut.
- **Lizenz-Passung.** Apache-2.0- und MIT-Tools erlauben geschlossene Produkte; der AGPL-3.0-Kern von Firecrawl verlangt von Ihnen, Änderungen zu veröffentlichen, wenn Sie ihn als Netzwerkdienst anbieten.

## Wann ist eine gehostete API die bessere Wahl?

Kaufen Sie Seiten, statt Server zu betreiben, wenn Ihre Auslastung ungleichmäßig ist, Ihr Team klein ist oder der Reader ein Werkzeug in einem Agenten ist und kein eigenes Produkt.

- **Sprunghaftes oder saisonales Volumen.** Ein zweimal jährlicher Crawl rechtfertigt keine Browser-Flotte. Mit WebReaderAPI, Prepaid-Credits verfallen nie: Ungenutzte Seiten bleiben auf Ihrem Konto, bis Sie sie verwenden.
- **Agenten.** Ein gehosteter Endpoint lässt sich in Minuten an MCP, LangChain oder OpenAI-Tools anbinden; siehe [unseren MCP-Server](https://webreaderapi.com/de/docs/mcp/).
- **Eine Richtlinie, die Sie nicht selbst bauen müssen.** Wir respektieren robots.txt: Unser Crawler identifiziert sich als WebReaderAPI, befolgt die Regeln, die für ihn oder für alle Roboter geschrieben sind, und liest keine Seite, die eine Website nicht erlaubt. Verweigerte Seiten werden nicht abgerechnet. Wenn eine Website in ihrer robots.txt Content-Signal: ai-input=no deklariert, lesen wir ihre Seiten nicht für Sie.
- **Zahlung ohne Karte.** WebReaderAPI akzeptiert BTC, USDT, USDC, ETH, SOL, LTC ohne KYC.

## Kann ich beides kombinieren?

Ja, und viele Teams tun das. Betreiben Sie einen Open-Source-Konverter für Dateien, die Sie bereits haben, etwa PDFs und Office-Dokumente mit MarkItDown, und rufen Sie einen gehosteten Reader für Live-Webseiten auf, besonders für JavaScript-Seiten, die sonst Ihre eigenen Browser bräuchten.

Halten Sie das Ausgabeformat auf beiden Seiten gleich, Markdown mit Quell-URL und Titel, damit Ihr Chunking- und Indexierungscode sich nicht darum kümmern muss, woher ein Dokument stammt. Unser [RAG-Leitfaden](https://webreaderapi.com/de/use-cases/rag/) zeigt dieses Format in der Praxis.

## Was kostet ein gehosteter Reader mit WebReaderAPI?

Credits pro Seite, mit Krypto bezahlt, Stand 22. Oktober 2026: 1 Credit pro statischer Seite, 2 mit Browser, nichts für fehlgeschlagene oder abgelehnte Seiten. Credits verfallen nie.

| Plan | Menge | Preis | Preis pro Einheit |
| --- | --- | --- | --- |
| Test | 10.000 Seiten | 3,75 $ | 0,38 $/1K Seiten |
| Aufbauen | 100.000 Seiten | 21,75 $ | 0,22 $/1K Seiten |
| Volumen | 1.000.000 Seiten | 74,25 $ | 0,07 $/1K Seiten |
| Massenverarbeitung | 5.000.000 Seiten | 350 $ | 0,07 $/1K Seiten |

In jedem Plan: Hauptinhalt extrahieren · JavaScript-Rendering bei Bedarf · Fehlgeschlagene und abgelehnte Seiten werden nicht berechnet · Credits verfallen nie

**Bevor Sie bezahlen**

- Mindestaufladung 25 $. Laden Sie einmal mit Krypto auf und kaufen Sie dann jeden beliebigen Plan aus Ihrem Guthaben.
- Ihr Guthaben hat kein Ablaufdatum und Sie können jederzeit Seiten-Credits kaufen. Kostet ein Pack weniger als die Mindesteinzahlung, kann der Betrag, den Sie nur zum Erreichen dieses Minimums eingezahlt haben, auf Anfrage innerhalb von 30 Tagen nach der Zahlung in USDT oder USDC zurückgesendet werden, sofern Sie ihn nicht verbraucht haben. Jegliches andere Guthaben wird nicht erstattet, es sei denn, das Gesetz schreibt es vor.
- Gutschrift, sobald Ihre Zahlung auf der Blockchain geprüft ist. Typische Bestätigungszeit des Netzwerks: BTC ≈ 20 Min. · USDT TRC-20 ≈ 1 Min. · USDT ERC-20 ≈ 5 Min. · USDC ERC-20 ≈ 5 Min. · ETH ≈ 5 Min. · SOL ≈ 1 Min. · LTC ≈ 15 Min.

## Self-Hosting eines Web-Readers: häufige Fragen

### Ist Crawl4AI für die kommerzielle Nutzung kostenlos?

Die README gibt an, dass es unter Apache-2.0 lizenziert ist, was kommerzielle Nutzung erlaubt, und ergänzt, dass Nutzer eine Quellenangabe anbringen müssen, entweder ein Badge oder eine Textzeile. Lesen Sie Lizenz und README selbst, bevor Sie es ausliefern.

### Respektiert Crawl4AI robots.txt?

Nur wenn Sie es verlangen. Sein Parameter `check_robots_txt` ist standardmäßig False; setzen Sie ihn auf True, um robots.txt-Regeln vor dem Crawling zu prüfen und zu cachen. Sie können auch den User-Agent festlegen oder randomisieren, sodass Ihre eigene Richtlinie das Verhalten bestimmt.

### Kann ich Firecrawl statt Crawl4AI selbst hosten?

Ja. Der Kern von Firecrawl ist Open Source unter AGPL-3.0 und respektiert robots.txt standardmäßig. Die AGPL verlangt von Ihnen, Änderungen zu veröffentlichen, wenn Sie die Software als Netzwerkdienst anbieten, was für kommerzielle Produkte relevant ist.

### Welches Tool konvertiert PDFs und Office-Dateien?

Microsoft MarkItDown konvertiert unter der MIT-Lizenz PDF, Word, PowerPoint, Excel, HTML, EPub und mehr in Markdown. JavaScript-Seiten rendert es nicht. WebReaderAPI liest PDFs von einer URL, bis zu 100 Seiten.

### Wie viel kostet Crawl4AI Cloud?

Am 22. Oktober 2026: Starter 10 $ pro Monat für 10.000 Credits, Builder 99 $ für 125.000 und Scale 499 $ für 750.000, wobei eine statische Seite 0,5 Credit und eine Browser-Seite 1 kostet. Die Website kennzeichnet diese Preise als Soft Launch, die sich ändern können.

## Quellen

1. [unclecode/crawl4ai repository](https://github.com/unclecode/crawl4ai) — GitHub (read 2026-10-22)
2. [Crawl4AI parameter](https://docs.crawl4ai.com/api/parameters/) — Crawl4AI docs (read 2026-10-22)
3. [Crawl4AI self-hosting](https://docs.crawl4ai.com/core/self-hosting/) — Crawl4AI docs (read 2026-10-22)
4. [crawl4ai auf PyPI](https://pypi.org/project/crawl4ai/) — PyPI (read 2026-10-22)
5. [Crawl4AI Cloud](https://crawl4ai.com/) — Crawl4AI (read 2026-10-22)
6. [microsoft/markitdown repository](https://github.com/microsoft/markitdown) — GitHub (read 2026-10-22)
7. [markitdown auf PyPI](https://pypi.org/project/markitdown/) — PyPI (read 2026-10-22)
8. [adbar/trafilatura repository](https://github.com/adbar/trafilatura) — GitHub (read 2026-10-22)
9. [mozilla/readability repository](https://github.com/mozilla/readability) — GitHub (read 2026-10-22)
10. [firecrawl/firecrawl repository](https://github.com/firecrawl/firecrawl) — GitHub (read 2026-10-22)
11. [jina-ai/reader-Repository](https://github.com/jina-ai/reader) — GitHub (read 2026-10-22)

---

WebReaderAPI: WebReaderAPI ist eine Web-Reader-API für KI-Agenten, die jede öffentliche Webseite in sauberes Markdown umwandelt und die Sie mit Krypto bezahlen – ohne ID-Upload. Prepaid-Credits ab 0,07 $/1K Seiten verfallen nie, und robots.txt wird respektiert. Ohne KYC – keine ID, kein Selfie, keine Dokumente. Mit Krypto bezahlen.