Informazioni su WebReaderAPI

Quale problema risolve WebReaderAPI?

I modelli linguistici leggono testo, ma le pagine web sono per lo più qualcos'altro: navigazione, script, avvisi sui cookie, pubblicità, widget di articoli correlati e footer. Dare HTML grezzo a un modello spreca la sua context window e seppellisce i fatti.

WebReaderAPI recupera la pagina, individua il contenuto principale e lo restituisce come Markdown, mantenendo al loro posto titoli, elenchi, tabelle e link. Ottieni anche titolo, autore, data di pubblicazione, lingua e conteggio delle parole quando la pagina li indica. Una sola chiamata sostituisce un passo di fetch, un passo di browser e un passo di pulizia nel tuo codice.

Come funziona una richiesta, passo dopo passo?

1. Il tuo codice invia un URL a https://webreaderapi.com/api/v1/read con la tua chiave API.
2. Controlliamo il robots.txt del sito per il nostro token e per tutti i robot, e cerchiamo un segnale ai-input=no.
3. Se la pagina è consentita, il nostro bot la recupera con lo user agent WebReaderAPI/1.0 (+https://webreaderapi.com/bot/).
4. Quando l'HTML grezzo contiene troppo poco testo, un browser headless renderizza prima la pagina (render=auto).
5. Estraiamo il contenuto principale, lo convertiamo in Markdown e lo restituiamo con i suoi metadati.

1 credito = 1 pagina letta senza browser; 2 crediti quando la pagina richiede un browser per eseguire JavaScript. Una richiesta che fallisce, o che il robots.txt di un sito rifiuta, non viene addebitata. L'endpoint di lettura documenta ogni parametro.

Cosa non farà mai WebReaderAPI?

Alcuni limiti fanno parte del prodotto, non sono impostazioni:

• Non legge mai una pagina che un sito ha rifiutato. Rispettiamo robots.txt: il nostro crawler si identifica come WebReaderAPI, segue le regole scritte per lui o per tutti i robot e non legge una pagina che un sito vieta. Le pagine rifiutate non vengono addebitate.
• Non aggira mai un rifiuto. Se un sito rifiuta la nostra richiesta, restituiamo la sua risposta: non risolviamo mai CAPTCHA, non accediamo agli account e non tentiamo di aggirare un blocco o un paywall.
• Non legge mai dietro un login o un paywall, nemmeno con credenziali che fornisci tu.
• Non conserva mai le tue pagine. Il testo torna a te e i nostri log contengono solo il nome host.

Queste regole ci costano alcune pagine che tecnicamente potremmo recuperare. Accettiamo questo compromesso, perché proprietari dei siti, clienti e assistenti AI hanno tutti bisogno di fidarsi dello strumento.

Chi sono i clienti?

Per lo più sviluppatori che danno agli agenti AI un modo affidabile di leggere il web, e team che caricano documentazione, centri assistenza o blog in sistemi di retrieval. I ricercatori la usano per raccogliere articoli pubblici in forma pulita, e alcuni tool la usano per creare viste di lettura o riassunti.

L'Acceptable Use Policy elenca ciò che non è consentito, come raccogliere dati personali su persone private. Una persona esamina ogni segnalazione e gli account che violano le regole vengono sospesi.

Perché criptovalute e nessun KYC?

Perché molti dei nostri clienti sono sviluppatori individuali, piccoli team e progetti autonomi che preferiscono non condividere documenti d'identità o dati della carta con ogni API che provano. Accesso con numero di account; email facoltativa. Ricarichi da 25 USD in BTC, USDT, USDC, ETH, SOL, LTC, poi acquisti crediti dal tuo saldo.

Nessun KYC non significa nessuna regola. L'acceptable use policy vale per ogni account, robots.txt vale per ogni richiesta e agiamo sulle segnalazioni di abuso documentate.

Cosa non dichiariamo?

Oggi non pubblichiamo dati su tempi di risposta, uptime o tasso di successo. Il successo dipende dai siti che leggi, e un dato onesto richiede un campione pubblico misurato, con un metodo e una data. Quando ne avremo uno, comparirà sulla status page.

Non dichiariamo nemmeno di leggere ogni pagina del web. I siti che rifiutano i robot, richiedono un login o bloccano le richieste automatizzate restano fuori portata per scelta.

Come posso contattare una persona?

Scrivi a [email protected] per domande sull'API, sulla fatturazione o sul tuo account; risponde una persona, tutti i giorni della settimana. I proprietari dei siti e chiunque segnali abusi possono scrivere a [email protected]; la pagina del bot spiega come bloccare o rallentare il nostro crawler.

Nessuno del nostro team ti chiederà mai il tuo numero di conto o una chiave API.