BOT
Política de rastreig de Factbot
Què és Factbot, què descarrega, a quin ritme ho fa i com pots contactar amb nosaltres.
Factbot és el rastrejador amb què FactBox llegeix els butlletins
oficials públics per convertir-los en articles clars i multilingües. El
nostre objectiu és donar més difusió a un contingut que avui gairebé
ningú no llegeix: cada article resumeix el document original, cita la
seva font i enllaça al butlletí oficial, de manera que més persones —i
no menys— acabin arribant a la font.
Descarreguem únicament documents que ja són d’accés públic —sumaris i
PDF de butlletins oficials— i mai no republicam el text íntegre: el
resumim, el contextualitzem i remetem sempre a l’original.
Com ens identifiquem
Totes les peticions de Factbot envien aquest User-Agent:
Factbot/1.0 (+https://factbox.net/bot; bot@factbox.net)
Mai no suplantem un navegador. Si veus aquest identificador als teus
registres, el trànsit és nostre i el pots atribuir amb seguretat.
Què descarreguem
- Només butlletins i gasetes oficials d’accés públic.
- Només el document publicat: el sumari, el PDF, l’HTML o el feed que
el mateix lloc ofereix. - No omplim formularis, no iniciem sessió i no accedim a àrees
privades. - Respectem el fitxer
robots.txtde cada lloc, inclosa la directiva
Crawl-delay.
Ritme i bones pràctiques
- Un amfitrió alhora, amb una pausa per defecte d’almenys un segon
entre peticions. Cada font té el seu propi límit, ajustat a la
capacitat del servidor: els organismes grans com el BOE toleren més
trànsit; els butlletins provincials petits, molt menys. - Peticions condicionals (
If-Modified-Since/ETag): els
butlletins són acumulatius, així que allò que ja tenim no es torna a
descarregar. - Reintents amb espera exponencial davant errors
429o503, i
aturada completa d’un amfitrió davant403repetits. - Els llocs municipals petits es visiten fora de les hores punta
(nits i caps de setmana en la seva hora local).
Contacte
Si ets responsable d’un lloc i vols:
- confirmar que un trànsit ve de Factbot,
- demanar-nos que reduïm encara més el ritme o que excloguem una ruta,
- o simplement avisar-nos d’un canvi d’estructura,
escriu-nos a bot@factbox.net. Si alguna
cosa es trenca, preferim assabentar-nos-en per un correu abans que per
un bloqueig.
Les dades de contacte tècniques també són a
.well-known/security.txt i les fonts que cobrim a
/sources.