Q&A · REV. C
Les questions qu'on nous pose
Quatre réponses par solution, et chacune est celle que le support vous donnerait.
Le scraping est-il vraiment autorisé sur vos serveurs ?
Oui — la politique d'utilisation acceptable l'autorise explicitement quand il est poli : il respecte les conditions de la cible, l'intention de robots.txt, les limites de débit et la loi du pays cible. La liste d'exclusion immédiate est pour le credential stuffing, le scalping et les dénis de service, pas pour lire lentement des pages publiques.
Comment éviter que mon IP soit bloquée ?
La limitation de débit et la variété battent le volume brut. Le /64 routé vous donne environ 1.8×10^19 adresses pour les requêtes à faible risque, les IPv4 supplémentaires couvrent les sites qui se méfient de l'IPv6, et un délai raisonnable entre les requêtes garde silencieux vos cibles comme notre boîte d'abus.
Puis-je faire tourner toute la pile — navigateur, file, base de données — sur un seul serveur ?
Oui, et l'offre Work est dimensionnée exactement pour cela : 16 Go de RAM, c'est la zone de confort d'un pool de navigateurs avec un Postgres ou un Redis à côté. Si la collecte est à l'échelle du lance d'incendie, les 32 Go du Forge ou un second Work réparti par région sont l'architecture plus propre.
Fournissez-vous des proxys ou des IP tournantes comme service ?
Non — nous vendons des serveurs, et chaque serveur apporte ses propres IP. Le bloc /64 en IPv6 et les IPv4 supplémentaires bon marché sont la version honnête de la rotation : de vraies adresses d'un vrai AS avec un vrai service d'abus, ce qui est précisément ce qui les maintient opérationnelles.