cloudflare a passé des années à lutter contre les scrapers et à vendre des protections anti-bot maintenant ils ont lancé une API /crawl qui peut scraper un site entier avec une seule requête >envoyer un seul appel API >cloudflare rend la page pour vous >retourne le contenu au format HTML, Markdown ou JSON >extrait automatiquement les liens et les éléments de la page >pas d'automatisation de navigateur, pas de scripts de scraping La même entreprise qui a construit la moitié de l'infrastructure anti-scraping d'internet vient de rendre le scraping plus facile Les entreprises d'IA vont adorer ça