Cloudflareは何年もスクレイパーと戦い、アンチボット保護を販売してきました そして今、1回のリクエストでウェブサイト全体をスクレイピングできる/crawl APIをリリースしました >単一のAPIコールを送信 >cloudflareがページをレンダリングしてくれます >コンテンツをHTML、Markdown、またはJSONとして返します >リンクやページ要素を自動的に抽出します >ブラウザの自動化もスクレイピングスクリプトもなし インターネットのアンチスクレイピングインフラの半分を築いた同じ会社が、スクレイピングを簡単にしただけです AI企業はこれを気に入るでしょう