Q1:AIの普及によってスクレイピングが手軽になった今、Webアクセスを「交通(速度)」のアナロジーで捉え直すとどのような世界になりますか?
A1: すべてのWebサイトが「秒間Xリクエスト(req/s)以上は課金」といった速度制限、つまり「Pay-per-Crawl」の料金所を設定している世界です。
この仕組みの優れた点は、「人間かAIか」を峻別する必要がないことです。人間による通常のブラウザ閲覧はトラフィック量として「誤差(制限速度内)」であるため実質無料です。課金対象になるのは、速度制限を超えるようなAIクローラーの「強いアクセス」のみとなります。
Q2:すべてのサイトがPay-per-Crawlを設定した場合、その「通行料」は誰が支払うことになりますか?