robots txtに関する記事を1件掲載しています
AI学習クローラーへの対応として、現状で考えうる技術的制御(メタタグ・robots.txt・HTTPヘッダー)と法的整備(利用規約)を組み合わせたアプローチを紹介します。