生成AI検索エンジンのPerplexityはクローラーを防ぐ「robots.txt」を無視してウェブサイトから情報を抜き出している - GIGAZINE gigazine.net/news/2024… 個人サイトやってる人からするとイービルよねこれ…。 #AI