Googleの新しい検索結果表示、クリック前にリンク先を確認しづらく
Googleは、通常の検索結果の一部のリンクを、不透明なgoogle.com/goto?url=…というリダイレクト経由で表示するようになりました。これにより、ユーザーがクリック前に独自にリンク先URLを確認する能力が低下しています。 この変更は、大規模なスクレイピングにかかる技術的・金銭的コストを引き上げることを狙
タグ: スクレイピング対策
Googleの新しいリダイレクト方式で、クリック前のリンク確認が難しくなる
Googleが検索結果内の一部リンクの仕組みを変更しています。 Googleは、リンク先へ直接飛ばす代わりに、一部の検索結果リンクを不透明なgoogle.com/goto?url=...リダイレクト経由でルーティングするようになりました。このurlパラメータは、読み取り可能な形でリンク先を示すのではなく、Goog
ShieldFontはAIスクレイピングにこう対抗する――クローラーには「別の言葉」を渡す
Isaque Seneda氏とGabriel Abrucio氏は、画面上に表示される文章とページのソースコード上に残る文章を別々にするWebフォントを開発しました。ブラウザで読む人には書かれたとおりの文章が見えますが、HTMLを取得するスクレイパーには、同じ文法構造ながら異なる単語が、同じURL・同じ