Google「URLパラメータツールはRobots.txtの代わりにはなりません」
Google:URLパラメータツールはRobots.txtの代わりにはなりません
【Google翻訳】
Google:URLパラメータツールはRobots.txtの代わりにはなりませんGoogleのJohn MuellerはTwitterで、URLパラメータツールを使用することは、コンテンツのブロックにrobots.txtファイルを使用することに代わるものではないと述べた。 ジョンは、特定のタイプのURLパターンの「URLをクロールしない」を設定するときに「どの程度信頼できるか」と尋ねられました。 Johnは、「robots.txtの代わりにはなりません。何かがクロールされていないことを確認する必要がある場合は、適切にブロックしてください。」
これらのツイートのセットは次のとおりです。
■Google JohnMueller(ジョン・ミューラー)氏(@JohnMu)
@JohnMuさん、ちょっと質問してください。GoogleはGSCの古い「URLパラメータ」ツールにまだ注意を払っていますか?#seo #question
↓
YesYes
— 🍌 John 🍌 (@JohnMu) May 29, 2020
早速のご返事ありがとうございます。
信頼性はどのくらいですか? たとえば、特定のタイプの「URLをクロールしない」ように設定されているが、ログに、それらが非常に定期的にクロールされていることが示されている場合はどうでしょうか。robots.txtの代わりにはなりません。何かがクロールされていないことを確認する必要がある場合は、適切にブロックしてください。
It's not a replacement for the robots.txt — if you need to be sure that something's not crawled, then block it properly.
— 🍌 John 🍌 (@JohnMu) May 29, 2020
昨年ジョンは、パラメーターを含むURLのインデックス作成をブロックするためにrobots.txtを使用しないと述べたことに注意してください。 そのことも覚えておいてください。