Google：Robots.txtはどのコンテンツタイプでもかまいません
Google：Robots.txtはどのコンテンツタイプでもかまいません
【Google翻訳】
GoogleのJohn Muellerは、robots.txtのcontent-typeは実際には何でもかまいないと述べています。 彼は「どんなコンテンツタイプでも結構です」と述べ、「重要な部分はコンテンツ自体である」と付け加えました。彼はまた、「有効なhtmlページの中に有効なrobots txt行を含むhtmlページを見た」と述べた。
心配な場合は、Googleのrobots.txtバリデーターでテストしてください。
ああ、ペンギンのランナーがこの質問をしました：
■Google JohnMueller(ジョン・ミューラー)氏(@JohnMu)
@JohnMuさん、実際のSEOの質問です。
robot.txtのコンテンツタイプはtext / htmlではなく、text / plainにすべきだという印象を常に受けていました
しかし、robots.txtチェッカーはこれで問題ないことを返していますか？ 確認できますか？
↓
『Afaikのコンテンツタイプは問題ありません。 重要な部分はコンテンツ自体です。 有効なhtmlページに有効なrobots txt行が含まれているhtmlページを見てきました:)』Afaik any content type is fine. The important part is the content itself. I've seen html pages that included valid robots txt lines among a valid html page 🙂
— 🍌 John 🍌 (@JohnMu) June 1, 2020
