Google「サイトをクロールしないでサイトマップファイルを作成する」
Google：サイトをクロールしないでサイトマップファイルを作成する
【Google翻訳】
Google：サイトをクロールしないでサイトマップファイルを作成するクローラーを使用してXMLサイトマップファイルを作成する理由を理解できませんでした。 CMSのデータベースを読み取るためのアクセス権がない場合はそれを行うと思いますが、非常に効率が悪いようです。 Googleのジョンミューラーは、Redditでもそう語っています。
ジョンミューラーは、「バックエンドで自動化する（ローカルデータベースに基づいてファイルを生成する）。そうすることで、サイトマップファイルに何か変更があったときにすぐにpingを実行できます。最終変更日を正確に把握できます。 Googleはすでにそれを行っています。」
したがって、データベースの表示内容と実行内容に基づいて、XMLサイトマップファイルを再構築してください。 サイトをクロールしてサイトマップファイルを作成しないでください。（1）何かを見逃す可能性があり、（2）サーバーリソースに不必要なストレスを与えるからです。
リソースで効率的かつスマートに。
良いことは、最近のほとんどのCMSプラットフォームがすでにこれを行っていることです。
SEOコンサルタントのまとめ
XMLサイトマップファイルはまだまだ重要です。
サイトマップ関連記事
Google「URLサイトの2番目に重要なXMLサイトマップ」
【Google翻訳】
Google：URLサイトの2番目に重要なXMLサイトマップGoogleのGary Illyesは、GoogleがURLをクロールして発見するために使用する2番目に重要なソースであるXMLサイトマップであることを確認しています。 彼は先日、誰かが彼に2014年にこれを言っていると言った後、Twitterでこれを確認した
ゲイリーは最近のイベントでこう言った。
サイトマップは、Googlebotに最も関連する2番目のディスカバリオプションです
Sitemaps are the second Discovery option most relevant for Googlebot @methode #SOB2019
— Enrique Hidalgo (@EnriqueStinson) 2019年6月15日
それから誰かは、2014年にこれも言ったと言ったが、それは今日もそうであることを確認した：
■Google Gary Illyes(ゲイリー・イリーシュ)氏@methode
まだ本当
Still true
— Gary “鯨理” Illyes (@methode) 2019年8月26日
したがって、クロールが依存するものではない場合は、これらのXMLサイトマップを取得してください。