Site Audit では、 XMLサイトマップ URLと、サイトマップファイル内で見つかったすべてのURLをクロールできます。
新しいクロールプロジェクトにXMLサイトマップを追加するには、以下の手順に従ってください。
新しいクロールプロジェクトを開始する
- Site Auditで新しいクロールプロジェクトを作成します。
- XMLサイトマップファイルが配置されているプライマリドメインを入力し、プロジェクトに名前を付けます(Page Rendering Serviceを使用する場合は、JavaScriptレンダリングを有効にしてください)。
ソース設定
ソース設定でサイトマップオプションを選択します。デフォルトでは、Site Auditは/robots.txt ファイルを使用してXMLサイトマップを検出およびクロールします。
Site AuditにXMLサイトマップを追加する方法
クロールプロジェクトにサイトマップを追加する際、Site Auditがサイトマップ URLを検出するのに役立ついくつかのオプションがあります。
- /robots.txtファイルで参照されているXMLサイトマップ(これはデフォルトで実行されます)。
- XMLサイトマップURLを手動でコピーしてSite Auditに貼り付けます。
- .xmlまたは.txtファイルを手動でSite Auditにアップロードします。
Robots.txtファイルで見つかったXMLサイトマップを検出する
デフォルトでは、Site Auditはサイトマップデータソースを選択すると、/robots.txtファイル内のすべてのXMLサイトマップURLを検出します。
これは、/robots.txtで見つかったすべてのサイトマップURLが、Site Auditがクロールするサイトマップのリストに自動的に取り込まれることを意味します。
例えば、以下の/robots.txtファイルの場合:
User-agent: *
Sitemap: https://www.example.com/sitemap_index.xml
Site Auditはサイトマップインデックスを検出し、そのファイル内に含まれるすべてのXMLサイトマップをクロールします。このサイトマップインデックスに含まれていないサイトマップは、この例ではSite Auditによって検出およびクロールされません。
今後のクロールでSite Auditにrobots.txtファイル内のXMLサイトマップを検出させたくない場合は、ソース設定で選択を解除してください。
robots.txtオプションの選択を解除しても自動的には解除されないため、/robots.txtで見つかったサイトマップの選択を解除することを忘れないでください。
XMLサイトマップURLを手動で追加する
/robots.txtでXMLサイトマップが見つからない場合は、Site Auditに手動で追加できます。
Site Auditにサイトマップを手動で追加するには:
- すべてのXMLサイトマップのリストを作成します。
- すべてのXMLサイトマップURLをコピーし、入力ボックスに貼り付けます。
- 「サイトマップを追加」をクリックします。
新しいサイトマップが手動で追加されると、Site Auditが検出してクロールするXMLサイトマップのリストに追加されます。
リストが生成されると、Site Auditではプロジェクトでクロールされるファイルを選択または選択解除するオプションも提供されます。これは、アップロードされたすべてのサイトマップをクロールしたくない場合に便利です。
サイトマップをアップロードする
Site Auditでは、XMLサイトマップとして使用できる.xmlおよび.txtファイルを手動でアップロードするオプションがあります。
このオプションは、サイトマップを公開する前にテストしたいWeb開発チームやテクニカルSEOチームにとって非常に便利です。
.xmlまたは.txtファイルをアップロードするには:
- .xmlまたは.txtサイトマップに含めたいURLのリストを作成します。
- XMLサイトマップファイルまたは.txtファイルを作成し、検索エンジンにクロールさせたいURLを含めます(サイトマップのベストプラクティスガイドラインに従ってください)。
- サイトマップファイルをSite Auditにアップロードします(ファイルアップロードあたり100MB以内で、Site Auditはgzip圧縮ファイルに対応しています)。
ファイルがアップロードされると、Site Auditはサイトマップファイル名とファイル拡張子をリストに表示します。
Site Auditでは、アップロードされたファイルのこのリストを編集できます。ソース設定から次のことができます。
- ファイルをダウンロードして、内容が正しいことを確認します。
- 間違ったファイルがアップロードされた場合は、ファイルを削除します。
- プロジェクトでクロールされないようにファイルの選択を解除します。
クロール制限と詳細設定を構成する
XMLサイトマップがクロールプロジェクトに追加されたら、保存して続行し、クロール制限と詳細設定を構成します。保存してクロールを開始し、プロジェクトが完了するのを待って、クロールに含まれるXMLサイトマップデータを確認します。
まとめ
サイトマップは新しいプロジェクトに追加でき、複数の異なる方法でアップロードできます。プロジェクトにXMLサイトマップを追加する場合:
- 新しいクロールプロジェクトを開始します。
- プロジェクトのソース設定でサイトマップを選択し、他のデータソースも選択します。
- XMLサイトマップを追加するオプションを選択します(手動、ファイルアップロード、またはrobots.txt経由)。
- ソース設定を保存し、クロール制限と詳細設定を構成します。
コメント
記事コメントは受け付けていません。