Skip to content
sakura86.com
戻る

WordPressからAstroへ移行した話(12)Search Consoleのエラー対処(noindex・サイトマップ・robots.txt)

移行してしばらくすると、Search Console にエラーが大量に出るようになりました。

見ていくと、記事そのものではなく、ページ送りや検索のページが引っかかっているものが多そうでした。
なので、それらを検索に出さない(noindex)、サイトマップに載せない、という方向で直しています。

前回は旧 URL のリダイレクトでした。
今回は、そのあとに Search Console のエラーへ対処した作業をまとめます。

出ていたエラー

Search Console のページのインデックス登録に、次のようなステータスが出ていました。

  • ページにリダイレクトがあります
  • 重複(Google が、こちらの指定と違うページを正規と判断)
  • 検出 - インデックス未登録
  • インデックス未登録

このうち、サイトの設定で直せそうだったのは、ページ送りと検索のページがサイトマップに入っていたことです。
@astrojs/sitemap は、何も指定しなければ全ページをサイトマップに入れます。

「ページにリダイレクトがあります」のほうは、旧 URL の /posts/<スラッグ>/ が絡んでいました。
こちらは前回の .htaccessで対応しています。

対処1:noindex を付ける

まず、Layout.astro に noIndex というプロパティを足しました。

type Props = {
  // ...既存のprops...
  noIndex?: boolean;
};

const { /* ... */ noIndex = false } = Astro.props;

<head> の中では、canonical の前にこう出力します。

{noIndex && <meta name="robots" content="noindex, follow" />}

noindex, follow は、「このページは検索結果に出さなくていいけど、中のリンクは辿ってよい」という意味です。

あとは、対象のページから noIndex を渡すだけです。

<!-- src/pages/posts/[...page].astro:記事一覧。2ページ目以降だけ -->
<Layout title={`Posts | ${SITE.title}`} noIndex={page.currentPage > 1}>

<!-- src/pages/tags/[tag]/[...page].astro:タグごとの一覧。2ページ目以降だけ -->
<Layout title={`Tag: ${tagName} | ${SITE.title}`} noIndex={page.currentPage > 1}>

<!-- src/pages/search.astro:検索ページ。常に -->
<Layout title={`Search | ${SITE.title}`} noIndex={true}>

1ページ目(/posts/ や /tags/pc/)には付けていません。
1ページ目は、ちゃんと見てほしいページなので。

対処2:サイトマップから外す

astro.config.ts の @astrojs/sitemap に、フィルターを書きます。

sitemap({
  filter: page => {
    if (page.endsWith("/search") || page.endsWith("/search/")) return false;
    // 記事一覧1ページ目はトップページと同一内容のため除外(Google も正規URLを / と判定する)
    if (page.endsWith("/posts") || page.endsWith("/posts/")) return false;
    if (/\/posts\/\d+\/$/.test(page)) return false;
    if (/\/tags\/[^/]+\/\d+\/$/.test(page)) return false;
    return SITE.showArchives || !page.endsWith("/archives/");
  },
}),

外しているのは、この4つです。

  • 検索ページ(/search/)
  • 記事一覧の1ページ目(/posts/)
  • 記事一覧の2ページ目以降(/posts/2/ など)
  • タグごとの一覧の2ページ目以降(/tags/pc/2/ など)

最初(2026年6月15日)に書いたのは、/posts/ を除く3つです。
/posts/ は、7月31日に足しました。

/posts/ は、トップページと中身が同じです。
それがサイトマップに載っていたせいで、Search Console で重複扱いになっていました。Google も、正規の URL は / だと判断していました(URL 検査 API で確認)。

対処3:robots.txt で検索ページを止める

src/pages/robots.txt.ts に、Disallow を1行足しました。

const getRobotsTxt = (sitemapURL: URL) => `
User-agent: *
Allow: /
Disallow: /search/

Sitemap: ${sitemapURL.href}
`;

検索ページは、巡回してもらっても意味がないので、止めています。

対処4:デプロイの設定も直した

意外だったのが、ここです。
ページ送りのページに noindex を付けても、それがサーバーに届いていない可能性がありました。

第4回で作った GitHub Actions は、デプロイを2つに分けていました。

# 旧:HTML/CSS/JS を差分転送。ただし posts/ 以下は除外
- name: Deploy HTML/CSS/JS via FTP (differential)
  uses: SamKirkland/FTP-Deploy-Action@v4.3.5
  with:
    local-dir: ./dist/
    exclude: |
      **/posts/**

# 旧:画像は、サーバーにまだ無いファイルだけ lftp で転送
- name: Deploy new images via FTP
  run: |
    lftp ... -e "mirror -R --only-missing ./dist/posts/ ${FTP_SERVER_DIR}posts/; quit" ...

この構成だと、/posts/2/index.html のようなページ送りの HTML は、どちらのステップでも更新されません。

  • 1つ目は、posts/ 以下を除外している
  • 2つ目は、サーバーに無いファイルしか送らない(--only-missing)

posts/ を分けていた理由は、画像です。
最初は画像を public/posts/<スラッグ>/ に置いていたので、毎回送り直さないよう別扱いにしていました。

ですが2026年6月11日に、画像のパスを /<スラッグ>/ に統一しています。
dist/posts/ に画像はなくなったので、分ける理由もなくなっていました。

そこで、1本にまとめました。

- name: Deploy via FTP (differential)
  uses: SamKirkland/FTP-Deploy-Action@v4.3.5
  with:
    server: ${{ secrets.FTP_SERVER }}
    username: ${{ secrets.FTP_USERNAME }}
    password: ${{ secrets.FTP_PASSWORD }}
    server-dir: ${{ secrets.FTP_SERVER_DIR }}
    local-dir: ./dist/

exclude がなくなったので、ページ送りの HTML も差分で更新されます。

ビルドして確認

ビルド後の dist/ を見れば、サーバーに上げる前に確認できます。
2026年11月18日にビルドして、確かめた結果です。

# noindex が付いているか
grep -o '<meta name="robots"[^>]*>' dist/search/index.html
# <meta name="robots" content="noindex, follow">
grep -o '<meta name="robots"[^>]*>' dist/posts/2/index.html
# <meta name="robots" content="noindex, follow">
grep -o '<meta name="robots"[^>]*>' dist/tags/acecombat7/2/index.html
# <meta name="robots" content="noindex, follow">

# 1ページ目には付いていない(件数が0)
grep -c 'name="robots"' dist/posts/index.html
# 0
grep -c 'name="robots"' dist/tags/pc/index.html
# 0

サイトマップは、中身が1行のXMLなので、-o で数えるのが楽です。

# /posts/ 系と /search が入っていない
grep -o '<loc>https://sakura86.com/\(posts/\|search\)[^<]*' dist/sitemap-0.xml | wc -l
# 0

# タグの2ページ目以降が入っていない
grep -oE '<loc>https://sakura86.com/tags/[^/<]+/[0-9]+/</loc>' dist/sitemap-0.xml | wc -l
# 0

# タグの1ページ目は入っている
grep -o '<loc>https://sakura86.com/tags/pc/</loc>' dist/sitemap-0.xml | wc -l
# 1

気になった点

  • /search/ には、noindex と robots.txt の Disallow の両方を入れている。robots.txt で止めたページは、Google が中身を読めないので、noindex は読まれない(と理解している)。実際に効いているのは Disallow のほう
  • 記事そのものの「インデックス未登録」は、この対処では直らない。Google が見て登録しないと判断したものなので、記事の中身を直すか、内部リンクを増やすくらいしかないと思う
  • Search Console の表示が変わるのは、Google が再び巡回してからになる。やってすぐは変わらない
  • エラーがどれだけ減ったかは、この記事には載せていない

おわりに

記事以外のページの面倒を見る、地味な作業でした。
ですが、これでページ送りや検索のページは、検索に出にくくなったはずです。

ちなみに、ここまでの作業も Claude Code と一緒にやっています。

これで、移行した話は12回になりました。
全体は、まとめから辿れます。



シリーズ目次
WordPressからAstroへ移行した話 まとめ