思ったように記事がクロールされないのなら、クロールされている URL に記事を入れればよいのではないか
Googlebot が見にきて 404 (ページが見つからない) になっている URL がある。
そもそもクロールしてもらうのに苦労している。 それなのに、何もせず Googlebot がクロールする URL がある。 では、この URL に記事を入れると、インデックスされるのか？と、セコいことを考えてしまう。
1ページのサイトを作る、というコンセプトとは逆行してしまうが、個別にページを作って URL に対応づけてみることにした。
トップページからのリンクを貼りたいところだが、トップから辿ってきたのか、Googlebot が知っている URL をたどってきたのか効果を見たいので、登録されるまではリンクを我慢する。
今の疑問点としては、次の点。
- URL はコンテンツに関係なさそうだが、インデックスされるのか？(URL は内容と関係なくてもインデックスされるのか)
- トップからのリンクはなく、サイトマップにはある。Googlebot はアクセスに来る。この状態でインデックスされるのか？(他サイトからのリンクは無いようだが、Googlebot にアクセスされさえすればインデックスされる可能性があるのか？)
このページの状況
2022/6/22 16:08 Googlebot からアクセスあり。
2022/6/23 7:33 時点、インデックスされていない。
2022/6/26 10:09 時点、インデックスされていない。このページの URL 変更と、このページにリダイレクトを集中されてみることとする。
2022/6/29 13:23 時点、URL 検査をすると、「URL は Google に登録されています」となる。サイトマップは該当なし。参照元ページは、検出されていない。前回クロールは、2022/6/27 21:11:13。一方で、site: 検索には表示されず、検索結果にも出てこない。
2022/6/30 6:28 時点、状況は変わらず。URL 検査で表示されるステータスがあてにならない印象。
2022/7/2 0:48 時点、site 検索で表示されるようになった。まだ、表示されたり、されなかったりする状態。
2022/7/6 6:12 時点、site 検索で表示されるようになっている。