Web検索! メタサーチ Top サイト移転のロボット型検索エンジンに対する影響


サイト移転とロボット型検索エンジンの関係
│└登録状況リスト

サイト移転とロボット型検索エンジンの関係

ドメイン移転時の背景に有ったもの

2005/06/04 サイトの移転を行った。  このサイトの引っ越しがロボット型検索エンジンにどのように扱われるのかを記録する。
サイト移転などは滅多に行う事では無いのでこの際メタタグによるジャンプの影響に付いて追跡して行く事にした。

ロボット型検索エンジンにサイトの移転を通告する方法は一般的に 301リダイレクトを発行する事であり Web マスターのための Google 情報 の中にも書かれている。
だが残念ながら元のサーバーでは .htaccess を置く事が出来ない。 実際には置く事が出来ないので無く機能しないようにしてあるのだ。
不用意に書かれた .htaccess がサーバーに与える負荷を考慮しての事だと思われるのだが、とにかく Redirect permanent での301リダイレクトは不可能であった。

物理的に出来ない事は考えても無駄だ。 仕方が無いのでメタタグで自動ジャンプさせるさせる事にした。
メタタグによるジャンプではロボット型検索でのSERが激落する事は目に見えているのだが ISP のおまけについてくるストレージでは文句も言えまい。
メタタグのジャンプでは元の全ページを書き換えなくては成らず面倒な作業になるのは避けられないのだが、これまでの訪問者にとっては分かり易い移転の告知方法だとは言える。

2005/06/04 夕刻、元の全ページの内容を削除し下記の様に書き換えアップロードし移転を知らせる。

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html lang="ja-JP">
<head>
<meta name="Description" content="元のページの Description">
<meta http-equiv="Content-Type" content="text/html; charset=Shift_JIS">
<title>移転しました。・・・</title>
<meta http-equiv="refresh" content="5; url=http://search.web-sun.com/・・・">
</head>
<body>
<h1>このページは移転しました。</h1>
<p>5秒後に自動ジャンプします</p>
<a href="http://search.web-sun.com/・・・">http://search.web-sun.com/・・・</a>
</body>
</html>

カテゴリに登録された URL の変更依頼だが、知らない間に登録されている goo や LookSmart 系はどうする事も出来ないので Yahoo! Japan だけに URL の変更依頼を行った。
何もせずとも訪問してくるで有ろうはずのロボット系には特に登録申請は出さない。

四月以降なぜか YST では元のサイトが3ページしか登録されなくなっていた。  理由は分からないが同じ ISP のサーバーにある同一ドメインのサイトは Yahoo! カテゴリに掲載されている極一部のサイト以外登録されていない状況だった。
この件も絡み新サイトでどのくらいのページ数がYSTへ登録されるのかも観察して行きたい。


検索エンジンへの登録状況

2005/06/04

夕刻にドメイン移転の案内をアップロードし、同時に Yahoo! カテゴリのURL変更申請をした。
goo や LookSmart 系は知らぬ間に載せられていた為、変更依頼は出来ない。

2005/06/05

Google が元のページの変更を拾っているがまだ下層の11ページだけだ。

2005/06/06

Googleは昨日新しいキャッシュになったページが元に戻り別の12ページが移転案内を拾っている。
こんな事を繰り返しながらやがて元のページは”補足結果に”追い遣られるのだろう。
そうなれば移転もスムースに行くはずなのだが問題は元のサイトへ貼られたリンクだ。
気が付いて更新してくれる人も中には居るかも知れないが期待できる物でも無く、お願いできる素姓のものでもない。

17:00 頃 Yahoo! から次回データベース更新時に依頼内容の変更を行うとのメールが来た。
翌日にはカテゴリ掲載の URL を変更してもらえるだろう。

6月6日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google12ページ更新*****8P/13V
YST**********6P/7V
MSNβ**********11P/12V
Ask***************
2005/06/07

朝方に調べてみると YST の検索結果は新 URL へ変更され元のURLは全て消え去った。
恐るべし YST !!
ロボットも来てはいたが、もしかして手動??

まあ元のURLは全て消え去った。
と言っても四月以降3ページしか Hit しなくなっていたのでどうでも良かったりする。
ただ何故かたった3ページしか拾われていないにも拘らず前サイトも順位には大きな影響が無かったのが不思議だ。
今は今後どれだけ新サイトのページを拾ってくれるかの方が気になる。

前日のメールでの予告通り午前中には Yahoo! カテゴリの URL も変更されていた。
Google にも新サイトが2ページほど拾われていた。

6月7日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google12ページ更新2ページ登録65P/133V
YST消滅3ページ登録23P/33V
MSNβ**********42P/46V
Ask**********51P/51V
2005/06/08

前日のログを調べてみると"Ask Jeeves/Teoma" が有りもしないファイル名(25種)で GET して来る。
当然404でお引き取り頂く事になるのだが何の意味が有るのか理解できない。

6月8日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google14ページ更新4ページ登録65P/93V
YST消滅3ページ登録35P/37V
MSNβ*****31ページ登録60P/69V
Ask**********95P/95V
2005/06/09

msnβ は一気に53ページ登録されているのだが旧サイトが手付かずで新サイトは全く Hit しない。

6月9日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google14ページ更新27ページ登録12P/13V
YST消滅3ページ登録33P/34V
MSNβ*****53ページ登録45P/52V
Ask**********0/0
2005/06/10

YST のロボットは来ているのだが登録ページは一向に増えない。
Ask.jp は次回の更新までお預けだろう。

6月10日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google17ページ更新28ページ登録3P/3V
YST消滅3ページ登録17P/25V
MSNβ*****52ページ登録21P/33V
Ask**********0/0
2005/06/11

初期の1週間ほどを観察したので、後は 登録状況リスト の方へ目立つ変化のあった場合のみ追記する。

6月11日
旧サイト(キャッシュ)新サイト(登録)ロボット(昨日分)
Google16ページ更新28ページ登録3P/3V
YST消滅2ページ登録5P/13V
MSNβ*****52ページ登録14P/22V
Ask**********3P/5V
2005/06/16

Googleは順調に登録ページを増やしている。 元のページのキャッシュも64ページほど新しくなりその分検索順位は落ちて来るがこれを避ける事は出来ない。

YST のロボットは来るものの一行に登録ページ数が増えない。 前サーバーの状況をそのまま引き継いでいるとしか言いようが無い。

MSNβ がやっと元のページのキャッシュを更新した。 と言ってもトップページのみだ。
しかもキャッシュ内容はこの新ドメインの物だ。 メタタグ自動ジャンプ5秒の場合 MSNβ ではこの様な解釈になるらしい。

6月16日
旧サイト(キャッシュ)新サイト(登録)ロボット(12日-15日)
Google64ページ更新82ページ登録85P/135V
YST消滅3ページ登録54P/110V
MSNβ1ページ更新60ページ登録58P/183V
Ask**********6P/12V
2005/06/24

YST でやっと10ページ登録された。 ロボットはかなり来るもののなかなかインデックスされない。

Google と MSNβ で主要ページのほとんどがインデックスされた。
Googleではキーワードによって新旧サイトいずれかが表示される。もっとも web検索 とかで検索すると被リンクの多い旧 URL が出て来るのは仕方の無い事ではあるのだが・・・

MSNβ では旧 URL のキャッシュが更新されているがキャッシュの内容は現在の新ドメインの物になっており 「移転しました」の案内を表示す SER は一つも出なくなっている。
こちらもキーワードによって新旧サイトいずれかが表示される。

大元が inktomi 系であった MSN と YST では ”linkdomain:” と言うコマンドが使える。 ドメインを指定してそのドメイン内全ページの被リンクを一括して見る事が出来る便利なオプションだ。
まだ移転後間もない為に数は少ないのだがこんな感じだ。
Yahoo! Japanで linkdomain:search.web-sun.com
MSNβで linkdomain:search.web-sun.com
キーワードも半角スペースを空けて追加し検索できるので場合によっては結構使える。

6月24日
旧サイト(キャッシュ)新サイト(登録)ロボット(16日-23日)
Googleほとんど更新115ページ登録70P/148V
YST消滅10ページ登録120P/318V
MSNβほとんど更新105ページ登録139P/1213V
Ask**********8P/16V

Web検索! メタサーチ  contact
Copyright (C) Web検索! メタサーチ, All rights reserved.