ロボット検索から逃れられるかという実験


はじめに

 特に公開を意識しないで公開したら,案の状,ほとんど閲覧はなかったが,最近ぽつぽつと閲覧する人が現れたので,ためしにいくつかの検索を行った結果上位にランクされることもあることが判明した.これはロボットやクローラが検索に訪れているということと判断し,次の実験を行った.


indexを工事中にして,現INDEXを他の名前に(myindex


両方のインデックスにrobotの属性を記入,

他のhtmlにもこの属性にしたほうがいいのであろうが,面倒なのでやめた.


以上を2009.8.17深夜に行った.そのときのカウントが242であった.


下位のページからindexにリンクがないか調べたら,なかった.


myindexのカウントは全く増えない.しかし,yahooのランクはむしろ上がっていた."楕円周 excel"で検索すると,3番目に出る.googleのリンク検索から,indexにリンクしているページはなかった.しかしこれは必ずしも信用できない.


2009.8.29もとに戻す.yahooのランクが下がることは望めないことがわかった.


ところが,831日になって,突然yahooのランクから消えた.今になって属性の変更が効いたのであろうか.原因はよくわからない.以後カウンタの増加は無くなった.


2010/05/14 久しぶりに自分のページが検索で引っかかった.他のページを探していたときだったのでちょっとびっくりした.Google'grapes tex 貼り付け'のキーワードで検索したら634件中2番目になった.キャッシュは419日の日付になっている.grapes texを前後入れ替えて検索すると632件中5番目となる.他の順列で確かめても2番か5番のどちらかにランクされる.robotにかからないように設定してあるはずだが,googleは定期的に見に来ているようだ.以前上位にランクされた"楕円周 excel"のキーワードでは相変わらずひっかからなかった.