TOP  >  なーお'nぶろぐ  >  なーお  >  Web  >  [サイト構築] Yahooからの異常なクローラー

なーお さんの日記

 
2009
4月 13
(月)
14:17
[サイト構築] Yahooからの異常なクローラー
本文

皆さん、こんにちは。
 Motion cafe
仕事関連の無償サイトで、普段はそれほどアクセスはありません。 ところが、ここ1週間は10倍のアクセスがありました。 一体、なぜ?
最近のアクセス状況です。 これを見ても、やっぱり異常だわさ。

20090413_mcafe.jpg

カウンタだけでは調べきれないので、Analyzer for XCをインストールして解析しました。 どうやら、Yahoo!のロボットの仕業のようです。

20090413_mcafe2.jpg

Yahooサイトで調べてみましたら、これらのIPアドレスは
 モバイル版Yahoo!検索の検索エンジン(クローラ)
であることが判りました。

しなしながら、UserAgantが上記Yahooサイトの説明とは異なります。 「Mozilla/4.0 (compatible; MSIE 6.0; Windows XP)」 なんて。 通常のブラウザアクセスと判別がつきません。・・ カウンタが鰻上りに上がっていくワケですね。  (仕方ないのでLogcounterXの「レポート対象除外ホスト」にIPを設定してます)

 ロボットならロボットらしく、きちんと名を名乗りたまえ! 

ということで、Yahoo!に質問を出してみました。 返答は来るかな?  :-?

閲覧(17851)

コメント一覧

投稿ツリー


なーお  投稿日時 2009/4/15 14:48 | 最終変更

この件。

本日、ログをみたら、昨日の18時以降は頻度も5分に1回に減っていて、

KDDI-CA33 UP.Browser/6.2.0.10.4 (compatible; Y!J-SRD/1.0; http://help.yahoo.co.jp/help/jp/search/indexing/indexing-27.html)

と正常なUserAgantに直っていました。

YAHOOからの返答は、現時点ではまだ来ていません。

20090413_mcafe3.jpg

結局、返事はきませんね。
   まあ、そんなもんかな。 間違いを指摘してあげても、1大企業が1ユーザーに「お礼」も言えないんでしょうね。
   こんな企業体質では、Yahooは今後もだめでしょうね。

なーお  投稿日時 2009/4/24 10:14 | 最終変更

本日、Yahooから返答がきました。

以下、文面の一部抜粋
引用:
お客様からご指摘いただいた事象につきましては、一時的な不具合により発生していたことがわかりました。

調整を行い、現在はヘルプページ記載のとおりの正しいユーザーエージェントでの動作を確認しております。お手数をおかけいたしますが、いま一度ご確認くださいますようお願い申し上げます。

あー、はいはい。 とっくに確認済みです。
というか、対策を行ってから1週間も経ってからメールを送るようじゃ、困りますね。

それに、「一時的な不具合により発生していた」って、意味がわかりませぬ。。 不具合があって直したら、そりゃ結果的に一時的な不具合になるけど、こんな風には書かないよねえ。 まさか、ある一時期だけ時限的に発生するように作られた不具合だったとか??  ・・いややっぱり、この日本語おかしいでしょ。

以上、報告でした。 もうどうでもいいや。



新しくコメントをつける

題名
ゲスト名
投稿本文
より詳細なコメント入力フォームへ