※上記の広告は60日以上更新のないWIKIに表示されています。更新することで広告が下部へ移動します。

Top > work > 迷惑なクローラー
更新日 0000年00月00日00時00分00秒

迷惑なクローラー

GoogleやYahooなどUserAgentを正式に発表してくれているものはいいですが
UserAgentを変えて一般ユーザ風でアクセスしてこられると
サーバーに負荷をかけ、アクセスログ分析の邪魔にもなる各会社のクローラー達( ゜皿 ゜)
ここは私が仕事中に見つけた怪しいUserAgent達の覚書です。

;

P90liS

DoCoMo/2.0 P90liS(c100;TB;W20H10)
一見ドコモの「P901iS」かと思いきや!「P90liS」!!
「1」⇒「l」になってるんです。ビビリます。
IPを調べると中国からのアクセスと分かります。

Yeti

もの凄い数アクセスしてくる...
Yeti/1.0 (NHN Corp.; http://help.naver.com/robots/)"

百度(バイドゥ)

迷惑クローラーって訳ではないですが...
Baiduspider+(+http://www.baidu.jp/spider/) 
BaiduImagespider(+http://www.baidu.jp/spider/) 
DoCoMo/2.0 P05A(c100;TB;W24H15) (compatible; BaiduMobaider/1.0; +http://www.baidu.jp/spider/) 


IPからホスト名などの情報を調べる





LINK集

|新しいページ|検索|ページ一覧|RSS|@ウィキご利用ガイド | 管理者にお問合せ
|ログイン|

today: -
yesterday: -
total: -

取得中です。

【ご注意】
このサイトから得た情報などで生じる損失等について一切の責任は負えませんので
予めご了承ください