目次
UserAgentのデータベースを作りましょう。
spam標的になっているので凍結しています
特に「User-Agentについてのたわごと」
(http://www.dais.is.tohoku.ac.jp/logs/agentgripes.html)
に載っていないものを中心に補完したいと思います。(このサイトはなくなってしまいました)
→WebArchive?(http://web.archive.org/web/20020206064227/http://www.dais.is.tohoku.ac.jp/logs/agentgripes.html)
- Baiduspider+
- 中国の検索エンジンのロボット(?)。 http://www.baidu.com/search/spider.htm
- Bookmark Renewal Check Agent
- Bookまーく?の更新チェック。http://www.bookmark.ne.jp/
- Bloglines/1.0
- RSS 更新チェックサービス。 http://www.bloglines.com/
- Bloglines/2.0 (http
- //www.bloglines.com; [0-9]+ subscribers):
- Cuam Ver0.050bx
- IEコンポーネントを利用したタブブラウザ。http://cuam.virtualave.net/index.htm
- dloader(NaverRobot?)/1.0
- 検索エンジンNAVERのロボット(おそらく)。http://www.naver.co.jp/
- DonutRapt?/Mozilla/4.0
- IEコンポーネントを利用したタブブラウザ。http://www.atmark.gr.jp/~s2000/r/
- Download Ninja 7.0
- ダウンロード専用クライアント(?)。http://www.ifour.co.jp/ninja/dln/index.htm
- NaverBot?
- 検索エンジンNAVERのロボット。http://www.naver.com/
- Googlebot-Image/1.0
- Google イメージ検索用ロボット(?)。 http://www.googlebot.com/bot.html
- Hatena Antenna/0.3
- はてなアンテナの巡回ロボット。http://a.hatena.ne.jp/
- Interarchy/6.2
- Macintosh用のFTP/HTTP クライアント。http://www.interarchy.com/
- Internet Ninja 4.0
- ダウンロード専用クライアント(?)。http://www.ifour.co.jp/ninja/in4m/index.htm
- Iria/1.07a
- ダウンロード専用クライアント。 http://gaogao.moemoe.gr.jp/
- Irvine/1.0.3b
- ダウンロード専用クライアント。http://hp.vector.co.jp/authors/VA024591/
- JustView?/3.01
- ジャストシステムのWebブラウザ。一太郎シリーズのCD-ROMに入ってる。http://www3.justnet.ne.jp/~kasahara/
- Kuzilla/1.0 (compatible; LS 1.0.2023.25552; 〜)
- IEコンポネートを利用したタブブラウザ。〜の部分はWindowsのバージョンによる。http://kirb.dotpp.net/wind/?LightSpace
- Kuzilla/1.0 (compatible; LightSpace? 1.0.2023.25552; 〜)
- 上記の古バージョン。
- libwww-なんとかかんとか
- perlのLWPモジュール。
- Lunascape/1.00beta1
- IEコンポーネントを利用したタブブラウザ。http://www.lunascape.jp/
- mogimogi/1.0
- goo(http://www.goo.ne.jp/)のロボットと思われる。http://www.dais.is.tohoku.ac.jp/logs/agentgripes.html#mogetも参照。
- MoonBrowser? (version 0.41 Beta4)
- IEコンポーネントを利用したタブブラウザ。http://www.geocities.co.jp/SiliconValley-Cupertino/8986/
- Mozilla/3.0 (compatible; PerMan? Surfer 3.0; Win95)
- Web巡回/ダウンロードツール。http://www.bug.co.jp/nami-nori/
- Mozilla/3.0 airboard 1.0 (〜)
- インターネット機能がついたテレビ。カッコ内に細々とした情報が入る。http://www.sony.jp/airboard/indexlite.html
- Mozilla/4.0 (compatible; 〜 Lunascape 0.97b)
- IEコンポーネントを利用したタブブラウザ。〜の部分はIEのバージョンなどによる。http://www.lunascape.jp/
- Mozilla/4.0 (compatible; 〜 DonutP; 〜)
- IEコンポーネントを利用したタブブラウザ。〜の部分はIEのバージョンなどによる。http://donutp.com/
- Mozilla/4.0 compatible ZyBorg?/1.0
- 検索エンジンWiseNut?のロボット。http://www.WISEnutbot.com/
- Mozilla/5.0 (compatible; Konqueror/3)
- KDE標準のWebブラウザ。http://www.konqueror.org/
- Mozilla/5.0 (〜) Gecko/20021013 Chimera/0.5+
- Geckoを利用したMac OS X用のWebブラウザ。http://www.mozilla.org/projects/chimera/
- Mozilla/5.0 (〜) Gecko/20020530 GLU/0.0.14
- Geckoを利用したタブブラウザ。開発終了してSyleraに。http://www.zawameki.net/izmi/prog/glu.html
- Mozilla/5.0 (〜) Gecko/20020823 MultiZilla?/v1.1.22
- Geckoを利用したタブブラウザ。http://multizilla.mozdev.org/
- Mozilla/5.0 (〜) Gecko/20021029 Phoenix/0.4
- Geckoを利用したブラウザ。http://www.mozilla.org/projects/phoenix/
- Mozilla/5.0 (〜) Gecko/20020826 Sylera/1.1.2
- Geckoを利用したタブブラウザ。GLUの後継。http://www.zawameki.net/izmi/prog/sylera.html
- Mozilla/5.0 Galeon/1.2.6 (Linux i686; U;) Gecko/*
- Geckoを利用したタグブラウザ。http://galeon.sourceforge.net/
- Nutscrape/1.0 (CP/M; 8-bit)
- Squid Web Proxy CacheがUAを詐称するときによく使われるもの。http://www.squid-cache.org/
- Openfind data gatherer, Openbot/3.0+
- 台湾の検索エンジンOpenfindのロボット。http://www.openfind.com.tw/robot.html
- PHP/4.2.2
- PHP
- Sleipnir Version 1.30
- IEコンポーネントを利用したタブブラウザ。http://www20.pos.to/~sleipnir/
- Snoopy v0.94
- PHP用のhttpクライアントクラス。http://snoopy.sourceforge.net/
- Tcl http client package 2.4.2
- Tclのhttpクライアントモジュール。http://aspn.activestate.com//ASPN/Products/ActiveTcl/tcl/TclCmd/http.htm
- TurnitinBot?/1.5
- 学生のレポートがネット上から盗用したものでないかをチェックするためにページを収集してるらしい。http://www.turnitin.com/robot/crawlerinfo.html
- AnswerBus? (http;//www.answerbus.com/)
-
- Aport
-
- BMChecker
-
- Baiduspider+(+http;//www.baidu.com/search/spider.htm)
-
- BlogPeople? Java/1.4.2_04
-
- Blogdigger/2.0 (http;//www.blogdigger.com/; contact@blogdigger.com)
-
- Bookmark Renewal Check Agent [http;//www.bookmark.ne.jp/] (Version 2.0beta)
-
- BottomFeeder?/3.6
-
- Bulkfeeds/1.01 (http;//bulkfeeds.net/)
-
- CFNetwork/1.1
-
- CaRP/3.3GPL
-
- Comaneci_bot/1.2 (+http;//help.i-know.jp/?crawler)
-
- Commerobo/1.0.1 (http;//www.dcn.to/~comment/on/)
-
- CosmixCrawler?/0.1
-
- Cuam Ver0.050bx
-
- DATAsp
-
- DLC/0.55
-
- Desktop Sidebar v1.04.75.0
-
- Diamond/1.0
-
- FaEdit?/2.0.2
-
- FeedDemon?/1.11 (http;//www.bradsoft.com/; Microsoft Windows XP)
-
- Feedster Crawler/1.0; Feedster, LLC.; Crawler #
-
- Fresh Search ;; Terrar (http;//www.terrar.com/)
-
- Geiger-Counter/0.65[Test]
-
- GetRight?/4.5e
-
- Gigabot/2.0
-
- Googlebot/2.5 (+http;//www.googlebot.com/bot.html)
-
- HaoRanSoft?
-
- Hatena Antenna/0.4 (http;//a.hatena.ne.jp/help)
-
- Headline-Deskbar(www.infomaker.jp)
-
- Headline-Reader [t] (www.infomaker.jp)
-
- Heimdallr 1.05a
-
- HepCat?; http;//www.witha.jp/
-
- HuntingGirledProductions? RSS_Collector Dragon_bLog_GT/v.030611_R (http;//girled.net/)
-
- IP*Works! V5 HTTP/S Component - by /n software - www.nsoftware.com
-
- IRC Utile Bot
-
- ImageBot?
- naver.co.jpの画像クローラー
- Internet Ninja 4.0
-
- InternetLinkAgent?/3.1
-
- Irvine/1.1.1
-
- Jetbot/1.0
-
- KamiProfessional?
-
- Kazehakase/0.1.9
- ブラウザ「風博士」
- MagpieRSS/0.61 (+http;//magpierss.sf.net)
-
- Mediapartners-Google/2.1
-
- Miech/600
-
- NPBot (http;//www.nameprotect.com/botinfo.html)
-
- NaverBot?-1.0 (NHN Corp. / +82-2-3011-1954 / nhnbot@naver.com)
-
- NetNewsWire?/1.0.9b1 (Mac OS X; Lite; http;//ranchero.com/netnewswire/)
-
- Openbot/3.0+(robot-response@openfind.com.tw;+http;//www.openfind.com.tw/robot.html)
-
- PiloWeb?
-
- RDF Gateway
-
- RNA/libwww-perl/5.69
-
- RSSGate/0.9(http;//www.geocities.jp/nao_rssgate/)
-
- RThReader/2.0
-
- RabbitTicker?-SEGA/1.55(Windows; ja-jp)
-
- ReadOne?;;XiBot1.3
-
コメント着ける余裕がないですが、こういうリストも。
参考リンク
- RFC2068のUser-Agentに関する部分
- http://www.mars.dti.ne.jp/~torao/rfc/rfc2068-ja.html#14.42
- MozillaのUser-Agentに関する方針
- http://jt.mozilla.gr.jp/build/revised-user-agent-strings.html
未整理
- MetaCarta?-bot crawler@metacarta.com
- TulipChain/5.7 (http://ostermiller.org/tulipchain/) Java/1.4.0_02 (http://java.sun.com/) Windows_2000/5.0
- Sqworm/2.9.85-BETA (beta_release; 20011115-775; i686-pc-linux-gnu)
- Tkensaku
- 2002-12-17 (Tue) 10:00:12 Rumours-Agent
- 2003-01-09 (Thu) 09:55:41 HyperRobot?
- 2003-07-08 (Tue) 09:10:23 ety? : etyetyety
- 2003-08-09 (Sat) 17:55:16 謎→? : LWP::Simple/5.63
- 2003-09-13 (Sat) 01:40:52 ??? : ?
- 2003-10-21 (Tue) 16:46:52 syballasu
- 2003-10-21 (Tue) 16:55:58 larbin_2.6.3
- 2003-10-21 (Tue) 16:56:45 NPBot http://www.nameprotect.com/botinfo.html
- 2003-10-21 (Tue) 17:13:31 icsbot-0.1
- 2004-02-07 (Sat) 07:45:26 ANONYMIZATION Toolbar Version 1.42
- 2004-04-01 (Thu) 06:22:37 Safari/125
- 2004-04-20 (Tue) 11:03:33 Mozilla/4.0 (Windows XP 5.1) Java/1.4.2_04
- 2004-04-20 (Tue) 11:04:21 Mozilla/5.0 (Windows; U; NT 5.1; rv:1.8a) Gecko/20040419
- 2004-04-20 (Tue) 11:04:39 Mozilla/5.0 (X11; U; Linux i686; rv:1.8a) Gecko/20040419
- 2004-04-20 (Tue) 11:05:23 Opera/7.50 (Windows NT 5.1; U) [ja]
- 2004-04-20 (Tue) 11:11:47 Mozilla/5.0 (Windows; U; Windows NT 5.0; rv:1.8a) Gecko/20040419 Firefox/0.8.0+
- 2004-04-20 (Tue) 11:13:34 Hatena Antenna/0.4 (http://a.hatena.ne.jp/help#robot)
- 2004-04-20 (Tue) 11:13:52 indexpert/2.1
- 2004-04-20 (Tue) 11:14:06 Mozilla/2.0 (compatible; Ask Jeeves/Teoma)
- 2004-04-20 (Tue) 11:14:28 Baiduspider+(+http://www.baidu.com/search/spider.htm)
- 2004-04-20 (Tue) 11:14:57 ia_archiver
- 2004-04-20 (Tue) 11:15:09 NPBot (http://www.nameprotect.com/botinfo.html)
- 2004-04-20 (Tue) 11:15:19 Reaper/2.07 (+http://www.sitesearch.ca/reaper)
- 2004-04-20 (Tue) 11:15:33 InternetLinkAgent?/3.1
- 2004-04-20 (Tue) 11:15:49 Pompos/1.3 http://dir.com/pompos.html
- 2004-04-20 (Tue) 11:16:22 Googlebot/2.1 (+http://www.googlebot.com/bot.html)
- 2004-04-20 (Tue) 11:16:38 KLSH PageGet1.0 (+http://www.kondo-net.gr.jp/klsh/)
- 2004-04-20 (Tue) 11:16:50 WireAction? URLCheckSpider
- 2004-04-20 (Tue) 11:17:48 Mozilla/5.0 (Windows; U; NT 5.1; rv:1.7a) Gecko/20040205 Mozilla Sunbird/0.1.1+
- 2004-08-28 (Sat) 19:38:54 aaa? : bbb
- 2004-09-19 (Sun) 18:36:53 http://semicolon.jp/ussy/agent.php なんてのもありますよ.
- 2004-11-15 (Mon) 22:57:58 1.0 ってバージョンのみのやつ
- 2005-01-24 (Mon) 07:59:47 IRLbot/1.0 (+http://irl.cs.tamu.edu/crawler)
- 2005-01-24 (Mon) 08:01:18 appie 1.1 (www.walhello.com)
- 2005-01-24 (Mon) 08:02:41 Jakarta Commons-HttpClient?/2.0rc1
- 2005-01-24 (Mon) 08:03:37 NutchCVS/0.06-dev (Nutch; http://www.nutch.org/docs/en/bot.html; nutch-agent@lists.sourceforge.net)
- 2005-01-24 (Mon) 08:05:38 gooRSSreader/1.0-20041228 (based on glucose)
- 2005-01-24 (Mon) 08:13:19 Mozilla/5.0 (Windows; U; Windows NT 5.1; ja-JP; rv:1.7.5) Gecko/20041108 Firefox/1.0
- 2005-01-24 (Mon) 08:14:35 Wget/1.6
- 2005-01-24 (Mon) 08:14:47 Wget/1.8.2
- 2005-01-24 (Mon) 08:16:09 msnbot/0.3 (+http://search.msn.com/msnbot.htm)
- 2006-02-24 (Fri) 07:32:38 anonyization
- 2006-03-06 (Mon) 17:20:33 masa? : IE6 + Sun Java Plugin 1.4.2 で java.net.URLConnection を生成してWebサーバにアクセス:Mozilla 4.0 (Windows 2000 5.0) Java/4.4.2_04
- 2006-03-06 (Mon) 17:22:57 masa? : 誤:Java/4.4.2_04 正:Java/1.4.2_04
- 2006-05-21 (Sun) 17:50:07 Google Wireless Transcoder