http://robotstxt.org.ru/ 2011-12-26T14:40:18+00:00 daily 1.0 http://robotstxt.org.ru/rurobots 2011-09-10T22:00:08+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/yahoo 2011-09-08T12:34:35+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/rambler 2011-08-21T20:04:45+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/webalta 2011-08-21T20:04:29+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/turtle 2011-08-21T20:04:24+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/aport 2011-08-21T03:41:24+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/msn-live-bing 2011-08-20T19:49:40+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/google 2011-08-20T19:49:32+00:00 weekly 1.0 http://robotstxt.org.ru/robotsexclusion 2011-08-15T22:43:35+00:00 weekly 1.0 http://robotstxt.org.ru/chavo 2011-08-13T22:06:01+00:00 weekly 1.0 http://robotstxt.org.ru/robotsexclusion/spec 2011-08-13T22:00:28+00:00 weekly 1.0 http://robotstxt.org.ru/robotstxterrors 2011-08-13T21:54:05+00:00 weekly 1.0 http://robotstxt.org.ru/robotsexclusion/noindex 2011-08-08T14:21:07+00:00 weekly 1.0 http://robotstxt.org.ru/rurobots/yandex 2011-08-04T10:47:38+00:00 weekly 1.0 http://robotstxt.org.ru/robotsexclusion/meta 2010-06-17T17:57:31+00:00 weekly 1.0 http://robotstxt.org.ru/robotsexclusion/guide 2010-06-17T17:57:09+00:00 weekly 1.0 http://robotstxt.org.ru/links 2010-06-17T01:33:44+00:00 weekly 1.0