http://robotstxt.org.ru/ 2010-06-17T01:34:07+00:00 daily 1.0 http://robotstxt.org.ru/test 2010-09-05T19:31:50+00:00 monthly 0.2 http://robotstxt.org.ru/robotstxterrors 2010-06-17T18:00:38+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/webalta 2010-06-17T17:59:42+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/rambler 2010-06-17T17:59:08+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/google 2010-06-17T17:58:47+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/yandex 2010-06-17T17:57:58+00:00 monthly 0.2 http://robotstxt.org.ru/robotsexclusion/meta 2010-06-17T17:57:31+00:00 monthly 0.2 http://robotstxt.org.ru/robotsexclusion/guide 2010-06-17T17:57:09+00:00 monthly 0.2 http://robotstxt.org.ru/robotsexclusion/noindex 2010-06-17T17:56:45+00:00 monthly 0.2 http://robotstxt.org.ru/robotsexclusion/spec 2010-06-17T17:56:24+00:00 monthly 0.2 http://robotstxt.org.ru/chavo 2010-06-17T17:52:59+00:00 monthly 0.2 http://robotstxt.org.ru/robotsexclusion 2010-06-17T17:46:52+00:00 monthly 0.2 http://robotstxt.org.ru/links 2010-06-17T01:33:44+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots 2010-06-17T01:27:17+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/msn-live-bing 2010-06-17T01:23:57+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/turtle 2010-06-17T01:23:49+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/yahoo 2010-06-17T01:23:44+00:00 monthly 0.2 http://robotstxt.org.ru/rurobots/aport 2010-06-17T01:23:26+00:00 monthly 0.2