http://robotstxt.org.ru/rurobots/google History/revisions of Robots.Txt по-русски/rurobots/google en-us http://robotstxt.org.ru/rurobots/google/show?time=2006-10-25+16%3A03%3A40 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a name=".rurobots.google" href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-25+16%3A03%3A40">2006-10-25 16:03:40</a> и <a href="http://robotstxt.org.ru/rurobots/google">2006-12-01 00:22:58</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h80-1"></a><h2>Ссылки по&nbsp;теме</h2></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-25+16%3A03%3A16 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-25+16%3A03%3A16">2006-10-25 16:03:16</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-25+16%3A03%3A40">2006-10-25 16:03:40</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a href="http://www.google.ru/support/webmasters/bin/topic.py?topic=8475" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />Анализ файла robots.txt, информация Google</a></div><br /> <b>Удалено:</b><br /> <div class="deletions"><a href="http://www.google.ru/support/webmasters/bin/topic.py?topic=8475" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />Анализ файла robots.txt? информация Google</a></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-20+01%3A23%3A17 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-20+01%3A23%3A17">2006-10-20 01:23:17</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-25+16%3A03%3A16">2006-10-25 16:03:16</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a href="http://www.google.ru/support/webmasters/bin/topic.py?topic=8475" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />Анализ файла robots.txt? информация Google</a></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-20+01%3A22%3A47 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-20+01%3A22%3A47">2006-10-20 01:22:47</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-20+01%3A23%3A17">2006-10-20 01:23:17</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h80-1"></a><h1>Роботы Google — <a href="http://www.google.ru" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />www.google.ru</a></h1></div><br /> <b>Удалено:</b><br /> <div class="deletions"><a name="h80-1"></a><h1>Роботы Google <a href="http://www.google.ru" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />www.google.ru</a></h1></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-17+22%3A39%3A34 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-17+22%3A39%3A34">2006-10-17 22:39:34</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-20+01%3A22%3A47">2006-10-20 01:22:47</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h80-1"></a><h1>Роботы Google <a href="http://www.google.ru" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />www.google.ru</a></h1></div><br /> <b>Удалено:</b><br /> <div class="deletions"><a name="h80-1"></a><h1>Роботы Google</h1></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-17+22%3A38%3A49 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-17+22%3A38%3A49">2006-10-17 22:38:49</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-17+22%3A39%3A34">2006-10-17 22:39:34</a></b><br /> <br /> <b>Удалено:</b><br /> <div class="deletions">%%(php)User-agent: Googlebot-Image&lt;</div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-09+15%3A29%3A58 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-09+15%3A29%3A58">2006-10-09 15:29:58</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-17+22%3A38%3A49">2006-10-17 22:38:49</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">%%(php)User-agent: Googlebot-Image&lt;</div><br /> <b>Удалено:</b><br /> <div class="deletions"><!--notypo--><div class="code"><code><font color="#000000"> ser-agent:&nbsp;*</font> </code></div><!--/notypo-->(php)ser-agent: Googlebot-Image&lt;</div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-09+15%3A00%3A02 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-09+15%3A00%3A02">2006-10-09 15:00:02</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-09+15%3A29%3A58">2006-10-09 15:29:58</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><!--notypo--><fieldset><legend><strong> Оглавление документа </strong></legend><div class="toc1"><a href="#h80-2">Как удалить содержание из&nbsp;индекса Google с&nbsp;помощью robots.txt</a></div><div class="toc2"><a href="#h80-3">Удаление сайта целиком</a></div><div class="toc2"><a href="#h80-4">Удаление части сайта</a></div><div class="toc2"><a href="#h80-5">Удаление фрагментов (сниппетов)</a></div><div class="toc2"><a href="#h80-6">Удаление сохраненных в&nbsp;кэше страниц</a></div><div class="toc2"><a href="#h80-7">Удаление картинки из&nbsp;системы поиска картинок Google</a></div><div class="toc1"><a href="#h80-8">Ссылки по&nbsp;теме</a></div></fieldset><!--/notypo--></div></div> http://robotstxt.org.ru/rurobots/google/show?time=2006-10-07+22%3A13%3A15 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/rurobots/google" class="">/rurobots&nbsp;/&nbsp;google</a> за <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-07+22%3A13%3A15">2006-10-07 22:13:15</a> и <a href="http://robotstxt.org.ru/rurobots/google?time=2006-10-09+15%3A00%3A02">2006-10-09 15:00:02</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h80-1"></a><h3>Удаление картинки из&nbsp;системы поиска картинок Google</h3> Чтобы удалить картинку из&nbsp;индекса картинок Google, разместите в&nbsp;корневом каталоге сервера файл robots.txt. ( Если это&nbsp;невозможно, поместите его&nbsp;на&nbsp;уровне каталога).<br /> Пример: Если требуется удалить из&nbsp;индекса Google изображение sobaki.jpg, размещенное на&nbsp;Вашем сайте по&nbsp;адресу www.vash-sajt.ru/kartinki/sobaki.jpg, создайте страницу www.vash-sajt.ru/robots.txt и&nbsp;добавьте на&nbsp;нее следующий текст: <br /> <!--notypo--><div class="code"><code><font color="#000000"> User-agent:&nbsp;Googlebot-Image<br />Disallow:&nbsp;/images/sobaki.jpg</font> </code></div><!--/notypo--><br /> Чтобы удалить из&nbsp;индекса все&nbsp;имеющиеся на&nbsp;сайте картинки, разместите в&nbsp;корневом каталоге сервера файл robots.txt со&nbsp;следующим содержанием:<br /> <!--notypo--><div class="code"><code><font color="#000000"> ser-agent:&nbsp;Googlebot-Image&lt;<br />Disallow:&nbsp;/</font> </code></div><!--/notypo--><br /> Это&nbsp;стандартный протокол, который соблюдает большинство сканеров; он&nbsp;позволяет удалить из&nbsp;индекса сервер или&nbsp;каталог. Дополнительная информация о&nbsp;robots.txt представлена на&nbsp;странице <a href="http://robotstxt.org.ru/RobotsExclusion" target="_blank" title="" class="outerlink">http://robotstxt.org.ru/RobotsExclusion</a><br /> Кроме того, Google позволяет использовать файл robots.txt более гибко за&nbsp;счет использования звездочек. В&nbsp;шаблонах запрета символ "*" может означать любую последовательность символов. Шаблон может оканчиваться символом "$", который обозначает конец имени. Чтобы удалить все&nbsp;файлы определенного типа (например, чтобы оставить картинки в&nbsp;формате .jpg, а&nbsp;в формате .gif удалить), добавьте в&nbsp;файл robots.txt такую запись: <br /> <!--notypo--><div class="code"><code><font color="#000000"> User-agent:&nbsp;Googlebot-Image<br />Disallow:&nbsp;/*.gif$</font> </code></div><!--/notypo--><br /> Если файл robots.txt останется в&nbsp;корневом каталоге веб-сервера, Google и&nbsp;в дальнейшем не&nbsp;будет сканировать сайт или&nbsp;его каталоги. Если у&nbsp;Вас нет&nbsp;доступа к&nbsp;корневому каталогу сервера, можно поместить файл robots.txt на&nbsp;одном уровне с&nbsp;теми файлами, которые требуется удалить. После того как&nbsp;Вы&nbsp;это сделаете и&nbsp;воспользуетесь системой автоматического удаления URL, временно, на&nbsp;180 дней, будут удалены каталоги, указанные в&nbsp;файле robots.txt, из&nbsp;индекса Google независимо от&nbsp;того, удалите ли&nbsp;Вы файл robots.txt после обработки запроса. ( Если оставить файл robots.txt на&nbsp;том же&nbsp;уровне, URL&nbsp;потребуется удалять с&nbsp;помощью автоматической системы каждые 180 дней.)</div></div>