http://robotstxt.org.ru/RobotsExclusion/noindex History/revisions of Robots.Txt по-русски/RobotsExclusion/noindex en-us http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-21+00%3A25%3A24 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a name=".robotsexclusion.noindex" href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A25%3A24">2006-11-21 00:25:24</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex">2006-11-21 00:26:13</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">Если вы&nbsp;используете <a href="http://www.w3.org/TR/REC-html40/struct/links.html#adef-rel" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />атрибут rel</a> для&nbsp;каких-то других целей помните, что&nbsp;вы&nbsp;можете помещать в&nbsp;него несколько значений через пробел. Вот&nbsp;примеры использования многих значений атрибута <strong>rel</strong>, которые <a href="http://gmpg.org/xfn/intro" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />приводит Google</a>:<br /> &lt;a href="http://jane-blog.example.org/&quot; <strong>rel="sweetheart date met"</strong>&gt;Jane&lt;/a&gt;<br /> &lt;a href="http://jane-blog.example.org/&quot; <strong>rel="sweetheart date met&nbsp;nofollow"</strong>&gt;Jane&lt;/a&gt;</div><br /> <b>Удалено:</b><br /> <div class="deletions">Если вы&nbsp;используете <a href="http://www.w3.org/TR/REC-html40/struct/links.html#adef-rel" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />атрибут **rel**</a> для&nbsp;каких-то других целей помните, что&nbsp;вы&nbsp;можете помещать в&nbsp;него несколько значений через пробел. Вот&nbsp;примеры использования многих значений атрибута <strong>rel</strong>, которые <a href="http://gmpg.org/xfn/intro" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />приводит Google</a>:<br /> &lt;a href="<a href="http://jane-blog.example.org/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://jane-blog.example.org/</a>" <strong>rel="sweetheart date met"</strong>&gt;Jane&lt;/a&gt;<br /> &lt;a href="<a href="http://jane-blog.example.org/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://jane-blog.example.org/</a>" <strong>rel="sweetheart date met&nbsp;nofollow"</strong>&gt;Jane&lt;/a&gt;</div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-21+00%3A07%3A26 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A07%3A26">2006-11-21 00:07:26</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A25%3A24">2006-11-21 00:25:24</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">&lt;a <strong>rel="nofollow"</strong> href="http://www.example.com/page.html&quot; &gt;Моя домашняя страничка&lt;/a&gt;<br /> Найдя такой атрибут в&nbsp;ссылке поисковая машина воспримет ее&nbsp;как сообщение владельца сайта &ndash; &laquo;эту ссылку разместил не&nbsp;я, а&nbsp;кто-то другой&raquo;.<br /> Если вы&nbsp;используете <a href="http://www.w3.org/TR/REC-html40/struct/links.html#adef-rel" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />атрибут **rel**</a> для&nbsp;каких-то других целей помните, что&nbsp;вы&nbsp;можете помещать в&nbsp;него несколько значений через пробел. Вот&nbsp;примеры использования многих значений атрибута <strong>rel</strong>, которые <a href="http://gmpg.org/xfn/intro" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />приводит Google</a>:<br /> &lt;a href="<a href="http://jane-blog.example.org/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://jane-blog.example.org/</a>" <strong>rel="sweetheart date met"</strong>&gt;Jane&lt;/a&gt;<br /> Если вы&nbsp;хотите добавить к&nbsp;имеющимся значениям nofollow &ndash; просто впишите его&nbsp;через пробел. Например так:<br /> &lt;a href="<a href="http://jane-blog.example.org/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://jane-blog.example.org/</a>" <strong>rel="sweetheart date met&nbsp;nofollow"</strong>&gt;Jane&lt;/a&gt;<br /> Google позволяет писать этот атрибут как&nbsp;в&nbsp;верхнем, так&nbsp;и&nbsp;в нижнем регистре. Кроме того, добавление нового значение аттрибута не&nbsp;противоречит рекомендациям W3C.<br /> C&nbsp;точки зрения поисковой системы, добавление rel="nofollow" к&nbsp;ссылке означает следующее:<br /> * Поисковая система не&nbsp;проследует по&nbsp;ссылке на&nbsp;сайт, на&nbsp;который она&nbsp;указывает. <br /> * Поисковая система не&nbsp;будет использовать данную ссылку при&nbsp;расчете ссылочного &laquo;веса&raquo; сайта, на&nbsp;который она&nbsp;указывает. <br /> * Поисковая система не&nbsp;будет использовать слова, приведенные в&nbsp;ссылке для&nbsp;определения релевантности сайта поисковым запросам.<br /> <a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />Подробности на&nbsp;английском</a>.</div><br /> <b>Удалено:</b><br /> <div class="deletions">&lt;a <strong>rel="nofollow&quot;</strong> href="<a href="http://www.example.com/page.html" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/page.html</a>" &gt;Моя домашняя страничка&lt;/a&gt;<br /> (<a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://blog.searchenginewatch.com/blog/050118-204728</a> Подробности на&nbsp;английском)) (пока).</div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-21+00%3A07%3A01 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A07%3A01">2006-11-21 00:07:01</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A07%3A26">2006-11-21 00:07:26</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">&lt;a href="http://www.example.com/&quot;&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a href="http://www.example.com/&quot; <strong>rel="nofollow"</strong>&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a <strong>rel="nofollow&quot;</strong> href="<a href="http://www.example.com/page.html" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/page.html</a>" &gt;Моя домашняя страничка&lt;/a&gt;</div><br /> <b>Удалено:</b><br /> <div class="deletions">&lt;a href="http://www.example.com/"&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a href="<a href="http://www.example.com/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/</a>" <strong>rel="nofollow"</strong>&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a <strong>rel="nofollow"</strong> href="<a href="http://www.example.com/page.html" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/page.html</a>" &gt;Моя домашняя страничка&lt;/a&gt;</div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-21+00%3A05%3A04 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A05%3A04">2006-11-21 00:05:04</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A07%3A01">2006-11-21 00:07:01</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">&lt;a href="http://www.example.com/"&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a href="<a href="http://www.example.com/" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/</a>" <strong>rel="nofollow"</strong>&gt;Моя домашняя страничка&lt;/a&gt;<br /> &lt;a <strong>rel="nofollow"</strong> href="<a href="http://www.example.com/page.html" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://www.example.com/page.html</a>" &gt;Моя домашняя страничка&lt;/a&gt;</div><br /> <b>Удалено:</b><br /> <div class="deletions"><!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;href="http://www.example.com/"&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--><br /> <!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;href="http://www.example.com/"&nbsp;**rel="nofollow"**&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--><br /> <!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;**rel="nofollow"**&nbsp;href="http://www.example.com/page.html"&nbsp;&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--></div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-17+21%3A33%3A53 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-17+21%3A33%3A53">2006-11-17 21:33:53</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-21+00%3A05%3A04">2006-11-21 00:05:04</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">Этот аттрибут первым начал использовать <a name=".rurobots.google" href="http://robotstxt.org.ru/rurobots/google" class="" title="rurobots&nbsp;/&nbsp;google">Google</a>. Довольно быстро его&nbsp;поддержали <a name=".rurobots.msn" href="http://robotstxt.org.ru/rurobots/msn" class="" title="rurobots&nbsp;/&nbsp;msn">MSN</a> и&nbsp;<a name=".rurobots.yahoo" href="http://robotstxt.org.ru/rurobots/yahoo" class="" title="rurobots&nbsp;/&nbsp;yahoo">Yahoo</a>. Задача атрибута <strong>rel="nofollow"</strong> &mdash; показать, что&nbsp;владелец сайта не&nbsp;одобрил данную ссылку. Пржде всего он&nbsp;рассчитан на&nbsp;сервисы, позволяющие пользователям самостоятельно размещать ссылки. Например &ndash; каомментарии в&nbsp;блогах или&nbsp;форумах.<br /> Вот, к&nbsp;примеру, как&nbsp;выглядит оригинальная ссылка:<br /> <!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;href="http://www.example.com/"&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--><br /> Вот&nbsp;как эта&nbsp;же&nbsp;ссылка будет выглядеть после добавления rel="nofolow":<br /> <!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;href="http://www.example.com/"&nbsp;**rel="nofollow"**&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--><br /> Позиция атрибута не&nbsp;играет никакой роли, например, такой вариант тоже сработает:<br /> <!--notypo--><div class="code"><code><font color="#000000"> &lt;a&nbsp;**rel="nofollow"**&nbsp;href="http://www.example.com/page.html"&nbsp;&gt;Моя&nbsp;домашняя&nbsp;страничка&lt;/a&gt;</font> </code></div><!--/notypo--><br /> (<a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://blog.searchenginewatch.com/blog/050118-204728</a> Подробности на&nbsp;английском)) (пока).<br /> Иногда, вместо того чтобы &laquo;запрещать&raquo; индексацию проще сделать так, чтобы робот просто не&nbsp;смог до&nbsp;нее добраться. Зачастую эта&nbsp;задача легко решается программным способом.</div><br /> <b>Удалено:</b><br /> <div class="deletions">Этот аттрибут понимают <a href="http://robotstxt.org.ru/rurobots/google" class="" title="rurobots&nbsp;/&nbsp;google">Google</a>, <a href="http://robotstxt.org.ru/rurobots/msn" class="" title="rurobots&nbsp;/&nbsp;msn">MSN</a> и&nbsp;<a href="http://robotstxt.org.ru/rurobots/yahoo" class="" title="rurobots&nbsp;/&nbsp;yahoo">Yahoo</a>. (<a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://blog.searchenginewatch.com/blog/050118-204728</a> Подробности на&nbsp;английском)) (пока).<br /> Иногда, вместо того чтобы &laquo;запрещать&raquo; индексацию проще сделать так, чтобы робот просто не&nbsp;смог до&nbsp;нее добраться ;).</div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-10+09%3A27%3A00 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A27%3A00">2006-11-10 09:27:00</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-17+21%3A33%3A53">2006-11-17 21:33:53</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h113-1"></a><h1>Не предусмотренные стандартом средства ограничения доступа</h1></div><br /> <b>Удалено:</b><br /> <div class="deletions"><a name="h113-1"></a><h1>Не предусмотренные стандартом средства ограничения доступом</h1></div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-10+09%3A26%3A42 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A26%3A42">2006-11-10 09:26:42</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A27%3A00">2006-11-10 09:27:00</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions">Этот аттрибут понимают <a href="http://robotstxt.org.ru/rurobots/google" class="" title="rurobots&nbsp;/&nbsp;google">Google</a>, <a href="http://robotstxt.org.ru/rurobots/msn" class="" title="rurobots&nbsp;/&nbsp;msn">MSN</a> и&nbsp;<a href="http://robotstxt.org.ru/rurobots/yahoo" class="" title="rurobots&nbsp;/&nbsp;yahoo">Yahoo</a>. (<a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://blog.searchenginewatch.com/blog/050118-204728</a> Подробности на&nbsp;английском)) (пока).</div><br /> <b>Удалено:</b><br /> <div class="deletions">Этот аттрибут понимают <a href="http://robotstxt.org.ru/rurobots/google" class="" title="rurobots&nbsp;/&nbsp;google">Google</a>, <span class="missingpage">/rurobots/msn</span><a href="http://robotstxt.org.ru/MSN/edit?add=1" title="Создать эту страницу">?</a> и&nbsp;<a href="http://robotstxt.org.ru/rurobots/yahoo" class="" title="rurobots&nbsp;/&nbsp;yahoo">Yahoo</a>. (<a href="http://blog.searchenginewatch.com/blog/050118-204728" target="_blank" title="Внешняя ссылка (откроется в новом окне)" class="outerlink"><img src="http://robotstxt.org.ru/themes/default/icons/web.gif" alt="" border="0" />http://blog.searchenginewatch.com/blog/050118-204728</a> Подробности на&nbsp;английском)) (пока).</div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-10+09%3A26%3A15 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A26%3A15">2006-11-10 09:26:15</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A26%3A42">2006-11-10 09:26:42</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h113-1"></a><h2>Ограничения с&nbsp;помощью mod_rewrite, Javascript и&nbsp;.htaccess</h2></div><br /> <b>Удалено:</b><br /> <div class="deletions"><a name="h113-1"></a><h2>mod_rewrite, Javascript .htaccess</h2></div></div> http://robotstxt.org.ru/RobotsExclusion/noindex/show?time=2006-11-10+09%3A24%3A17 <div class="pageBefore"><img src="http://robotstxt.org.ru/images/z.gif" width="1" height="1" border="0" alt="" style="display:block" align="top" /></div><div class="page"> <b>Сравнение версий <a href="http://robotstxt.org.ru/RobotsExclusion/noindex" class="">/Robots&nbsp;Exclusion&nbsp;/&nbsp;noindex</a> за <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A24%3A17">2006-11-10 09:24:17</a> и <a href="http://robotstxt.org.ru/RobotsExclusion/noindex?time=2006-11-10+09%3A26%3A15">2006-11-10 09:26:15</a></b><br /> <br /> <b>Добавлено:</b><br /> <div class="additions"><a name="h113-1"></a><h2>mod_rewrite, Javascript .htaccess</h2> Иногда, вместо того чтобы &laquo;запрещать&raquo; индексацию проще сделать так, чтобы робот просто не&nbsp;смог до&nbsp;нее добраться ;).</div></div>