После того как мы составили файл robots.txt, нам нужно его загрузить на сервер в корневую директорию сайта. Для этого используются различные FTP-клиенты — программы для передачи файлов с компьютера на удаленный сервер и обратно.

FTP (англ. File Transfer Protocol — протокол передачи файлов) — стандартный протокол, предназначенный для передачи файлов по TCP-сетям (например, Интернет). FTP часто используется для загрузки сетевых страниц и других документов с частного устройства разработки на открытые сервера хостинга.

FTP-клиентов великое множество — FAR Manager, WinSCP, CuteFTP, SmartFTP, Directory Opus, Cyberduck, FireFTP (дополнение к Firefox), Transmit (под Mac), cURL (только командная строка), Total Commander (платный), FlashFXP (платный), net2ftp (только web-интерфейс).

Есть из чего выбирать как видите. В Википедии есть подробное сравнение различных FTP-клиентов, а также клиентов, использующих другие протоколы для передачи файлов — .

В этой статье я предлагаю вам ознакомиться с FTP-клиентом FileZilla. Он бесплатен, универсален и подойдет для основных задач нетребовательных пользователей.

Далее »

А тем временем, внезапно открылся магазин сувениров от нашего сайта Добро пожаловать по ссылке shop.robotstxt.org.ru и удачных покупок

Файл robots.txt – это текстовый файл. Поэтому для того, чтобы его создать или отредактировать, подойдет любой текстовый редактор. Даже обычный Блокнот, который есть в каждой операционной системе Windows. По-английски он называется Notepad. Находится в папке C:\Windows\System32 и имеет следующую иконку и имя файла:   notepad.exe

Блокнот (англ. Notepad) — простой текстовый редактор, являющийся частью операционных систем Microsoft Windows, начиная с вышедшей в 1985 году Windows 1.0, и Windows NT. Также «Блокнот» присутствует в операционной системе Windows 8.

Если вы начинающий вебмастер, я рекомендую подобрать более продвинутый редактор. Те, кто давно работает в IT-сфере, уже нашли что-то себе по душе: всякие адские программисты, матерые сеошники или крутые админы 80-го левела используют какой-нибудь EditPlus или jEdit, ну, или как и я — Notepad++, которому и посвящается этот пост

Среди текстовых редакторов есть что выбирать, можете сами просмотреть список  Ну, а пока скачиваем Notepad++ 6.2.2 (кстати, он сам обновляет свое ядро, так что в дальнейшем ничего скачивать не придется), устанавливаем его в качестве основного редактора для работы с *.txt файлами и радуемся

Далее »

Друзья! Я тут подумал и решил, что неплохо было бы завести блог, в котором можно более подробно рассказать про некоторые аспекты простым и понятным языком. Начиная от выбора программ для редактирования и заливки файла на сервер, заканчивая разбором некоторых важных моментов в составлении файла и информацией про sitemap.xml.

Основной фишкой этого блога будут скринкасты — видео, где я буду наглядно показывать и рассказывать о том, что написано на сайте. Пример такого видео можно видеть на главной странице сайта. Ролик доступен для просмотра на YouTube. Однако в нем нет голосовых комментариев. Что будет исправлено в ближайшем будущем

Также мне можно будет написать через форму обратной связи и задать любые вопросы. Со временем, по ним я составлю наиболее актуальный FAQ, а наиболее насущные вопросы разберу в блоге.