Пример robots.txt для NetCat
User-Agent: *
Disallow: /?
Disallow: /install/
Disallow: /links/
Disallow: /js/
Disallow: /netcat/
Disallow: /netcat_files/
Disallow: /*.swf
Disallow: /eng/Host: vash_sait.ru (или www.vash_sait.ru)
Sitemap: http://путь к вашей карте XML формата