Пример robots.txt для TYPO3
User-Agent: *
Disallow: /fileadmin/website/notimportant/
Disallow: /flow/drafts/
Disallow: /neos/drafts/
Disallow: /t3lib/
Disallow: /typo3/
Disallow: /typo3conf/
Disallow: /typo3temp/
Disallow: /typo3cms/drafts/
Disallow: /*?id=*Host: vash_sait.ru (или www.vash_sait.ru)
Sitemap: http://путь к вашей карте XML формата