Ein paar Standard Ausnahmnen für die Roboter.
User-agent: *
Disallow: /fileadmin/templates/
Disallow: /typo3/
Disallow: /t3lib/
Disallow: /typo3conf/
Disallow: /typo3_src/
Disallow: /typo3temp/
Und zur Vermeidung von DuplicateContent im Google Index für tt_news
User-agent: googlebot
Disallow: /*?tx_ttnews
Disallow: /*?tx_indexedsearch
Die Werte sind natürlich der aktuellen Struktur anzupassen.


