Настройка файлов robots.txt

Нужно настроить на нескольких сайтах файлы robots.txt чтобы выдавало корректные описания сайтов в поисковой выдаче. + по мелочам кое-где проконсультировать по оптимизации.