Автор: Sergey Prach

Карта сайта на Google Webmasters Tool – это просто для тестирования карты сайта, ну и ручного «пинга» Гуглу при небходимости. Сама же карта сайта должна быть обязательно указана в robots.txt.
Для понимания зачем нужно указывать в robots.txt важно вспомнить зачем вообще нужна карта сайта. А нужна она для того, что бы поисковик не перелопачивал каждый раз весь сайт, для поиска новых и удаленных материалов, а только изменившиеся страницы.
И именно поэтому карта сайта должна быть динамически формируемым документом сайта, а не статически составлена каким-то внешним скриптом.