Сообщение от clecar
|
В яндексе сказано, xml или текстовый файл
|
Ну так что там еще сказано об этом? ) Файл sitemap не является обязательным, но если вы хотите не просто облегчить работу работу, но и чтобы он питал к вам уважение, то готовьте этот файл в xml-формате. Почему, как раз и поясняется.
Файл же robots.txt, это иное, это директивы роботу куда ему не следует лазить. Правда эти директивы будут исполнять добросовестные роботы, а для наглых есть .htaccess.