Robots.txt — текстовый файл, расположенный на сайте, который предназначен для роботов поисковых систем. В этом файле веб-мастер может указать параметры индексирования своего сайта как для всех роботов сразу, так и для каждой поисковой системы по отдельности.

Sitemaps — это XML-файл с информацией для поисковых систем

Десятки миллионов пользователей задают свои вопросы поиску, миллионы сайтов дают на них ответ, и те из них, которые лучше всего ответили на вопрос пользователя, получают благодарных посетителей. Задача поиска Яндекса – как можно быстрее привести пользователя к ответу.

Чтобы обеспечить пользователям удобство работы, следует найти разумное сочетание формы представления и функциональности сайта.

Структура сайта и его содержание тесно связаны друг с другом. Приятные впечатления посетителей зависят, прежде всего, от правильного расположения и представления информации на сайте.