Проблему лишнего запроса порождает и использование заставок (splash screen). Это может быть, например, страница с логотипом фирмы и ссылкой «вход» или выбором языка — страница, не несущая информации, но зато требующая лишнего запроса робота и занимающая полезное место в базе данных поисковой системы. Почему бы просто не расположить логотип в одном верхнем углу страницы, а переключатель языка в другом?

Не следует забывать, что при выборке ссылок для дальнейшего «продвижения» по вашему веб-сайту робот анализирует html-теги a, поэтому навигация через формы (html-тег form) и яваскрипт^* останется для него незамеченной, и пользоваться такой навигацией можно только при условии, что она ведет на страницы, которые не нужно индексировать, либо к этим страницам есть альтернативный доступ через html-теги a.

При проектировании «ссылочной инфраструктуры» веб-сайта следует помнить о том, что некоторые роботы (например, Altavista) не обрабатывают ссылки, содержащие знак ?, которые они считают динамическими. Поэтому, если у вас есть несколько динамических страниц с параметрами, которые вы желаете обязательно проиндексировать, воспользуйтесь, например, внутренними редиректами, которые предоставляет модуль mod_rewrite популярного веб-сервера^* apache. С помощью одной простой директивы можно сделать так, чтобы ссылка на вашем веб-сайте имела вид /cities/russia/moscow.html, а настоящий запрос выглядел как /cgi-bin/citie
s.cgi?country=russia&city=moscow.

При верстке веб-сайта на каждой странице желательно поместить три основных тега, которые могут существенно повлиять на положение данной страницы в результатах поиска, если в них встречаются слова из запроса.

• html-тег title — заголовок страницы, по возможности должен быть уникальным для каждой страницы и не слишком длинным (не больше 20-25 символов). Пример: «<title>Страница Пупкина Василия. Архив умных мыслей. Мысль о смысле жизни</title>«.
• мета-тег description — описание страницы. Некоторые поисковики также показывают содержимое этого мета-тега в результатах поиска. Пример: «<meta name=»description» content=»Одна из наиболее умных мыслей Пупкина Василия, записанная со слов автора»>«.
• мета-тег keywords — ключевые слова, по которым, как вам кажется, будут искать данную страницу. Не рекомендуется задавать слишком много слов, а также повторять одни и те же слова, т.к. поисковики все равно отбросят лишнее при индексации страницы. Но зато очень полезно ставить часто употребляемые синонимы. Пример: «<meta name=»keywords» content=»Пупкин Василий смысл жизни умные гениальные мысли изречения»>«.

Не все поисковые системы одинаково обрабатывают данные теги (например, «Рамблер» игнорирует description и keywords), но в данном случае лучше рассчитывать на те поисковики, которые «умеют» больше. Помещать какие-то слова в html-комментарии «<!— —>» в качестве своеобразной замены мета-тега keywords не рекомендуется, так как омментарии поисковиками игнорируются.

В каждой поисковой системе неявно заложено некое максимальное количество страниц, которые можно проиндексировать для одного веб-сайта (обычно несколько тысяч). При подходе к этому лимиту поисковый робот почти все свое время, выделенное для обработки вашего веб-сайта, начинает тратить на проверку изменений в уже проиндексированных страницах, а новые добавляет в базу данных все реже и реже. Поэтому, если ваш веб-сайт очень большой, рекомендуется разрешить для индексации только наиболее значимые его части (о том, как ограничить индексацию, см. ниже). Например, для новостного веб-сайта можно разрешать индексацию только новостей за несколько последних месяцев, а поиск в полном архиве новостей организовать «у себя». Вообще, желательно сразу закрывать доступ к страницам, не несущим полезной информации либо меняющим свое содержание или от запроса к запросу или в зависимости от cookies^*.