В большинстве случаев сайт готовят к индексации после того как выгрузили в интернет.
Правильно это делать заранее
В идеале дизайн должен быть уникальным.
Упор делаем на тексовый контент. Не стоит делать страницы, состоящих только из картинок. Сейчас в моде flash, на котором полностью создаются сайты. Flash конечно индексируется, но плоховато.
Использование фреймов — это лишний запрос для поискового робота, что может отложить индексацию.
Для создания статических страниц рекомендуется использовать модуль mod_rewrite сервера Apache.
Предположим мы можем преобразовать ссылку вида partner.php?10355 в адрес 10355.html
Контент
Поисковики ценят уникальность. Ворованный контент с других проиндексированных сайтов не принесет удачи.
Хотя бывают исключения. Например у моего знакомого был полностью сворован контент по строительной тематике с 8 сайтов, которые успешно функционировали около года. Некто перенес их на свои свежие домены и более сильно прокачал ссылочной массой. В итоге усайты знакомого выкинуло из индекса, у некто они стабильно наблюдаются в выдаче. Честно говоря мы так и не поняли как это произошло. Робот Яндекса ошибся.
Рекомендуемое количество знаков в тексте 2000-7000, этого достаточно.
Иногда возникает ситуация, что нужно запретить к индексации определенный участок текста или ссылку. В этом случае используют тег <noindex> — он применим для роботов Яндекса и Рамблера.
Для сайтов с большим количеством контента, для меня это от 30 страниц — настоятельно рекомендую ставить карту сайта. Доступным языком — это страница на которой содержатся ссылки на все остальные страницы ресурса.
Проверьте наличие файла robots.txt в основной директории сайта.
Поисковые роботы при заходе на сайт обращаются к robots.txt, в котором содержатся инструкции к индексации.
Если файла не существут, значит все будет индексироваться. Более подробную информацию о взмолжностях robots.txt ищите в поисковике.
При проектировании ссылочной инфраструктуры веб-ресурса следует помнить о том, что лучшие для индексации страницы — статические, движков с динамическими страницами уже давно не встречал, скорее всего вы с этим не сталкнетесь
Роботы поисковых систем планируют очередное посещения вашего сайта в зависимости от количества информации на страницах и частоту обновления сайта. Крайне не рекомендуется создавать временные страницы вида «Сайт на реконструкции».
Важные мета-теги для индексирования:
Robots
Содержит указания для роботов поисковых машин, собирающих информацию о HTML документах в сети.
Значение свойства Robots может состоять из следующих директив, разделенных запятыми:
Index — эта страница должна быть индексирована.
Noindex — эта страница не должна индексироваться.
Follow — прослеживать гиперссылки на странице.
Nofollow — не прослеживать гиперссылки на странице.
All = index, follow (принято по умолчанию).
None = noindex, nofollow.
<META name=Robots content=»all»>
Если не прописать эту строчку, для поисковиков по умолчанию это считается all
Document-state
Предназначен для управления индексацией поисковых роботов. Может иметь два значения:
Static — Нет необходимости индексировать эту страницу в будущем.
Dynamic — Индексировать эту страницу регулярно (по умолчанию).
Пример: <META Name=»Document-state» content =»Dynamic»>
Revisit
Указывает поисковому роботу, через сколько дней ему нужно вернуться и переиндексировать данный документ.
Пример: <META Name=»Revisit» content=»3″>
Content-Type
Отвечает за указание типа документа и кодировки символов.
Пример: <META HTTP-EQUIV=”Content-Type” content=»text/html; charset=windows-1251″>
Домен и хостинг должны быть платными.
Тем более в наше время на рынке существует масса выгодных предложений.
Лично я пользуюсь услугами http://www.domensell.ru/ на домены по 95 рублей я думаю у каждого найдутся деньги.
Большинство популярных бесплатных хостингов занесены под фильтр (блек лист) из-за дорвеев и говносайтов.
Еси совсем нет денег, тогда рекомендую narod.ru он лучше индексируется Яндексом.
По той же причине, Яндекс предвзято относится к бесплатным доменам 3-го уровня .net.ru, .org.ru, .pp.ru
Для русскоязычных сайтов рекомендую брать домены .ru или .su Есть мнения, но они сомнительны, что у национальных доменов есть приоритет к быстроте индексации в Яндексе.