Приципы работы поисковиков

Открывая секреты Яндекс, Google и других: в чем принцип их работы и как мы его используем в целях продвижения сайтов.

Прежде всего, необходимо помнить,в чем заключаются функции поисковиков. Их две:

• находить новые сайты и вносить их в свои базы;

• давать оценку сайтам и ранжировать их по релевантности поисковым запросам.

Если с первой задачей поисковые системы справляются довольно легко, то со второй уже возникают проблемы.

Поисковые системы постоянно находятся в поиске решений, которые позволили бы сделать так, чтобы пользователь в результатах поиска получал сайты, наиболее соответсвующие его ключевым запросам. В этом состоит главная задача поисковых систем: облегчить пользователю поиск, сделать его наиболее результативным. Это осуществляется засчет следующих компонентов, из которых состоят поисковики:

• Spider (паук) - специальная программа, которая занимается как раз поиском новых сайтов и скачиванием их в базу поисковика. Видит только HTML-код страницы, следовательно, не видит графику, скрипты и так далее. Поэтому большое количество графики и скриптов на оптимизацию никак не влияют, а в некоторых случаях даже ухудшают ее. К тому же, большое количество скриптов в HTML-коде может существенно тормозить индексацию страниц в поисковиках.
• Crawler ("странствующий" паук) - программа, занимающаяся тем же, что и spider, с той разницей, что поиск новых страниц и документов осуществляется с помощью перехода на них по ссылкам на уже известных поисковику сайтов. Таким образом, если ссылок на Ваш ресурс нет на других сайтах, то он остается невидимым для поисковиков.
• Indexer (индексатор) - программа, анализирующая страницы на предмет соответсвия разным поисковым запросам. Интересно, что алгоритм этой программы целиком никому неизвестен.
• Database (база данных) - база, в которой хранятся найденные поисковиком сайты и страницы. Некоторые поисковики используют общие базы.
• Web Server (собственно сайт поисковика) - отвечает за выдачу результатов поиска.

Поиск нужной пользователю информации в поисковиках осуществляется ключевым словам или фразам, которые более всего соответствуют запрашиваемой теме. Разные поисковики для этого используют разные алгоритмы, но принцип действия у всех одинаков. Выглядит он римерно так:

Программа-паук отыскивает в сети новые сайты, заносит их адреса и содержание в базу данных. Там страницы сайта ожидают индексации. После этого составляются каталоги с адресами и краткими описаниями ресурсов. Уже из этой базы поисковики выдают результаты поиска в соответствии с ключевыми запросами. Весь этот процесс по времени может занимать от нескольких недель до нескольких месяцев. При этом алгоритмы поиска хранятся в тайне, поэтому мало кто знает все тонкости работы поисковых систем. При этом владельцы поисковых систем стараются постоянно улучшать эти алгоритмы. Ведь это очень сложная задача - из миллионов сайтов найти те, которые наилучшим образом соответсвуют поисковому запросу.

Какие из этого можно сделать выводы? Такие, что поисковику (который по сути является роботом) не важно, какой у Вашего сайта дизайн, графика, анимация и так далее. Важно только текстовое содержание: присутствие в тексте ключевых слв, их плотность и так далее. Поэтому успех продвижения сайта в поисковых системах напрямую зависит от текстового контента сайта, его грамотного построения и расположения.