Поисковая оптимизация появилась одновременно с первыми поисковыми системами, ее история неразрывно связана с их развитием. Используемые в поисковиках алгоритмы ранжирования были очень несовершенными. Фактически, распределение сайтов в поисковой выдаче зависело только от содержания ключевых слов из запроса в текстовых элементах страницы:
- метатегах – HTML-метках (Tile, Description, H1, Keywords и т. д.), структурирующих данные о веб-странице для поискового робота;
- контенте – заголовке, подзаголовке и основной части текста, таблицах, названиях видеороликов и изображений.
В этот период SEO-продвижение сайта в интернете заключалось в том, просто насытить эти элементы ключевыми словами. При этом не обязательно было даже задумываться о качестве и релевантности самого контента – доходило до того, что пользователи видели на первых позициях поисковой выдачи сайты, заходили на них, а внутреннее содержание абсолютно не соответствовало запросу. Просто на странице было много «нужных» ключевых слов, часто вставленных невпопад. Ситуацией также воспользовались рекламные сайты, на которых публиковались различные объявления с «ключевиками». Все это быстро снизило качество работы первых поисковых систем.
Ситуация изменилась с появлением в 1998 году компании Google и одноименного поисковика. В нем впервые была использована технология PageRank, которая присваивала каждому веб-документу, связанному с другими страницами гиперссылками, числовое значение, выражающее «авторитетность» или «важность» в зависимости от количества ведущих на него ссылок и их «веса». Это серьезно ограничило возможность манипулирования поисковой системой, так как позиция сайта в поисковой выдаче определялась не только насыщенностью ключевыми словами, но и доверием к нему со стороны других ресурсов и их пользователей. Впоследствии эту технологию внедрили и другие поисковые системы – как старые, так и новые. А Google стал лидером на рынке интернет-поиска, которым остается и по сей день.
Впоследствии с каждым годом работа поисковиков совершенствовалась – вводились новые внутренние и внешние механизмы ранжирования, такие как:
- синтаксический и семантический анализ текста, позволяющий оценить его связность, новизну и полезность для пользователя, уникальность наряду с релевантностью запросам;
- ссылочное ранжирование – оценка цитируемости сайта на других ресурсах, отражающая его авторитетность;
- анализ поведенческих факторов, то есть действий пользователя, отражающих удобство, информативность, качество сайта (например, количество отказов, продолжительность сессии, количество просмотренных страниц и т. д.);
- анализ коммерческих факторов, влияющих на покупательскую активность пользователей. Например, широта ассортимента, наличие понятных категорий товаров и/или услуг, скидок, корректных фотографий и описаний продукции и т. д.;
- анализ технического состояния сайта – например, наличия файла robots, задающего правила индексации для поискового робота, количества ошибок HTML-кода, адаптации под мобильные устройства.
В результате усложнения работы поисковых систем изменилась и SEO-оптимизация сайта. Сегодня специалистам по поисковому продвижению нужно учитывать сотни критериев ранжирования и выполнять множество доработок веб-страницы, чтобы она отображалась на первых позициях поисковой выдачи.
