Поисковая система

Происхождение и история термина

Происхождение термина. Кто первым употребил английское словосочетание search engine применительно к вебу, в источниках, использованных для этой статьи, не установлено, и автор термина здесь не называется. Дирк Левандовски пишет, что идея поисковой системы в её нынешнем виде сложилась уже в первые годы веба, а ранние Lycos и WebCrawler работали на том же принципе, что и современные поисковики ^[6]. К 1998 году выражение «Web search engine» уже использовалось в научной литературе — например, в заглавии статьи Брина и Пейджа ^[4]. В русском языке «поисковая система» с 2015 года — ещё и юридический термин: легальное определение введено в 149-ФЗ Федеральным законом № 264-ФЗ ^[13].

Два подхода раннего веба. В первой половине 1990-х доступ к содержимому Всемирной паутины пытались организовать двумя способами. Первый — каталоги (таксономии), куда редакторы вручную раскладывали сайты по рубрикам, как Yahoo!. Второй — полнотекстовые поисковые машины вроде AltaVista, Excite и Infoseek с поиском по ключевым словам на основе инвертированных индексов ^[5]. Ручные каталоги плохо масштабировались, и их популярность снизилась ^[5]. Брин и Пейдж в 1998 году описывали ту же развилку: списки, которые ведут люди, хорошо покрывают популярные темы, но субъективны и дороги в поддержке, а автоматические системы на сопоставлении ключевых слов часто возвращают слишком много низкокачественных совпадений ^[4].

Масштаб первых систем (исторические данные по статье 1998 года). Брин и Пейдж называют World Wide Web Worm (WWWW) одной из первых веб-поисковых систем: в 1994 году её индекс насчитывал 110 000 веб-страниц и документов, а запросов было в среднем около 1500 в день ^[4]. К ноябрю 1997 года крупнейшие поисковики заявляли индексы от 2 млн (WebCrawler) до 100 млн веб-документов, а AltaVista — около 20 млн запросов в день ^[4]. Какую систему считать «первой», зависит от определения; в этой статье первенство не утверждается.

Google и ссылочный анализ (1998). В статье «The Anatomy of a Large-Scale Hypertextual Web Search Engine» Сергей Брин и Лоуренс Пейдж представили прототип Google с полнотекстовой и гиперссылочной базой минимум из 24 млн страниц ^[4]. Ключевая идея — использовать не только текст страниц, но и структуру ссылок и анкорный текст; для оценки «цитируемости» страницы авторы ввели PageRank ^[4]. Учебник Маннинга, Рагхавана и Шютце объясняет, почему это понадобилось: классические методы информационного поиска оценивают соответствие документа запросу, но для веба нужно ещё оценивать авторитетность документа ^[5].

Россия: Яндекс. По официальной истории компании, будущие создатели Яндекса с 1990 года работали над поисковыми технологиями в малом предприятии «Аркадия. Разумные проекты» ^[9]. В 1993 году появилось название Yandex — сокращение от «yet another indexer» («ещё один индексатор») ^[9]. 23 сентября 1997 года была анонсирована поисковая машина Яndex-Web; её индекс тогда охватывал около 5 тысяч сайтов и примерно 4 ГБ текста, а система учитывала морфологию русского языка, расстояние между словами и ранжировала документы ^[9]. Анонс прошёл на выставке Softool в Москве ^[10]. Компания «Яндекс» зарегистрирована в 2000 году ^[9].

Как менялся смысл. В 1990-е «поисковая система» означала прежде всего машину, возвращающую список ссылок по ключевым словам ^[5]. Сегодня крупные поисковики дополняют список генеративными ответами — AI Overviews и AI Mode у Google ^[3], Алиса AI в Поиске у Яндекса ^[12], — которые опираются на проиндексированные страницы ^{[3; 12]}.

Суть и механизм

Главная особенность поисковой системы — разделение работы на подготовительную часть (сбор и обработка документов) и ответ на запрос. Яндекс в архивном описании своей технологии прямо пишет, что не обходит весь интернет при каждом вопросе ^[11]. Google называет свой индекс большой базой данных, размещённой на тысячах компьютеров ^[1].

Этапы работы

Индексирование не гарантировано: Google прямо пишет, что не гарантирует сканирование, индексирование или показ страницы ^[1]. Яндекс также указывает на ограничения, от которых зависит, будет ли документ проиндексирован вообще ^[19].

Компоненты поисковой системы

Архитектуру удобно рассматривать на двух документах: классической статье о Google 1998 года и архивном описании технологии Яндекса. Описание Яндекса помечено самой компанией как архивное и может содержать устаревшие сведения ^[11], поэтому оно используется только для объяснения принципа.

Компоненты поисковой системы и методы ранжирования, включая PageRank, разбирает и русскоязычная работа А. В. Кириллова (2009): классические методы информационного поиска для веба автор предлагает дополнять ранжированием с учётом цитирования ^[22].

Ранжирование — в двух словах

Ранжирование решает, в каком порядке показать найденные документы. Одной текстовой релевантности вебу мало — нужна ещё оценка авторитетности ^[5]; Брин и Пейдж использовали для этого ссылки и анкорный текст ^[4]. Современные поисковики учитывают множество сигналов, включая контекст пользователя ^[1]; подробно — в статьях «Ранжирование» и «PageRank».

Генеративный слой

• Алиса AI в Поиске (Яндекс). Изучает релевантные страницы из результатов поиска и формирует структурированный ответ, обычно со ссылками на страницы-источники. Справка предупреждает: «Ответ Алисы AI может содержать неточности» — и советует проверять данные по ссылкам или в выдаче ^[12].
• AI Overviews и AI Mode (Google). AI Overviews помогают быстрее понять суть сложной темы, AI Mode рассчитан на запросы, где нужны дальнейшее исследование, рассуждение или сложные сравнения ^[3]. Обе функции могут использовать технику query fan-out — несколько связанных поисков по подтемам и источникам данных ^[3]. Чтобы страница могла появиться в них как ссылка, она должна быть проиндексирована и допускаться к показу в Google Поиске со сниппетом; дополнительных технических требований Google не устанавливает ^[3].

Подробнее — в статьях «Нейропоиск» и «GEO (оптимизация под генеративный поиск)».

Виды и классификации

По охвату (классификация Д. Левандовского)

Немецкий исследователь Дирк Левандовски в монографии «Understanding Search Engines» (2023) относит к поисковым системам четыре типа и отдельно перечисляет другие способы поиска в вебе ^[6].

К «другим системам» доступа к информации, которые поисковыми системами в этом смысле не являются, Левандовски относит веб-каталоги, сервисы социальных закладок, вопрос-ответные сайты и социальные сети ^[6].

По типу контента: вертикали внутри универсального поиска

Универсальный поисковик ищет не только по веб-страницам. Google сообщает, что ведёт несколько индексов для разных типов информации — помимо веб-страниц, это, например, книги из библиотек, расписания общественного транспорта и открытые данные ^[27]. Левандовски описывает, как результаты из общего веб-индекса дополняются так называемыми вертикальными коллекциями — новостями, изображениями, видео; на этом принципе построен универсальный поиск (universal search) ^[6].

По модели ответа

Эта группировка — рабочая схема, а не классификация из литературы:

1. Список ссылок — классическая выдача: ранжированные ссылки со сниппетами ^[5].
2. Гибрид «список + генеративный ответ» — в выдачу встроен ответ модели со ссылками на источники; так устроены Алиса AI в Поиске и Google AI Overviews ^{[3; 12]}.
3. Чат-ассистенты с функцией поиска — диалоговые сервисы, которые обращаются к поиску при ответе; подробно — в статье «Нейропоиск».

Сравнение со смежными инструментами

По рынку

По данным StatCounter за сентябрь 2026 года, доли поисковых систем в России и мире выглядят так ^{[15; 16]}:

Методика. StatCounter считает не запросы, а переходы из поисковых систем на сайты, где установлен его счётчик; сеть насчитывает более 1 млн сайтов и более 3 млрд просмотров страниц в месяц ^[17]. Яндекс Радар рассчитывает доли поисковых систем по агрегированной статистике Яндекс Метрики, с 2015 года, для России, Беларуси, Казахстана и Турции ^[18]. Выборки и способы подсчёта разные, поэтому цифры разных измерителей не совпадают и их нельзя смешивать в одном ряду.

Как применяется на практике

Для пользователя. Левандовски отмечает, что из множества возможных точек доступа к информации в вебе поисковые системы — самые распространённые; наряду с ними пользователи переходят на сайты напрямую по адресу и из социальных сервисов ^[6]. Запросы принято делить на три широкие группы: информационные (общие сведения по теме), навигационные (найти сайт конкретной организации) и транзакционные (подготовка к действию — покупке, скачиванию, бронированию) ^[5]. Подробнее — в статье «Поисковый интент».

Для бизнеса и СМИ. Работу над видимостью сайта в поиске называют поисковой оптимизацией (SEO); Google описывает её как помощь поисковым системам в понимании контента и пользователям — в том, чтобы найти сайт и решить, переходить ли на него ^[24]. Органические позиции не покупаются: в Поиске Google продаёт только рекламу, а плату за включение в индекс и за позиции в результатах не берёт ^[2]; не принимает он и оплату за более частое сканирование или более высокое ранжирование ^[1]. Платное размещение на поиске — отдельный продукт, контекстная (поисковая) реклама. Маннинг и соавторы описывают его историю: пионером поисковой рекламы с оплатой за клик (модель CPC) они называют компанию Goto, позднее переименованную в Overture; спонсорские результаты поисковики стали показывать отдельно от алгоритмических и визуально отличными от них ^[5]. В Яндекс Директе блок Премиум-показов расположен над результатами поиска, остальные объявления могут показываться в середине или внизу страницы ^[21].

Для вебмастера. У поисковиков есть кабинеты, через которые владелец сайта получает данные о его присутствии в поиске и управляет индексированием. Google Search Console — бесплатный сервис для мониторинга и устранения проблем с присутствием сайта в Google Поиске; регистрироваться в нём, чтобы попасть в результаты, не обязательно ^[20]. Яндекс в справке Вебмастера описывает файлы robots.txt (параметры индексирования для роботов) и Sitemap (список внутренних ссылок в формате XML, влияющий на приоритет обхода) ^[19]. У Microsoft есть Bing Webmaster Tools — бесплатные отчёты и инструменты для улучшения показателей сайта в поиске Bing ^[25].

Google и Яндекс: где подходы различаются

Российская специфика. В России две системы занимают почти весь рынок переходов ^[15], у каждой свой индекс, свои роботы и кабинет вебмастера ^{[1; 11; 19; 20]}. Поэтому сайт для российской аудитории обычно отслеживают в обеих системах. Учёт морфологии русского языка Яндекс заявлял уже при анонсе в 1997 году ^[9].

Типовые сценарии.

1. Страница находится в Google, но не находится в Яндексе. У систем разные индексы и роботы, поэтому индексирование проверяют в кабинете каждой системы ^{[1; 19; 20]}.
2. Search Console показывает, что страница проиндексирована, но в выдаче её не видно. Возможные причины по Google: нерелевантность запросам, низкое качество, запрет показа в robots meta ^[1].
3. Алиса AI в Поиске сослалась на страницу сайта, но перехода не было — пользователь получил ответ прямо в выдаче. Это явление разбирается в статье «Поиск без кликов».

Как измерить или проверить

Саму поисковую систему пользователь не измеряет — измеряют присутствие сайта в ней и вес поиска на рынке.

• Доля поиска в трафике сайта. Системы веб-аналитики показывают источники, которые приводят посетителей; в Яндекс Метрике для этого есть отчёт «Источники, сводка» ^[23].
• Присутствие в индексе, показы и клики. Search Console помогает отслеживать присутствие сайта в Google Поиске ^[20], Яндекс Вебмастер — в Яндексе ^[19], Bing Webmaster Tools — в Bing ^[25].
• Доли рынка. StatCounter (переходы на сайты со счётчиком, ежемесячно) ^[17] и Яндекс Радар (агрегированные данные Метрики) ^[18]. Это доля переходов в выборке сайтов, а не доля всех поисковых запросов ^[17].

Ошибки, ограничения и спорные вопросы

Распространённые заблуждения.

Неполнота индекса. Индекс не охватывает весь веб: часть страниц не индексируется по решению системы ^[1], часть закрыта владельцами сайтов ^[19]. Содержимое, недоступное универсальным поисковикам, Левандовски рассматривает в главе «The Deep Web» ^[6].

Реклама и нейтральность. В приложении A к статье 1998 года Брин и Пейдж утверждали, что цели рекламной бизнес-модели не всегда совпадают с задачей качественного поиска, и писали, что поисковики, финансируемые рекламой, будут «inherently biased towards the advertisers» — «по своей природе склоняться в пользу рекламодателей» ^[4]. Это позиция авторов 1998 года. Сегодня Google публично заявляет, что не принимает оплату за позиции в результатах поиска ^[2]. Предвзятости и нейтральности поисковых систем Левандовски посвящает отдельную главу «Search Engines Between Bias and Neutrality» ^[6].

Генеративные ответы. Яндекс прямо предупреждает, что ответы Алисы AI могут содержать неточности ^[12]. Ещё один предмет отраслевой дискуссии — сокращение переходов на сайты, когда пользователь получает ответ прямо в выдаче; количественные оценки этого эффекта здесь не приводятся (см. «Поиск без кликов»).

Расхождение данных о рынке. StatCounter и Яндекс Радар используют разные выборки и методы ^{[17; 18]}, поэтому их оценки доли одной и той же системы могут различаться. Корректно указывать измерителя, период и что именно считается.

Правовой аспект

Согласно п. 20 ст. 2 Федерального закона от 27.07.2006 № 149-ФЗ «Об информации, информационных технологиях и о защите информации» (пункт введён Федеральным законом от 13.07.2015 № 264-ФЗ), поисковая система — «информационная система, осуществляющая по запросу пользователя поиск в сети "Интернет" информации определенного содержания и предоставляющая пользователю сведения об указателе страницы сайта в сети "Интернет" для доступа к запрашиваемой информации» на сайтах других лиц; исключение составляют системы, используемые для государственных и муниципальных функций, услуг и иных публичных полномочий (в ред. от 26.06.2026) ^[13]. Отдельного определения «оператора поисковой системы» в ст. 2 нет; общее понятие оператора информационной системы дано в п. 12 той же статьи ^[13].

Статья 10.3 того же закона устанавливает обязанности оператора поисковой системы. По требованию гражданина оператор обязан прекратить выдачу ссылок на сведения о заявителе, если они распространяются с нарушением законодательства, недостоверны, а также неактуальны или утратили значение для заявителя в силу последующих событий или его собственных действий ^[14]. Обязанность не распространяется на сведения о событиях, содержащих признаки уголовно наказуемых деяний, сроки привлечения к ответственности за которые не истекли, и о преступлениях, судимость за которые не снята или не погашена; требования к содержанию заявления гражданина установлены ч. 2 ст. 10.3 (149-ФЗ в ред. от 26.06.2026; ч. 1 ст. 10.3 — в ред. Федерального закона от 22.06.2024 № 158-ФЗ) ^[14]. Изложенное носит справочный характер и не является юридической консультацией; вопрос о том, распространяется ли норма на конкретный сервис, требует оценки юриста.

Частые вопросы

Связанные термины

• Поисковый робот
• Сканирование (краулинг)
• Индексация
• Ранжирование
• Поисковая выдача (SERP)
• Поисковый запрос
• SEO (поисковая оптимизация)
• PageRank
• Нейропоиск
• Яндекс Вебмастер / Google Search Console