Книга: Яндекс Воложа. История создания компании мечты

Глава 12 Персональная машина слежения

Глава 12

Персональная машина слежения

Персонализация поиска означает, что каждый шаг, точнее, каждый клик, свидетельствующий о предпочтениях пользователя в Сети, отслеживается и анализируется. По сути, на каждого пользователя составляется досье: куда пошел, что узнавал, чем интересовался и чем удовлетворился.

Эффективность персонализированного поиска была продемонстрирована еще в 2003 г., когда в рамках рекламной сети «Яндекса» удалось выявить педофила из Сочи, разместившего контекстную рекламу на сайте поисковика. Арест произвели сотрудники управления «К»[6].

С некоторых пор на главной странице «Яндекса» под красивой иконкой с портретом Льва Толстого (помните — «Мы работаем на Льва Толстого»?), скрипичным ключом и прочим появился слоган: «Персональный поиск “Яндекса” отвечает лично вам». Много лет шел «Яндекс» к этой фразе.

Чтобы закрепить отыгранные у Google очки, чтобы приобрести новый импульс в развитии, в 2009 г. была реализована технология «Матрикснет». «Главный прорыв у нас произошел в декабре 2009 г. Мы внедрили новую платформу поиска, которая называется “Матрикснет”. Она позволяет машине “Яндекса” одновременно анализировать не сотни, а тысячи факторов. Это как для астронома новый телескоп с разрешающей способностью на порядок большей, чем у аналогов», — не без удовольствия отмечал Волож в интервью «Ъ» начало нового технологического этапа в развитии компании. По сути, речь идет о переходе к качественно иному формату поиска, персональному, когда ответ на запрос делается уже с учетом привычек, интересов, местонахождения и других особенностей пользователя.

«Матрикснет» стал переворотом в поиске и, наверное, даже вывел «Яндекс» из технологического тупика, — а как следствие, и из тупика управленческого, а в некотором будущем — и коммерческого. Это, правда, на тот момент было очевидно лишь яндексоидам.

К тому же «Матрикснет» устойчив к переобучению. Дело в том, что поисковым системам свойственен так называемый эффект переобучения, когда поисковая машина начинает находить несуществующие закономерности.

С этого момента с помощью «Матрикснета» формируется формула ранжирования «Яндекса», которую теперь можно настраивать отдельно для достаточно узких классов запросов.

А это означает, что с этого времени каждый шаг, точнее, каждый клик пользователя в Сети отлеживается и анализируется, на каждого пользователя составляется досье: кто и куда пошел, что узнавал и чем интересовался.

Это нормальная слежка. Разумеется, не ради слежки и не только ради денег, но и чтобы ускорить и углубить, улучшить и разнообразить ответ на запрос пользователя, соответственно, расширить возможности монетизации. Более детальная, точнее, целевая работа с пользователем — это дополнительный крючок для рекламодателя.

В частности, у «Яндекса» улучшилась геозависимость, что означает возможность географически локализовать поиск для региональных пользователей. По статистике «Яндекса», 15–30 % запросов предполагают получение местной, региональной информации. «Матрикснет» позволил показывать локальные результаты поиска для пользователей из 1250 российских городов. Волож говорит об этом так: «Мы существенно улучшили региональный поиск. “Яндекс” сейчас показывает более релевантные результаты для пользователей из разных городов. Для мировых поисковых систем поиск разнится по странам, для нас — по городам».

В результате «Яндексу» удалось совершить качественный скачок в работе поиска. А это означает, что «Матрикснет» стал одним из мощнейших ответов компании Google в многолетней войне поисковиков.

В декабре 2010 г. «Яндекс» внедрил новую поисковую технологию «Спектр» (версия «Краснодар»), способную суммировать и анализировать потребности пользователей, неявно сформулированные в запросе. Строго говоря, поисковая машина начинает отслеживать информационные интересы, привычки и пристрастия пользователя «Яндекса». Проявлять признаки интеллекта, или, если кому нравится такое определение, — признаки Большого Брата.

16 августа 2011 г. «Яндекс» запустил новую поисковую платформу «Рейкьявик», которая, запоминая запросы пользователя и используемый им язык, способна определить, интересуют ли его англоязычные ресурсы.

«Платформа учитывает поведение пользователя: история запросов сохраняется для конкретного браузера, при этом она абсолютно анонимна — в ней не содержится никакой информации о человеке, задающем эти запросы», — пояснил суть новой персонализированной технологии поиска Ростислав Шоргин, руководитель отдела маркетинга поисковых сервисов «Яндекса». Один из смыслов «Рейкьявика» — удержание своей аудитории от перехода на Google в случае потребности в поиске информации на зарубежных ресурсах. «Мы много экспериментировали, пытаясь найти наилучший способ удовлетворить потребности и тех и других. В результате мы решили научить поиск учитывать языковые предпочтения пользователей и подстраиваться под них», — отмечает Денис Расковалов, руководитель отдела разработки качества поиска.

На середину августа 2011 г. ответы на английском языке предпочитали около 8 % пользователей «Яндекса». «Рейкьявик» обращает внимание только на запросы на английском языке. Он отфильтровывает латинскую транслитерацию русскоязычных запросов, адреса сайтов, ошибки раскладки клавиатуры и т. д. При этом сам англоязычный вопрос не всегда означает поиск такого же ответа, уточняют в компании. Например, по запросам beatles или rothko человек может искать и русские сайты. «Рейкьявик» учитывает, часто ли пользователь открывает из результатов поиска веб-страницы на английском. Собранная информация о том, нужны ли пользователю англоязычные ресурсы, используется при ранжировании. И если они нужны, человек видит среди первых результатов поиска больше ссылок именно на них. Новый поисковый алгоритм специалисты «Яндекса» характеризуют как первый шаг в направлении создания технологии персонализации англоязычного поиска.

«Рейкьявик» был следующим шагом в глобальной битве за лидерство поисковиков после 19 мая 2010 г., когда «Яндекс» предложил пользователям поиск по англоязычным ресурсам. А что делать, если русскоязычный мир ограничен по определению, по факту 7–10 % народонаселения планеты? Это Baidu — единственный на сегодня национальный конкурент «Яндекса» — может быть спокоен: у него поисковая база роста — четверть населения планеты, есть куда развиваться и без дополнительных усилий, а главное, инвестиций в освоение англоязычного сектора Сети. Я сейчас говорю даже не о финансовой составляющей роста, хотя и в этом смысле Baidu обеспечен перспективой, опираясь на крупнейшую после США экономику — экономику Китая.

Россия, конечно, растет, но не такими темпами, а русскоязычный мир за пределами страны, скорее всего, со временем будет сужаться. Поэтому единственный реальный способ роста — освоиться в англоязычном секторе Сети, как всегда самом крупном.

Кстати, в русле этой стратегии произошло открытие в 2011 г. собственного дата-центра в США.

С августа 2011 г. «Яндекс» в рамках соглашения с компанией WeSee (ориентировочной стоимостью в несколько миллионов долларов) реализовал технологию piFilter, позволяющую распознавать нежелательный контент в изображениях. Это означает, что «Яндекс» к умению распознавать порнографический контент по словам и ссылкам (с 2009 г.) добавил еще один фильтр. Причем сделал это первым из российских интернет-компаний.

В 2011 г. в качестве подарка к началу нового учебного года «Яндекс» внедрил технологию таргетинга медийной рекламы «Крипта». Это означает, что к умению таргетировать рекламу по географии и частоте показа «Яндекс» первым среди мировых поисковиков, торгующих контекстной рекламой, добавил способность разделять показы контекстной рекламы по возрасту, полу и доходам, сообщил директор по развитию медийных продуктов компании Лев Глейзер. «Крипта» создана на основе метода машинного обучения «Матрикснет», реализованного в 2009 г. «Крипта» умеет анализировать поведение пользователей в Интернете и разделять их на группы, основываясь на анализе около 300 показателей. Технологию определения характеристик посетителей отрабатывали на основе данных 1 млн пользователей социальной сети деловых контактов «Мой Круг». Например, реальный пол виртуального пользователя «Крипта» научилась определять с точностью в 70 %. Оказывается, что женщины составляют более длинные поисковые запросы (3,5 слова) и чаще используют в них вопросительные слова («что такое любовь», «как похудеть» и т. п.), а мужчины (3,2 слова) больше используют цифры и латиницу. При этом мужчины делают опечатки чуть чаще. Выяснилось также, что при деловом общении люди обычно указывают реальный возраст. Надежность данных в почтовом сервисе гораздо ниже.

Таргетированная реклама — ее ввели с 1 сентября 2011 г. на всех сервисах, кроме главной страницы и поиска — будет в полтора раза дороже обычной, зато более целевая. Иллюстрируя способности новой технологии, Глейзер привел реальный пример из процесса тестирования «Крипты». Когда баннер с рекламой дорогого автомобиля стали показывать только целевой аудитории, уменьшился процент «кликающих» на него посетителей. Анализ неожиданной на первой взгляд реакции показал, что рекламой элитных автомобилей в Интернете чаще интересуются посетители с недостаточными для их покупки доходами, то есть делают это просто из любопытства. Таргетированная реклама отсекает информационный шум.

В сентябре 2011 г. «Яндекс» за $15 млн приобрел миноритарную долю в 10 % в американской компании Blekko (поисковая система blekko). Специфика американского поисковика в использовании заранее определенных поисковых тематик («слештегов»), которые вводит пользователь рядом с основным запросом, используя слеш («/», например, «/sport»). Таким образом, по замыслу создателей blekko, происходит ограничение круга сайтов, по которым ищет система, и результаты поиска получаются более релевантными и защищенными от спама и бесполезного контента. Аркадий Волож, который вошел в совет директоров Blekko, заявил следующее: «…мы верим, что у этого направления есть будущее». Компания Blekko основана в 2007 г. бывшими сотрудниками Yahoo! и Google. Аудитория blekko составляла на тот момент около 650 000 пользователей, из которых треть приходилась на американский рынок.

«Яндекс» продолжил умело и последовательно набирать очки в мировой гонке создания искусственного интеллекта, объясняя перед обществом эти действия задачей ускорения информационного и рекламного поиска, а для себя — коммерческим интересом и конкурентной борьбой.

Причем осознанно, что вполне следует, например, из комментария Ильи Сегаловича: «Искусственный интеллект — это не только обработка массивов информации. Это еще и восприятие устройствами команд. Сегодня основной тип ввода — текстовый, но компьютеры начинают воспринимать фотографии и голос, и в достаточно близком будущем все эти механизмы станут работать на равных как в поиске, так и в социальных сетях. Веб-камера с высоким разрешением и два качественных микрофона станут обязательным приложением к любой рабочей станции. Настоящая революция произойдет именно в этой сфере».

12 декабря 2012 г. на базе платформы «Калининград» «Яндекс» запустил новый формат персонального поиска, предложив пользователям подсказки и ответы, учитывающие их личные интересы и предпочтения. Чтобы узнать предпочтения, надо следить за этим пользователем, отмечая его привычки и пристрастия, то есть вести досье на любого из более чем 90 млн своих посетителей.

Из обращения к пользователям после запуска поисковой платформы «Калининград»:

Новая технология поиска «Калининград» стала еще одним шагом на пути создания искусственного интеллекта. Результаты поиска теперь зависят не только от запроса, но и от того, кто этот запрос посылает.

Свершилось. В поиске «Яндекса» появились диалоговые подсказки. Они помогают людям, которые задали какой-нибудь неоднозначный запрос, мгновенно его уточнить. Искусственный интеллект стараниями «Яндекса» просыпается. «Яндекс» продолжает вытаскивать пробку из бутылки с надписью «искусственный разум».

«Люди разные, и на один и тот же вопрос им часто нужны разные ответы. Мы нашли решение, как использовать наши знания о пользователе, чтобы выбрать для него наилучший ответ из возможных. Можно сказать, что персональный поиск подстраивается под человека, опираясь на свой опыт общения с ним. Это позволяет улучшить качество ответов примерно на 75–80 % запросов пользователя», — комментировал проект один из его кураторов Денис Рогачевский.

По мнению блога «Хабрахабр», «Яндекс» первым из существующих поисковых систем «внедрил технологию, которая позволяет саджесту (поисковой подсказке. — В.Д.) учитывать предыдущий запрос пользователя и показывать ему контекстную подсказку. Теперь поисковые подсказки вступают с вами в диалог и меняются в зависимости от того, что вы только что искали. Задача “Яндекса” — отвечать на вопросы, как заданные, так и нет. Поиск — про заданные вопросы, но пользователю можно помочь их сформулировать».

В блоге «Хабрахабр» было также заявлено о том, что «поиск “Яндекса” научился понимать, что хочет найти конкретный пользователь. Это значит, что теперь “Яндекс” не просто отвечает на вопрос — он отвечает лично вам. Ответ основан на анализе ваших предпочтений: какие вы задаете запросы, какие сайты выбираете из результатов поиска, на каком они языке. Чем больше вы спрашиваете “Яндекс”, тем лучше он вас понимает».

30 мая 2013 г. «Яндекс» запустил новую поисковую платформу «Дублин», настроенную прежде всего на обработку сиюминутных запросов, которых по статистике больше половины. После «Рейкьявика» (2011), научившего «Яндекс» учитывать языковые предпочтения пользователей, «Калининграда» (2012), благодаря которому поиск стал подстраиваться под устойчивые интересы людей, появился еще один город — «Дублин».

Вот как «Яндекс» комментирует запуск «Дублина»:

Летом 2013 г. «Яндекс» приступил к реформированию самого себя, меняя интерфейс выдачи поискового запроса. Такой вывод можно было сделать уже 16 мая 2013 г. после конференции YaC/m (Yet another Conference on Marketing), на которой Илья Сегалович впервые презентовал новую поисковую платформу «Острова» со словами: «Мы год работали над созданием нового интерфейса по выдаче интерактивных ответов. Каждый “Остров” — интерактивный ответ, блок схожих ответов на поисковый запрос».

Особенность новой платформы заключается в том, что на поисковые запросы она отвечает не ссылками на сайты, перечисленными на страницах выдачи, а набором необходимой информации и сервисов, выведенных непосредственно на страницах поисковой выдачи.

Вот как это объяснял Сегалович:

Презентовали новый проект широко и настойчиво, был подготовлен видеоролик, в котором вновь на авансцену выступил харизматичный Илья с благородной сединой и, покоряя зрителя неотразимой улыбкой, задавал сакраментальный вопрос: «Вы хотите иметь свой остров?» По ходу видеопьесы Сегалович представлял четверых коллег, видимо, основных сотворцов новой платформы «Острова». Все вместе они убедительно и доступно объясняли идеологию нового проекта — или, как выразился Сегалович, «нового “Яндекса”», суть которого Илья сформулировал отчетливо: «Важное видно сразу».

А вот как декларировал преимущества новой идеологии выдачи поискового запроса Тарас Шевченко, руководитель проекта «Острова», молодой сухощавый брюнет со стрижкой американского морского пехотинца и уверенным взглядом удачливого мажора:

Первая реакция этих самых владельцев сайтов, интересами которых, в частности, мотивируется запуск нового «Яндекса», была скорее негативной. Мол, если все покажет «Яндекс», на чем же заработает владелец сайта? И, кажется, скоро ничего бесплатного в Сети не останется.

Я не владелец сайта, я пользователь, который пишет книгу о том и о тех, кто стоят за моей и десятков миллионов моих сограждан домашней страницей. Так вот, и мне новая островная идеология выдачи «Яндекса» поначалу не пришлась по душе.

Объясню.

Я не хочу, чтобы мне навязывали чье-то мнение (даже если это мнение выдающихся специалистов «Яндекса») о том, как мне распоряжаться собственным временем. Я сам знаю, много у меня времени или не очень. И я не хочу, чтобы мне навязывали чужое представление о моих задачах, которые, мол, мне нужно решить по какому-то определенному алгоритму. У меня свой собственный алгоритм решения задач. И любая попытка объяснить его мне извне выглядит фальшивой и агрессивной, что вызывает отторжение.

В «Яндексе» мне всегда была важна его декларированная отстраненность и дистанцированность в механизме поиска и выдачи результатов. Меня как раз этот нейтральный список сайтов больше всего и устраивал. Я сам решу, что мне нужно, а что нет. И, кстати сказать, для меня не слишком важно место сайта на странице выдачи, я все равно воспользуюсь лишь тем, который мне нужен, и это совсем не обязательно первый в перечне. «Острова» мне навязывают выбор. Но я хочу право выбора оставить за собой, а не передавать его поисковику.

Мне всегда нравилось в «Яндексе» подчеркнутое благородство. «Яндекс» — единственная в мире поисковая машина, которая внизу главной страницы ставит ссылки на конкурентов. Из уважения к клиенту и себе, из отсутствия щипачества и крохоборства, руководствуясь простой логикой, — если угодно, логикой интеллигентного человека. И никогда не прячет опцию отключения сервиса или настройки, например персонального поиска. Разумеется, это свойство напрямую связано с отцами-основателями — Аркадием и Ильей. Неотвратимая настойчивость меня несколько насторожила и в браузере «Яндекса». Это навязывание, выдаваемое за благодеяние, мне не понравилось и в «Островах». Впрочем, это не значит, что я прав. Потому что критерий истины — практика.

Мне также очевидно, что один из сильнейших импульсов, мотиваторов запуска новой платформы «Острова» — это желание раздвинуть национальные рамки доходности, стремление к сокращению, к постепенному освобождению от зависимости 90 %-ной доли доходности, получаемой из России. Потому что «Острова», а точнее, новый «Яндекс», который агрегирует уже не только источники, но и желания, это, похоже, продукт, ориентированный на экспорт, учитывающий в большей степени прихоти и привычки зарубежных пользователей.

Я не настаиваю на исключительности своих выводов, поскольку это всего лишь частное мнение среднестатистического пользователя, коих у «Яндекса» около сотни миллионов. И, возможно, предложенное обновление интерфейса страницы выдачи, а главное, новый алгоритм выдачи результатов поиска будет восторженно востребован. Тем паче, что Волож, конечно же, помнит свое высказывание насчет того, что «Google не умрет, если не завоюет Россию, а мы умрем, если ее потеряем».

Надо также признать, что яндексоиды всегда, с самого начала чувствовали ток, запрос времени, востребованность порой даже не сегодняшнего, а завтрашнего дня. И предлагали своей аудитории продукты и интерфейсы, которые формировали, собственно, направления и потребности. Показательна в этом смысле модернизация фасада, главной страницы: по первости обновленная страница вызывает импульсивное отторжение, которое через несколько часов сменяется ощущением, что так было всегда.

У любой уважающей себя компании есть официальная идеология (не в смысле политики, но в плане формулирования позиции), свое послание миру, объясняющее цели и перспективы, то, что называется миссией компании.

Есть такое послание и у «Яндекса». Причем, как выясняется, трактовка миссии меняется. Например, в 2013 г. я насчитал три варианта. Зачем так много за один год — не понимаю. И это еще не факт, что между теми, которые я зафиксировал, не было промежуточных версий.

В последнем варианте миссии, который появился непосредственно перед запуском платформы «Острова» (летом 2013 г.), «Яндекс» сменил вектор цели. С 1997 г. поисковик ВСЕГДА отвечал на ВСЕ вопросы ВСЕХ пользователей, а на шестнадцатом году своего существования «Яндекс» взялся за решение ЗАДАЧ ЛЮДЕЙ.

Многолетний лаконичный и емкий слоган («Главная задача “Яндекса” — отвечать на вопросы пользователей. Всех, всегда и везде») сменился на размытый, неясный и чрезмерно многословный: «Основная цель “Яндекса” — решать задачи людей. Любые задачи: в Сети и в реальном мире, повседневные и редкие, бытовые и научные, за третий класс и за пятый курс. Именно для этого мы совершенствуем свой поиск и создаем новые сервисы».

В этом варианте призывного девиза речь идет о продвижении нового «Яндекса», который не отвечает на что-то, а что-то решает:

Воложу, конечно, виднее, но мне сдается, что словесный образ нового «Яндекса» стал менее четким. Чеканный взрослый слог сменился на выспренный, пафосный, с придыханием. Зачем? К тому же миссия стала излишне многословной.

В новой редакции миссии появилась даже фактическая ошибка. Говорится, что годовой оборот превысил $1 млрд. Но в 2012 г. оборот «Яндекса» не дотянул до $1 млрд (всего лишь $52,9 млн). Да, в 2013 г., скорее всего, дотянет до $1 млрд. Но ведь это еще только должно произойти. И прогноз выдавать за свершение, в середине 2013 г. писать о том, что еще только ожидается, как о том, что уже произошло, по меньшей мере лукавство.

Впрочем, быть всегда чуть впереди сегодняшних интересов, предупреждая рынок, — возможно, в этом и есть один из рецептов многолетнего лидерства «Яндекса» на региональных и достойного соперничества на транслокальных рынках. Даже если новые трансформации вызывают по первости отторжение или недоумение.

Голос агрегатора новостей, запросов и человеческих исканий становится громче и отчетливее, а влияние «Яндекса» на жизнь почти 100 млн пользователей во всем мире — определеннее и настойчивее. Это уже не дистанцирование, это вхождение в мою жизнь. Каким оно будет? Поглядим.

Еще в январе 2013 г. реализована двенадцатая версия главной страницы (самой посещаемой в Рунете) «Яндекса». Страна http://yandex.ru, в которой проживают десятки миллионов человек из разных стран, обрела новый фасад.

Оглавление книги