Нейросети помогут "Яндексу" ответить на нестандартные запросы

Нейросети помогут "Яндексу" ответить на нестандартные запросы
Фото: hitech.vesti.ru

Российский поисковик "Яндекс" объявил о запуске нового алгоритма поиска под названием "Палех", помогающего системе лучше понимать, о чем именно ее спрашивают пользователи. "Палех" позволяет находить страницы, соответствующие запросу не только по ключевым словам, но и по смыслу.

Реализованы новые возможности поискового алгоритма с помощью нейронных сетей. Они призваны улучшить выдачу "Яндекса" по уникальным и низкочастотным запросам. Среди таких запросов, например, детские, когда к поисковику обращаются как к живому собеседнику: [дорогой яндекс посоветуй пожалуйста новые интересные игры про фей для плантика]. Или запросы от людей, ищущих фильм по запомнившемуся эпизоду: [фильм про человека который выращивал картошку на другой планете] ("Марсианин")  или [фильм где физики рассказывали даме про дейтерий] ("Девять дней одного года").

В "Яндексе" часто представляют график частотного распределения запросов к поисковику в виде "жар-птицы", "клюв" которой соответствует наиболее частым коротким запросам ([вконтакте], [погода]), "туловище" – запросам средней частотности, а "хвост" –  многочисленным редким и уникальным запросам. Поскольку "жар-птица" является частым мотивом палехской росписи, новый алгоритм, улучшающий качество поиска в области "хвоста" "птицы", решили назвать "Палех". 

В случае с редкими запросами у поисковика очень мало или вообще нет статистики о том, какие результаты лучше подходят для выдачи. Задача осложняется тем, что далеко не всегда на релевантной страничке встречаются слова из запроса — ведь один и тот же смысл в запросе и на странице может быть выражен совершенно по-разному.

Чтобы решить эту задачу, нейросети "Яндекса" обучили переводить заголовки всех проиндексированных поисковиком страниц в группы из трехсот чисел каждая, максимально точно описывающие их смысл. Такие группы назвали "семантическим вектором". Аналогичным образом в набор чисел можно перевести и текст поискового запроса. Чем ближе семантический вектор запроса к семантическому вектору страницы, тем лучше страница соответствует запросу.

Постепенно обучаясь, алгоритмы "Яндекса" будут все лучше находить подходящие под нестандартные запросы страницы, даже если на странице нет ни одного слова из фигурирующих в запросе.

Источник: блог "Яндекса"

Ещё новости о событии:

"Мы запустили новый поисковый алгоритм — «Палех». Он позволяет поиску Яндекса точнее понимать, о чем его спрашивают люди.
11:33 03.11.2016 Gorod37.Ru - Иваново
Компания Яндекс анонсировала внедрение нового поискового алгоритма — Палех, который строится на обучении искусственной нейронной сети понимать сложные поисковые запросы.
10:13 03.11.2016 Cursiv.Ru - Иваново
Алгоритм назвали «Палех» Компания Яндекс запустила новый алгоритм поиска под названием "Палех", который работает на основе нейронных сетей и позволяет находить ответы на необычные и редкие поисковые запросы.
09:37 03.11.2016 ИД Частник - Иваново
Разработчики утверждают, что график частотного распределения запросов в Яндексе часто представляют в виде птицы, у которой есть клюв, туловище и длинный хвост, как у сказочной Жар-птицы,
18:04 02.11.2016 Департамент Внутренней политики - Иваново
Нейросети помогут "Яндексу" ответить на нестандартные запросы - Вести.Ru
Российский поисковик "Яндекс" объявил о запуске нового алгоритма поиска под названием "Палех", помогающего системе лучше понимать, о чем именно ее спрашивают пользователи.
14:34 02.11.2016 Вести.Ru - Москва
В его основе лежат нейронные сети.  yandex.ru/blog Благодаря «Палеху», Яндекс стал лучше подбирать ответы на редкие и уникальные поисковые запросы.
13:45 02.11.2016 Югополис - Краснодар
Российский поисковик "Яндекс" запустил новый поисковый алгоритм "Палех", в основу которого положены нейронные сети.
13:37 02.11.2016 Петербургский дневник - Санкт-Петербург
shares Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
13:36 02.11.2016 Searchengines.Ru - Москва
Благодаря Палеху, Яндекс стал лучше подбирать ответы на редкие и уникальные поисковые запросы.
12:36 02.11.2016 Ekaterinodar.Ru - Краснодар
«Палех» - именно так «Яндекс» назвал свой новый поисковый алгоритм для обработки редких запросов на основе нейронных сетей.
12:35 02.11.2016 IvanovoNews.Ru - Иваново
  Российская компания «Яндекс» запустила новый алгоритм поиска, основанный на искусственных нейронных сетях.
12:07 02.11.2016 Газета Республика Татарстан - Казань
Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
12:37 02.11.2016 Vluki.Net - Великие Луки
Blackberry станет поставщиком программного обеспечения для будущих беспилотных автомобилей Ford.
11:36 02.11.2016 Вести.Ru - Москва
Яндекс запустил новый поисковый алгоритм «Палех», в основе которого лежат нейронные сети.
12:35 02.11.2016 Pln-Pskov.Ru - Псков
 
По теме
29 марта 2024, 10:48 — Общественная служба новостей — ОСН В Челябинской области в Сосновском районе в деревне Ключевка предприятие по переработке камня оштрафуют за нелегальный прием на работу мигрантов .
29 марта 2024, 09:56 — Общественная служба новостей — ОСН Родители Далержана Мирзоева*, причастного к теракту в «Крокус Сити Холле», поделились подробностями последнего разговора с сыном.
Прокуратура СВАО утвердила обвинительное заключение по уголовному делу в отношении 63-летнего мужчины, которому вменяют в вину нарушение ПДД, повлёкшее по неосторожности смерть человека.
29 марта 2024, 10:08 — Общественная служба новостей — ОСН Профессор Наньянского технологического университета в Сингапуре, исследователь джихадистских группировок Рохан Гунаратна рассказал,
Счет шел на секунда: как врачи спасали жизни пострадавших в теракте в «Крокусе» - Вечерняя Москва Заместитель главного врача по медчасти НИИ скорой помощи им. Склифосовского Артем Саприн во флагманском центре, куда доставили многих пострадавших в результате теракта в «Крокус Сити Холле».
Вечерняя Москва
Спасатель-доброволец из Новогиреево разбирал завалы после теракта в «Крокусе» - Восточный округ Первые шаги как волонтёр Турсун сделал во время пандемии. Фото: Григорий Матвеев Житель Братской улицы 43-летний Турсун Коенов почти два года состоит в отряде спасателей-добровольцев «СпасРезерв».
Восточный округ
Делегация главных врачей медицинских учреждений Ямало-Ненецкого автономного округа, во главе с первым заместителем директора регионального департамента здравоохранения Марией Захаровой,
ГКБ №15
Как организовать идеальную камерную свадьбу: руководство по организации для 10-20 гостей - На правах рекламы Организация свадьбы в современных условиях предполагает новые подходы. Часто жених с невестой ограничиваются скромным празднованием и готовы потратить средства на 10 человек.
На правах рекламы