Сан-Франциско. Растущая популярность поиска информации с помощью естественного языка меняет привычки пользователей. LinkedIn, активно внедряющий различные модели искусственного интеллекта (ИИ) в течение последнего года, рассчитывает, что эта тенденция распространится и на поиск работы.
Компания объявила о полномасштабном запуске ИИ-поиска вакансий для всех пользователей своей платформы. Система использует специализированные компактные модели, обученные на собственной базе знаний профессиональной соцсети. Их задача – точно интерпретировать запросы, сформулированные обычным языком, и находить наиболее релевантные предложения о работе.
Безопасность ИИ-модели: приоритет
«Новый поиск позволяет участникам описывать свои цели своими словами и получать результаты, которые действительно соответствуют их ожиданиям, — пояснил Эрран Бергер, вице-президент LinkedIn по разработке продуктов, в письме VentureBeat. — Это первый шаг в большом пути по созданию более интуитивного, инклюзивного и полезного для всех процесса поиска работы».
Ранее LinkedIn отмечал в корпоративном блоге ключевую проблему пользователей: излишняя зависимость от точных ключевых слов. Часто при вводе общей должности (например, «репортер») в результатах появлялись совершенно неподходящие вакансии (вроде «судебного репортера»), требующие иного набора навыков.
Венцзин Чжан, вице-президент LinkedIn по инжинирингу, в интервью VentureBeat подчеркнула необходимость помочь людям находить идеально подходящие вакансии. Это начинается с более глубокого понимания их запросов.
«Раньше, работая с ключевыми словами, мы искали точное совпадение. Но иногда в описании вакансии могло быть слово "репортер", хотя сама должность им не являлась. Мы всё равно показывали такую вакансию, что неидеально для соискателя», — отметила Чжан.
Теперь платформа понимает запросы на естественном языке. Вместо «инженер-программист» можно написать: «Найти вакансии инженера-программиста в Кремниевой долине, опубликованные недавно».
Как это устроено внутри
Первым делом потребовалось кардинально улучшить способность поиска понимать смысл запроса.
«Первый этап — понять запрос в момент его ввода. Следующий — найти подходящую информацию в нашей базе вакансий. И последний — проранжировать сотни подходящих вакансий так, чтобы самые релевантные оказались наверху», — объяснила Чжан.
Ранние версии поиска LinkedIn опирались на жесткие таксономии, модели ранжирования и устаревшие большие языковые модели (LLM), которым «не хватало способности к глубокому семантическому пониманию». Компания перешла на современные, предварительно обученные LLM, чтобы усилить возможности обработки естественного языка (NLP) платформы.
Однако эксплуатация мощных LLM требует значительных вычислительных ресурсов. Чтобы снизить затраты на дорогостоящие GPU, LinkedIn применил метод дистилляции (сжатия) моделей. Процесс разделили на два этапа: один для поиска и сбора данных, другой — для ранжирования результатов. Используя «учительскую» модель для оценки соответствия запроса и вакансии, LinkedIn добился согласованности работы моделей поиска и ранжирования.
Этот подход также позволил упростить конвейер обработки запроса. Ранее в нем было «девять различных этапов», часто дублирующих друг друга.
«Для этого мы используем стандартный метод многозадачной оптимизации. Чтобы обеспечить согласованность поиска и ранжирования, важно, чтобы поиск ранжировал документы по тем же критериям, что и этап ранжирования. Цель — сохранить поиск простым, не создавая лишней нагрузки на разработчиков ИИ», — пояснили в LinkedIn.
Дополнительно компания разработала модуль генерации персонализированных подсказок для пользователей.
ИИ-поиск наступает
LinkedIn — не единственный, кто видит потенциал LLM для корпоративного поиска. Google прогнозирует, что к 2025 году благодаря продвинутым моделям такие решения станут значительно мощнее.
Модели вроде Cohere Rerank 3.5 помогают преодолевать языковые барьеры внутри компаний. Такие продукты, как «Deep Research» от OpenAI, Google и Anthropic, указывают на растущий спрос организаций на ИИ-агентов, способных анализировать внутренние данные.
За последний год LinkedIn представил несколько функций на базе ИИ. В октябре был запущен ИИ-ассистент для рекрутеров, помогающий находить лучших кандидатов.
Дипак Агарвал, руководитель направления ИИ в LinkedIn, расскажет об инициативах компании в области искусственного интеллекта, включая масштабирование «Помощника по найму» от прототипа до промышленной эксплуатации, на конференции VB Transform в Сан-Франциско в этом месяце.
0 комментариев