Аналитик GPT-моделей в Алису

Posted:
Remote or office
Full-time

#LLM #аналитика #datascience #Python #SQL #AI #Яндекс #работа

Brief description of the vacancy

Наша команда Алиса и Умные Устройства в Яндексе ищет аналитика GPT-моделей, который поможет сделать Алису ещё умнее и ближе к человеку - работать с омнимодальными данными и развивать универсальные метрики качества на разных устройствах и интерфейсах. Это уникальный микс продуктовой аналитики и Data Science: ваш вклад будет виден в каждой части взаимодействия пользователя с ассистентом Яндекс. .

About the company

Company Яндекс

Мы помогаем Алисе стать ещё умнее и ближе к человеку путём интеграции в неё GPT-технологий, делаем из Алисы персонального ассистента, который:

  • может решать широкий спектр повседневных и сложных человеческих задач;
  • экономит силы и время пользователей;
  • помогает в развитии и работе, поддерживает беседу и развлекает.

Мы расширяем и усиливаем команду аналитики GPT Алисы. Для аналитика работа с Алисой — это уникальный микс продуктовых исследований и Data Science, возможность работать с разными устройствами — от телефонов до больших человекоподобных роботов и автомобилей — и участвовать в создании персонального ассистента, для которого не стыдно применить термин Artificial Intelligence (AI).

Responsibilities

Универсальная метрика качества Алисы как ассистента`

Алиса работает на множестве устройств (колонки, ТВ, чатовые поверхности, Навигатор, Авто). Вам предстоит вместе с нами непрерывно улучшать качество ответов Алисы на этих поверхностях и единую офлайн-метрику качества ответов. Результат этой работы будет заметен невооружённым глазом и повлияет как на пользовательский опыт, так и на планы команд Алисы.

Качество генерации картинок и ответов по картинкам

Чтобы Алиса решала человеческие задачи в любой форме, от текста до голоса и видео, нужно:

  • Продумать, как оцифровать работу пользователя с разными видами контента
  • Научиться отвечать на вопрос, решила ли Алиса задачу пользователя в диалоге
  • Научиться оценивать и растить аспекты качества ответа

Вам предстоит думать о том, что такое хороший ответ по картинке, как подружить текстовую и картиночную генерацию и как измерить качество омнимоделей.

Прикладной RnD для развития агентских технологий

Индустрия уже живёт тем, что 2025 год — год агентов. Пока никто ещё точно не определил, что такое агент, но мы видим, что можно растить качество за счёт повышенного compute (на этапе и обучения, и inference). Вам предстоит майнить золото сложных запросов из потока, делать на них метрики, собирать лёрн для размышляющих моделей и работать с SOTA-моделями.

Requirements

  • Знаете теорию вероятностей и математическую статистику
  • Глубоко владеете SQL, Python/Pandas
  • Умеете писать аналитический production-код и создавать инструкции, способны видеть продукт или проект в целом
  • Работали как с Data Science, так и с продуктовой аналитикой
  • Обладаете навыками анализа и построения эффективных процессов обработки данных
  • Интересуетесь развитием голосовых помощников и искусственного интеллекта
  • Инициативны и готовы к самостоятельному поиску решений

Будет плюсом, если вы

  • Работали с NLP, краудсорсинговыми разметками и ML

Working conditions

Что мы предлагаем:

  • Сильную команду, с которой можно расти
  • Зарплату на уровне рынка и выше
  • Современный офис с бесплатной парковкой
  • Комфортный график работы
  • Компенсацию на питание в офисе
  • Тренажёрный зал и дежурного врача в офисе
  • Расширенную программу ДМС: стоматологию, обследования, вызов врача на дом, оплату 80% ДМС для супругов и детей
  • Внутреннее и внешнее обучение: онлайн-библиотеку, курсы, конференции

Contacts

Log InOnly registered users can open employer contacts.

Our website uses cookies, including web analytics services. By using the website, you consent to the processing of personal data using cookies. You can find out more about the processing of personal data in the Privacy policy