AI Product Engineer

OrganicApps·Удалённо, Гибрид, Офис·2д. назад

OrganicApps - продуктовая команда экспертов индустрии Health & Fitness. Мы делаем продукты, которые помогают людям становиться здоровее и счастливее.

Сейчас мы работаем над новым приложением, в котором AI станет важной частью пользовательского опыта. Мы планируем внедрять AI-решения в различные сценарии продукта: персональные рекомендации, адаптацию тренировочных планов, анализ прогресса и взаимодействие с пользователем.

Мы ищем AI Product Engineer, который будет отвечать за разработку и развитие AI-функциональности продукта: от поиска решений пользовательских проблем и проектирования архитектуры до реализации, запуска и дальнейшего улучшения на основе данных.

Нам нужен инженер с сильной технической базой, практическим опытом разработки LLM-продуктов и продуктовым мышлением. Человек, который способен самостоятельно разобраться в проблеме, предложить решение, довести его до production и оценить, действительно ли оно принесло пользу пользователю.

Разрабатывать и развивать AI-решения в продукте: выявлять пользовательские проблемы, формулировать гипотезы, определять критерии успеха и совместно с Product и Design выбирать приоритеты развития
Проектировать и реализовывать AI-функциональность в различных сценариях продукта: персональные рекомендации, адаптация тренировочных планов, анализ прогресса, диалоговое взаимодействие и другие пользовательские сценарии
Разрабатывать и развивать серверную AI-функциональность, обеспечивать ее надежность и интеграцию с данными и инструментами продукта
Проектировать взаимодействие с LLM: управление контекстом и памятью, retrieval, структурированные ответы, вызовы инструментов и их оркестрация
Развивать систему оценки качества AI-решений (evals): создавать проверочные сценарии и критерии оценки, проводить автоматизированные и экспертные проверки, выявлять регрессии
Проводить продуктовые эксперименты, анализировать результаты и оценивать влияние изменений на пользовательское поведение и достижение целей
Обеспечивать качество и стабильность работы AI-функций после запуска: отслеживать ошибки, задержки и стоимость, контролировать выпуск изменений и разбирать возникающие проблемы
Совместно с методистами и другими экспертами переводить подтвержденные рекомендации и правила в проверяемую логику AI-функций

Сильный инженерный бэкграунд: от 5 лет коммерческого опыта Software/Backend-разработки, включая самостоятельное проектирование, создание и поддержку production-систем. Уверенное понимание архитектуры приложений, работы с API, очередями, асинхронными процессами, обработки ошибок и обеспечения надежности
Практический опыт разработки LLM-продуктов или значимых AI-функций: личное участие в реализации и доведении решений до production, их последующее улучшение на основе данных. Важно уметь объяснить собственный вклад, принятые решения и полученные результаты
Опыт прикладной LLM-инженерии: работа с контекстом и памятью, retrieval, структурированными ответами, вызовами инструментов и оркестрацией. Понимание возможностей и ограничений LLM, умение выбирать подходящий технический подход на основе измеримых результатов
Опыт оценки качества AI-решений (evals): разработка проверочных наборов и критериев оценки, проведение автоматизированных и экспертных проверок, анализ результатов и регрессий
Опыт мониторинга AI-систем: отслеживание качества ответов, ошибок, задержек, стоимости и стабильности работы после запуска
Навыки анализа данных и понимание основ машинного обучения: уверенное владение SQL, работа с выборками, понимание статистической неопределённости и ограничений данных, знание принципов embeddings, ranking, персонализации и fine-tuning
Опыт продуктовых экспериментов: формулирование гипотез и метрик успеха, понимание принципов A/B-тестирования, размера выборки, статистической неопределённости и анализа результатов
Продуктовое мышление и самостоятельность: способность самостоятельно разбираться в проблемах, формулировать гипотезы, предлагать и реализовывать решения, оценивать их влияние на пользовательский опыт и поведение
Английский язык: B1 - достаточный для самостоятельной работы с технической документацией и исследованиями

Будет преимуществом
Опыт разработки AI-ассистентов, коучей или других продуктов с длительным взаимодействием пользователя и AI.
Опыт разработки B2C-продуктов, особенно в Health & Fitness или подписочных сервисах
Опыт мобильной разработки, включая React Native

Основной стек проекта – TypeScript / Node.js. При этом мы готовы рассматривать инженеров с опытом других технологий, включая Python, если вы готовы самостоятельно работать с нашим основным стеком.