Capabilities
Foundation models
Модель задаёт границу доступных сценариев. Важны не только benchmark scores, но и устойчивость в длинных задачах, работа с контекстом и способность следовать ограничениям процесса.
Lead Product Analyst · LLM adoption
01 / Обо мне
Руковожу командой из четырёх продуктовых аналитиков и отвечаю за внедрение LLM-агентов в процессы клиентской поддержки.
В рамках внедрения создаю в компании AI-native инфраструктуру для проведения evals и эксплуатации LLM-агентов в production.
Выстраиваю сложные пайплайны offline-метрик качества на основе human labeling.
02 / Frontier notes
Меня интересуют развитие foundation models, инфраструктура и экономика inference, alignment и evals, а также практики внедрения AI в продукты и бизнес-процессы.
Capabilities
Модель задаёт границу доступных сценариев. Важны не только benchmark scores, но и устойчивость в длинных задачах, работа с контекстом и способность следовать ограничениям процесса.
Economics
Latency, throughput и стоимость запроса определяют, какие сценарии можно масштабировать. Более сильная модель полезна только тогда, когда её качество оправдывает стоимость всего процесса.
Reliability
Оценка должна воспроизводить реальную работу: длинные сценарии, бизнес-правила, критические ошибки и передачу человеку. Иначе benchmark не отвечает на вопрос о запуске.
Organizations
Внедрение требует изменить сам workflow: распределить ответственность между агентом и человеком, встроить контроль качества и дать пользователю понятную модель доверия.
03 / Путь
2025 — сейчас
T-Bank · AI/LLM agents
Стратегия внедрения LLM-агентов, система оценки качества и команда из четырёх аналитиков.
2024 — 2025
T-Bank · Support bots
RAG-ответы по внутренней базе знаний, offline evals и более десяти запущенных функций автоматизации.
2023 — 2024
Yandex · Search & Images
Монетизация поиска, эксперименты и новые метрики — от исследования до реализации на C++.
2026
МФТИ
Венчурный бизнес, корпоративные финансы, экономика и предпринимательство в технологиях.
2024
МФТИ
Фундаментальная математическая подготовка, физика и исследовательская культура.
Сотрудничество
Основные темы: product strategy, система оценки качества, экономика inference и изменение процессов вокруг AI — особенно на этапе перехода от пилота к production.
Написать в Telegram@RusAvl ↗