Специалист по тестированию и поддержке ИИ-ассистентов (Prompt QA)

Мы — Финансовая группа «ДОХОДЪ». С 1993 года мы работаем на рынке ценных бумаг, предоставляя доступ к биржевому и внебиржевому трейдингу, инвестиционным продуктам и FinTech-решениям.

В команде IT нас более 40 человек, и мы не просто «поддерживаем софт» — мы разрабатываем сложные, высоконагруженные системы для профессиональных участников рынка.

Занимаемся автоматизацией бизнес-процессов и клиентского сервиса с помощью ИИ ассистентов. На платформе быстрые и умные голосовые и текстовые боты для сфер: финансы, медицина, недвижимость, бьюти.

Сейчас мы в поиске Тестировщика с навыками promt-инжиниринга и желанием развиваться в этом направлении.

Наши ожидания по опыту:

• Опыт работы тестировщиком (QA) от 1,5–2 лет
• Опыт написания промптов для ИИ/LLM-моделей, либо прохождение профильных курсов по prompt-инжинирингу (желательно)
• Опыт работы в тех.поддержке или прямом общении с пользователями/клиентами (желательно)
• Развитое критическое мышление, внимательность к деталям
• Умение структурированно фиксировать проблемы и формулировать тест-кейсы
• Готовность разбираться в специфике поведения ИИ-моделей и адаптироваться к их особенностям

Чем предстоит заниматься в этой роли:

Тестирование и качество

• Тестирование поведения ИИ-ассистентов: проверка ответов на корректность, релевантность, соответствие сценариям
• Написание и поддержание тест-кейсов, чек-листов и тестовых сценариев (в т.ч. пограничных и нестандартных диалогов)
• Регрессионное тестирование после обновления промптов, моделей или логики бота
• Фиксация и приоритизация багов/некорректного поведения ассистента, взаимодействие с разработчиками по их устранению

Развитие продукта

• Сбор и анализ обратной связи от пользователей/клиентов для выявления точек роста
• Формирование гипотез по улучшению качества ответов и пользовательского опыта
• Влияние на бэклог: формулирование и приоритизация задач по доработке ассистента совместно с продуктовой командой
• Участие в обсуждении новых функций и сценариев использования ИИ-ассистента

Промпт-инжиниринг

• Составление, доработка и оптимизация промптов для повышения качества ответов
• Эксперименты с формулировками, структурой промптов и системными инструкциями
• Анализ причин некорректных или нежелательных ответов ИИ и корректировка промптов для их устранения
• Ведение библиотеки/базы промптов и документации по изменениям

Поддержка

• Поддержка ИИ-ассистентов на стороне клиента: обработка обращений, связанных с некорректной работой бота
• Оперативное реагирование на инциденты и эскалация сложных случаев
• Коммуникация с клиентом по вопросам поведения и качества ответов ассистента

Мы предлагаем:

• Заработная плата: уровень обсуждаем с сильным кандидатом (мы знаем рынок и готовы конкурировать за сильных специалистов).

• Гибкий график: с 9:00 до 18:00 или смещенный, возможность работать из офиса или в гибридном формате (обсуждаемо).

• Работа в центре СПб: историческое здание в пешей доступности от м. Василеостровская, атмосферный офис с кофе-поинтами, спорт-залом, комнатой отдыха и всеми необходимыми «плюшками».

• ДМС после завершения испытательного срока.

• Лекции и обучающие мероприятия по инвестированию и финансам.

• Корпоративная жизнь: мы любим масштабные праздники, но без странных аниматоров и сомнительных конкурсов, играем в квизы и интеллектуальные баттлы, участвуем в городских забегах и вообще за любой командный челлендж в корпоративных ценностях.