Long applicationsign-up on hh.ru

QA Engineer / LLM Evaluation

Sber • Russian: C1 • LLM & Generative AI • Cloud Platforms (IaaS & PaaS) • Python • SQL • 1 day ago
Smart Apply
Similar jobs
1,360,475open jobs
79,349companies
208,280added this week
Browse all
Salary
≈ $19k – $49k per year (Estimated)
Location
In office (Moscow)
Seniority
Junior · 2+ years exp

Confirmed on the employer's own hiring board on Oct 7, 2026. First seen by Alion on Oct 7, 2026. Sber scores A on the Alion truth index.

Overview
Company
Impact
Profile match

Sber

Sber is Russia's largest bank and the centre of one of the country's biggest technology ecosystems, tracing its origins to savings institutions established in 1841. It serves over a hundred million retail customers and several million businesses through branch, mobile and web channels, and holds a dominant share of the national deposit, lending and payment markets. Over the past decade the group has built out an ecosystem well beyond banking, spanning e-commerce, food delivery, streaming media, cloud infrastructure, devices and the GigaChat family of large language models developed by its own AI research teams.
sber.ru • HQ: Moscow, Russia • Cloud Platforms (IaaS & PaaS) • LLM & Generative AI • Investment Banking & M&A Advisory • Wealth Management & Financial Advisors • Commercial & Retail Banks • 5000+ employees • Est. 1841
Tech stack of Sber
Backed by Sber500

В команду AIFA ищем QA-инженера, который будет отвечать как за классическое качество программного продукта, так и за оценку результатов работы LLM и финансового агента.

Роль подойдёт технически сильному специалисту или QA-инженеру, который хочет развиваться в автоматизации тестирования AI-продуктов.

Обязанности

  • проводить функциональное, интеграционное, регрессионное и end-to-end тестирование AIFA
  • тестировать backend API, пользовательский интерфейс и взаимодействие микросервисов
  • автоматизировать API- и UI-тесты
  • проверять длительные и параллельные процессы, стриминг, повторные вызовы и восстановление после ошибок
  • создавать и поддерживать тестовые наборы для извлечения данных, Q&A, финансового анализа и моделирования
  • формировать бенчмарки и метрики качества LLM-компонентов
  • проверять воспроизводимость результатов и анализировать причины деградации качества
  • участвовать в разборе дефектов и контролировать их исправление.
  • Формировать quality gates для выпуска релизов
  • организовывать валидацию результатов совместно с финансовыми экспертами.

Требования

  • опыт в роли QA от 2х лет
  • понимание основных видов и методик тестирования
  • опыт тестирования REST API
  • базовые знания Python и готовность развиваться в автоматизации
  • базовый SQL
  • умение работать с логами и локализовывать источник ошибки
  • понимание клиент-серверной и микросервисной архитектуры
  • внимательность к деталям и способность системно описывать дефекты
  • опыт с pytest, CI/CD, Docker, нагрузочным тестированием или оценкой LLM будет преимуществом
  • глубокая финансовая экспертиза не обязательна - необходимую предметную часть поможет освоить команда.

Условия

  • комфортный современный офис рядом с м. Ленинский проспект
  • гибридный формат работы
  • ежегодный пересмотр зарплаты, квартальная и годовая премия (премия указывается в зависимости от должности и системы премирования)
  • корпоративный спортзал и зоны отдыха
  • более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
  • программа адаптации и помощь руководителя на старте (для вакансий уровня Junior)
  • расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
  • гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
  • подписка Прайм с возможностью совместного использования на трёх близких
  • вознаграждение за рекомендацию друзей в команду Сбера.
Free account
Stop reading job ads. Get the ones that fit.
One free account turns this page into a shortlist built around your stack, your level and your pay.
Match on every job. Stack, seniority, pay and location, scored against your profile.
1,360,475 open roles. Read straight off company career pages, refreshed every day.
Unlimited applications. Every one you send is tracked in one place, on-site or on a company board.
3 tailored CVs a month. Rewritten for the exact job you are applying to. Included free.
Create a free account Continue with Google
Free forever. No card. Under a minute.

Your match

How well do you fit this role?
Two answers are enough for a real match. No account needed.
Check my fit
Answers stay in this browser until you create an account.

Recommended for you based on this role

AI/ML
Similar stack
Same company
Moscow
$88k – $102k per year • Remote (United States, UTC-8 – UTC+3 hours) • Full-Time • New York
Python
JavaScript
TypeScript
Databases
Databricks
AI/ML
Claude
Model Context Protocol
LLM
RAG
OpenAI
Anthropic
Tool Use
DevOps
Rest API
Azure
Git
Apply
≈ $43k – $105k per year (Estimated) • Hybrid • Full-Time • Courbevoie
Python
Java
TypeScript
AI/ML
Copilot
Cursor
Claude Code
Model Context Protocol
Context Engineering
DevOps
Terraform
Azure DevOps
GitHub Actions
Azure
CI/CD
Git
Docker
Kubernetes
GitLab
Cybersecurity
SonarQube
Management
Agile
Apply
$144k per year • Hybrid • Internship • PhD • San Mateo
Python
Java
C++
AI/ML
Reinforcement Learning
Computer Vision
NLP
Recommender Systems
Machine Learning
Apply
$197k – $243k per year • Equity • Hybrid • PhD • San Mateo
Python
Java
C++
AI/ML
Reinforcement Learning
Multimodal AI
Computer Vision
NLP
Recommender Systems
Machine Learning
Apply
≈ $50k – $123k per year (Estimated) • In office • Internship • Cholet
C++
AI/ML
ONNX Runtime
Apply
SQL Developer 1 day ago
≈ $29k – $53k per year (Estimated) • Remote (likely EAEU) • 5+ years exp • Moscow
SQL
Databases
MS SQL
DevOps
CI/CD
Git
Apply
≈ $36k – $100k per year (Estimated) • In office • Full-Time • Athens
C#
C#
ASP.NET Core
Databases
MS SQL
DevOps
Azure DevOps
Azure
CI/CD
Management
Agile
Apply
Apply
$62k – $104k per year • Hybrid • Full-Time • 2+ years exp • Associate's Degree • Buffalo
Python
Databases
MS SQL
Analytics
Power BI
Apply
≈ $17k – $36k per year (Estimated) • In office • 6+ years exp • Master's Degree • Chennai
Python
PowerShell
Bash
DevOps
SLI/SLO/SLA
Linux
Windows
Cybersecurity
Qualys Cloud Platform
Wiz
CVE
CWE
CVSS
IoT
OPC UA
Management
Jira
ServiceNow
Apply
≈ $36k – $68k per year (Estimated) • In office • Moscow
Databases
ElasticSearch
OpenSearch
AI/ML
LangChain
Fine-tuning
AI Agents
NLP
GigaChat
PyTorch
LLM
RAG
DevOps
CI/CD
Apply
≈ $37k – $70k per year (Estimated) • In office • Bachelor's Degree • Moscow
Python
Python
FastAPI
Databases
PostgreSQL
AI/ML
LoRA
vLLM
Fine-tuning
AI Agents
VLM
SGLang
PEFT
QLoRA
TRL
Transformers
LLM
Triton
DPO
SFT
GRPO
OCR
Apply
≈ $50k – $101k per year (Estimated) • In office • Moscow
Python
Python
FastAPI
Databases
PostgreSQL
Apache Kafka
AI/ML
LangGraph
LangChain
AI Agents
PyTorch
LLM
RAG
LLM Guardrails
DevOps
gRPC
OpenShift
OpenTelemetry
CI/CD
Jenkins
Grafana
Apply
≈ $34k – $65k per year (Estimated) • In office • 4+ years exp • Moscow
Python
SQL
Python
FastAPI
Asyncio
AI/ML
Copilot
LangGraph
Weights & Biases
LangChain
LoRA
RLHF
Function Calling
AI Agents
NLP
Arize Phoenix
DeepEval
LangSmith
PEFT
QLoRA
PyTorch
LLM
RAG
Mixture of Experts
LLMOps
DPO
SFT
KV Cache
DevOps
CI/CD
Docker
Kubernetes
QA
Pytest
Apply
≈ $41k – $104k per year (Estimated) • In office • 5+ years exp • Moscow
Python
AI/ML
AutoGen
LangChain
DeepSpeed
Fine-tuning
Prompt Engineering
Chain-of-Thought
AI Agents
NLP
GigaChat
Transformers
PyTorch
CrewAI
LLM
RAG
Machine Learning
Apply
$14k – $18k per year • In office • Full-Time • 3+ years exp • Moscow
DevOps
Linux
Windows
Apply
≈ $12k – $21k per year (Estimated) • In office • Moscow
Python
Bash
DevOps
Ansible
GitLab CI
CI/CD
Jenkins
Git
Ubuntu
Nginx
Linux
DNS
Apache HTTP Server
Management
Confluence
Apply
≈ $19k – $51k per year (Estimated) • In office • Moscow
JavaScript
PHP
SQL
1C
PHP
Laravel
Symfony
PHPUnit
Bitrix
Xdebug
Databases
MySQL
PostgreSQL
Redis
RabbitMQ
Apache Kafka
Frontend
Vue.js
Vuex
Vue Router
DevOps
Rest API
Docker Compose
Docker Swarm
GitLab CI
CI/CD
Git
Docker
Kubernetes
Gitflow
SOAP
Management
Confluence
Bitrix24
Agile
Scrum
Kanban
QA
Swagger
Apply
≈ $16k – $38k per year (Estimated) • In office • Moscow
Python
JavaScript
SQL
Bash
Databases
PostgreSQL
SQLite
DevOps
gRPC
Git
Linux
TCP/IP
DNS
Wi-Fi
Cybersecurity
Wireshark
Tcpdump
IoT
MQTT
Apply
≈ $14k – $34k per year (Estimated) • Remote (likely EAEU) • Moscow
DevOps
OpenShift
Prometheus
CI/CD
Docker
Kubernetes
Grafana
Graylog
Linux
Apply
See all jobs
This is one of many
1,360,475 more open roles from verified company boards, updated every day.
Browse all jobs Get matched roles