Skip to main content
Postes ouverts
Temps plein
Télétravail/Varsovie, Pologne
Ingénierie

AI Systems Tester

QA & évaluation de modèles

Postuler à ce poste

Télétravail/Varsovie, Pologne
Temps plein
Publié le 01/07/2026

Description du poste

Les produits d'IA échouent autrement que les logiciels classiques — un score de risque peut être faux avec assurance, un assistant peut halluciner une recommandation. Nous recherchons un AI Systems Tester qui garantit que ce que nos modèles disent aux gestionnaires de flotte est correct, cohérent et sûr avant d'arriver en production.

Vous concevrez des jeux de données d'évaluation et des suites de tests automatisées pour nos modèles ML et fonctionnalités GenAI (dont mAIster), traquerez les cas limites dans de vraies données de flotte et définirez les critères de qualité que chaque release doit franchir.

Responsabilités

  • Concevoir et maintenir des jeux de données d'évaluation pour les modèles et fonctions IA
  • Construire des suites de tests automatisées pour les sorties de modèles et les prompts
  • Exécuter des tests de régression à chaque changement de modèle, de prompt ou de données
  • Traquer les cas limites dans les données de flotte réelles et en faire des cas de test
  • Définir et faire respecter les critères de qualité des releases IA
  • Rapporter les métriques de qualité et travailler avec les AI Engineers sur les correctifs

Exigences

2+ ans en QA ou automatisation de tests (Pytest, Playwright ou similaire)
Compréhension des modes d'échec des modèles ML et des LLM : biais, dérive, hallucinations
Expérience de la construction de jeux de tests ou de pipelines d'évaluation
Compétences pratiques en SQL et en scripts Python
Expérience du test de pipelines de données ou d'API(Souhaité)
Connaissance des frameworks d'évaluation de LLM et de l'intégration CI(Souhaité)

Avantages

Bureau moderne au centre de Varsovie (avec option télétravail)

Environnement de travail international

Impact réel sur des produits utilisés par plus de 700 clients flotte

Horaires flexibles et équilibre vie professionnelle-vie privée

Culture d'équipe collaborative et événements réguliers

Rémunération compétitive et primes de performance

Nos valeurs

Des solutions durables pour un avenir meilleur

Un lieu de travail collaboratif et inclusif

Un impact mondial par des initiatives locales

À propos de VivaDrive

Nous sommes une startup #mobilité #énergie qui aide les entreprises à introduire des voitures électriques dans leur flotte. Notre mission est d'accélérer les solutions de transport durable dans le monde entier.

Notre bureau principal

VivaDrive Poland Sp. z o.o.
ul. Złota 59
00-120 Warsaw, Poland