AI Productivity Engineer Intern
AI Productivity Engineer Intern
Employer Active
Job Alert
You will be updated with latest job alerts via email
Share
Job Alert
You will be updated with latest job alerts via email
Job Description
Le poste :
Yousign recherche partir de janvier 2026 un(e) AI Productivity Engineer Intern pour rejoindre son quipe AI Productivity directement sous la supervision du AI Productivity Lead Engineer.
Durant ce stage de 6 mois tu participeras la mise en uvre dun processus dvaluation robuste et industrialis pour nos agents/assistants dIA de productivit (Dust). Ton primtre couvrira :
- la dfinition des critres de qualit
- la constitution de jeux de tests
- larchitecture le dveloppement le dploiement et lexploitation continue dun pipeline dvaluation.
Lobjectif est damliorer la qualit la fiabilit et la mesurabilit des agents utiliss par les quipes grce des indicateurs de performance suivis.
Missions principales :
- Benchmark & tude : Revue des approches dvaluation (LLM-as-Judge golden sets pairwise human-in-the-loop) ; benchmark doutils (Dust LangSmith OpenAI Evals plateforme custom) ; dfinition des critres qualit par type dagent (exactitude robustesse scurit cot latence).
- Conception : Design dun pipeline dvaluation reproductible (datasets orchestration stockage des runs traabilit) ; spcification de lintgration aux agents Dust et au CI/CD ; schma des tableaux de bord et alertes (adoption rgressions SLO qualit).
- Dveloppement : Implmentation dune plateforme dvaluation (Python/TypeScript) et des premiers jeux de tests ; intgration LLM-as-Judge et mtriques (accuracy relevance safety cost latency) ; automatisation des campagnes hebdomadaires et versioning des rsultats.
- Dploiement : Dploiement du pipeline des tableaux de bord et des alertes en environnement de production interne ; intgration au workflow des quipes (documentation formation runbooks) ; passage de relais pour lexploitation continue.
Profil recherch :
- tudiant(e) en cole dingnieur en recherche dun stage de fin dtudes.
Comptences techniques (Hard skills) :
Must-have :
- Bases solides en dveloppement (Python ou TypeScript) et en mtriques.
- Rigueur dans la gestion des donnes (datasets annotation reproductibilit versioning).
- Intrt marqu pour lIA gnrative et lvaluation de la qualit.
- Anglais courant (documentation technique outils).
Nice-to-have :
- Exprience avec des LLMs (Claude GPT etc.) et valuation automatise.
- Connaissance doutils dvaluation (LangSmith OpenAI Evals Langfuse) ou dobservabilit.
- Pratique du CI/CD des tableaux de bord et de lalerting.
Qualits personnelles (Soft skills) :
- Curiosit et veille technologique Intrt pour linnovation en IA.
- Pdagogie Capacit vulgariser et former.
- Adaptabilit Environnement en volution rapide.
- Esprit dinitiative Proactivit dans lidentification dopportunits.
Ce que trouveras chez Yousign :
- Une scale-up dynamique qui place les personnes avant tout
- Un style de management qui favorise lautonomie et la cohsion au travers dobjectifs communs (OKR)
- Le meilleur de la culture et des mthodes de travail
- Un environnement de travail bienveillant et stimulant
- Des vnements dquipes rguliers
- La possibilit de travailler depuis nos trs jolis bureaux Paris juste ct de la place de Clichy
- Tltravail occasionnel (rythme adapter avec ton quipe)
Equal Opportunity at Yousign
Chez Yousign nous clbrons lunicit et veillons ce que chaque membre de lquipe ait les mmes opportunits de offrons des chances gales tous et maintenons des processus transparents et quitables.
Rejoignez-nous chez Yousign o nos diffrences nourrissent la crativit et la force embarquons ensemble dans cette aventure incroyable !
Employment Type
Full Time
