PitchMeAI Jobs
LoiZéro

Directeur.rice, Évaluations

LoiZéro · Montréal

Posted about 3 months ago

or apply directly on LoiZéro's site. We never take the application ourselves.

Is this posting real?

This role has been open
80 days
LoiZéro's roles stay open a median of 80 days
Reposted
No
Salary listed
No
0% of LoiZéro's roles list one
Ghost-job risk at LoiZéro
high
14 stale, 0 reposted of 15 open
Hiring momentum
16 roles opened in the last 90 days
↑ up vs. the prior 90 days
Last confirmed on the employer's board
2026-10-22

Measured from postings appearing on and disappearing from LoiZéro's own greenhouse board since 2026-08-03. Full hiring picture for LoiZéro.

About this role

Le Directeur.rice des évaluations chez LawZero sera responsable de structurer et diriger l'équipe d'évaluations, en définissant des stratégies pour mesurer les capacités et la sécurité des systèmes d'IA. Ce rôle inclut la création de benchmarks, la supervision de la conception de jeux de données, et la communication des résultats d'évaluation, tout en garantissant l'indépendance des évaluations par rapport aux axes de recherche principaux.

Our read on this posting2.8out of 5
benefits
3/5
freshness
1/5
career value
5/5
role clarity
5/5
pay transparency
0/5

Scored from the posting itself — how clearly the role is described, how much it says about pay and benefits, and how recently it was listed. Not a judgement of LoiZéro as an employer.

What you need

  • Diplôme d'études supérieures en apprentissage automatique, informatique ou domaine connexe
  • Plus de 10 ans d'expérience en apprentissage automatique, dont au moins 5 ans en leadership d'équipes techniques
  • Expertise dans l'évaluation à grande échelle de LLM ou systèmes de pointe
  • Expérience dans la création de jeux de données d'évaluation et de benchmarks
  • Excellentes compétences en communication écrite et verbale
  • Capacité à travailler dans un environnement de recherche rapide et ambigu

Nice to have

  • Expérience dans la direction d'exercices de red-teaming
  • Collaboration avec des partenaires tiers pour la création de benchmarks et d'ensembles de données
  • Publication d'ensembles de données open-source ou d'outils d'évaluation
  • Familiarité avec les politiques et normes de sécurité de l'IA
  • Expérience avec des instituts de sécurité externes ou des bailleurs de fonds

What you get

  • L’occasion de contribuer à une mission unique avec un impact important
  • Des avantages santé complets
  • Un minimum de 20 jours de vacances dès l’embauche
  • Contribution d'épargne retraite de l’employeur d'un minimum de 4%
  • Des avantages généreux et flexibles pour le bien-être
  • Un milieu de travail collaboratif et inclusif

Worth weighing

  • Rôle de recrutement fondateur, ce qui peut impliquer des incertitudes initiales
  • Pas de mention de télétravail ou de flexibilité des horaires
  • L'environnement de travail est décrit comme rapide et ambigu, ce qui peut ne pas convenir à tous les candidats

Summarised from LoiZéro's posting. Read the full original.

Listed by LoiZéro on their greenhouse job board, last confirmed open on 2026-10-22. PitchMeAI is not the employer.

More roles at LoiZéro

All 15 open roles at LoiZéro →