Ce que la bonne IA évalue réellement

La vraie question n'est pas de savoir si un outil utilise l'IA. C'est de savoir si l'outil mesure des signaux qui prédisent la performance plutôt que des proxys qui semblent simplement pratiques.

4 mars 20266 min de lecture
Ce que la bonne IA évalue réellement

Aperçu d'analyse

Ce que la bonne IA évalue réellement

La partie 1 a tracé une ligne que le marché des technologies de recrutement s'est efforcé d'estomper : il y a une différence majeure entre automatiser un processus défaillant et améliorer la qualité du recrutement.

Cet article traite de la seconde voie. Si un système prétend être intelligent, il doit pouvoir expliquer ce qu'il évalue réellement et pourquoi ce signal est important.

Le problème du signal

Chaque outil d'embauche basé sur l'IA évalue quelque chose. La vraie question est de savoir si ce quelque chose prédit le résultat qui vous importe : si une personne réussira dans un poste spécifique, dans un environnement spécifique.

La plupart des systèmes évaluent encore des proxys. Les intitulés de poste, les années d'expérience, les diplômes et la densité de mots-clés corrèlent suffisamment souvent avec les résultats pour sembler utiles, mais corrélation n'est pas prédiction.

C'est dans cet écart que résident de nombreuses erreurs de recrutement. Harvard Business School et Accenture ont documenté que des candidats qualifiés sont régulièrement dépriorisés parce que leurs parcours ne produisent pas les bons marqueurs, même lorsque la capacité sous-jacente est présente.

Une véritable évaluation des capacités part d'une prémisse différente : ce que quelqu'un peut faire, comment il résout les problèmes et ses performances dans des contextes comparables comptent plus que l'apparence de son CV.

Deux candidats debout côte à côte, tandis que l'un est entouré de signaux de capacité et de résultats plus riches au-delà du CV.
Les signaux les plus forts se situent souvent en dehors du raccourci visible du CV que la plupart des outils ont été conçus pour classer.

Ce que prend en compte une véritable évaluation des capacités

Produits de travail démontrés. La première question est ce que le candidat a effectivement produit, modifié ou résolu, pas seulement ce dont il était officiellement responsable.

Approche de résolution de problèmes. La façon dont quelqu'un raisonne face à un défi est souvent plus prédictive que le fait d'avoir déjà rencontré un scénario identique.

Adéquation spécifique au contexte. Un candidat performant dans une organisation peut échouer dans une autre si le style de leadership, la structure de l'équipe ou les conditions d'exploitation sont sensiblement différents.

Trajectoire, pas instantané. Un CV capture un instant. Une meilleure évaluation examine comment quelqu'un s'est développé au fil du temps et si ses capacités se renforcent.

Résultat d'embauche encadré et pellicule représentant des preuves dans le temps plutôt qu'un instantané unique du CV.
L'évaluation des capacités examine le travail démontré et la trajectoire, pas seulement l'instantané le plus soigné devant vous.

Pourquoi les modèles généralistes ne peuvent pas bien faire cela

Les grands modèles généralistes excellent dans la reconnaissance de motifs sur des ensembles de données larges. Ils peuvent faire remonter des candidats qui ressemblent à des populations ayant historiquement bien performé ailleurs.

Ce qu'ils ne peuvent pas faire automatiquement, c'est comprendre votre organisation de manière spécifique. Ils ne savent pas ce que partagent vos meilleurs éléments au-delà de ce qui est visible dans les données d'entraînement généralisées.

Cette limitation est importante. Les signaux qui prédisent le succès d'un ingénieur senior dans une entreprise logicielle en forte croissance ne sont pas les mêmes que ceux qui prédisent le succès d'un ingénieur senior dans une institution financière régulée.

Des modèles spécifiques au contexte, entraînés sur votre environnement, vos flux de travail et les véritables schémas de performance de vos meilleurs éléments, peuvent prendre des décisions calibrées sur les résultats qui vous importent plutôt que des inférences larges basées sur les données des autres.

Une carte côte à côte montrant une zone vide et une carte urbaine riche en itinéraires pour illustrer l'orientation générique par opposition à l'orientation spécifique au contexte.
Le contexte compte. Un modèle générique donne une carte approximative ; un modèle étalonné fournit un itinéraire à travers votre environnement opérationnel réel.

À quoi cela ressemble en pratique

La différence concrète apparaît à l'étape des entretiens. L'évaluation par proxys fait avancer les candidats dont les parcours ressemblent le plus aux embauches passées.

L'évaluation des capacités fait avancer les candidats qui ont démontré les compétences et comportements pertinents, même si le chemin qu'ils ont emprunté pour les acquérir paraît non conventionnel sur le papier.

Cela change plus que le classement. Cela modifie le vivier lui-même, car des candidats qui auraient été écartés par la logique des proxys deviennent désormais visibles.

Le dernier article de cette série couvre le volet acheteur de l'équation : ce que les responsables RH doivent exiger lorsqu'un fournisseur prétend que son système prend de meilleures décisions d'embauche.

Conclusion

  • Une bonne IA évalue la capacité, le contexte et la trajectoire plutôt que de s'appuyer uniquement sur des proxys basés sur le CV.
  • Le résultat pratique n'est pas seulement un classement différent des candidats connus, mais l'accès à un vivier de candidats différent et souvent plus solide.

Références

  1. 1. Harvard Business School and Accenture. Hidden Workers: Untapped Talent. https://www.hbs.edu/managing-the-future-of-work/Documents/research/hiddenworkers09032021.pdf
  2. 2. Harvard Business School Working Knowledge. How to Tap the Talent Automated HR Platforms Miss. https://www.library.hbs.edu/working-knowledge/how-to-tap-the-talent-automated-hr-platforms-miss

Article suivant de la série

Ce que les responsables RH devraient réellement exiger

Les responsables RH devraient exiger une clarté des signaux, une spécificité organisationnelle, de l'explicabilité, une intégration aux systèmes existants et des preuves liées aux résultats de performance plutôt que des démonstrations spectaculaires.

Ce que l'IA peut et ne peut pas fairePartie 2 sur 3

Prenez de l'avance sur l'évolution de l'écosystème

Un e-mail par semaine. Recherches originales, guides opérationnels et signaux écosystémiques qui comptent - pas de fioritures, pas de spam.