0:00 il y a deux mois on a décidé de lancer
0:01 une immense expérience statistique en
0:04 envoyant plus de 10000 CV à des
0:06 recruteurs l'objectif répondre à quatre
0:08 questions qu'on sait tous déjà posés
0:10 est-ce que c'est grave de pas avoir une
0:12 orthographe irréprochable est-ce que sur
0:14 sa photo il vaut mieux être souriant ou
0:16 plutôt sérieux à quel point le fait
0:18 d'avoir fait une grande école va
0:20 vraiment augmenter les chances de passer
0:22 la première sélection et enfin est-ce
0:24 que bullshithé au max comme sur Linkedin
0:26 ça va augmenter vos chances ou est-ce
0:29 que au contraire c'est une fausse bonne
0:31 idée après avoir passé plus de 168
0:33 heures à développer un bot généré 2000
0:36 messages avec chat GPT et envoyer
0:39 10164 CV il est temps pour nous de vous
0:43 dévoiler nos résultats et d'élucider une
0:45 fois pour toutes ce problème que se pose
0:47 tous les candidats comment créer le CV
0:50 parfait
0:54 [Musique]
0:59 la première chose à faire c'est
1:01 d’établir un protocole pour tester si
1:03 par exemple sourire sur sa photo et
1:05 statistiquement une bonne stratégie on
1:07 va créer deux groupes de CV parfaitement
1:10 identiques la seule différence c'est que
1:11 les premiers auront une expression
1:13 sérieuse et les autres un sourire
1:15 ensuite on va les envoyer à masse de
1:17 recruteur attendre un peu et mesurer les
1:19 taux de réponse positives de chaque
1:21 groupe le problème c'est que on peut pas
1:23 se contenter d'envoyer une dizaine de CV
1:25 il y en aura toujours un ou deux qui se
1:27 feront refuser par hasard mais si on en
1:29 voit 10000 CV et qu'on mesure toujours
1:32 des grosses différences on sera beaucoup
1:34 plus confiant de nos résultats a priori
1:36 on n'est pas à notre coup d'essai on a
1:38 déjà à développer des bottes par le
1:40 passé notamment sur des applis de
1:42 rencontre mais c'était uniquement pour
1:43 envoyer des messages pré écrits ici il
1:46 va falloir générer des CV convaincants
1:48 les envoyer en masse sans se faire
1:50 bannir des plateformes et trouver un
1:53 moyen d'analyser les réponses massives
1:56 des recruteurs donc je sais pas dans
1:57 quoi on s'est embarqué encore
1:59 mais ça promet d'être un sacré
2:01 casse-tête pour commencer on va devoir
2:02 créer de faux candidats et leur inventer
2:05 une identité complète un nombre des
2:07 photos des hobbies et que ce soit
2:09 crédible il faut notamment pas qu'il
2:11 soit parfait parce que s'ils sont trop
2:13 pas attrayants les résultats risquent
2:14 d'être complètement inexploitables parce
2:16 qu'ils seront toujours acceptés les yeux
2:18 fermés même s'il y a écrit ancien membre
2:21 du Ku Klux Klan dans une petite ligne du
2:23 CV je vous présente donc Damien notre
2:25 premier candidat un brillant
2:27 administrateur système et réseau il sort
2:29 de l'école Epitech et maîtrise un tas
2:32 technologique comme windowserver desbian
2:34 Reda kubernatis Cisco et là vous pouvez
2:37 constater un premier problème c'est que
2:40 on est obligé de faire des CV très
2:42 touche à tout en fait c'est le seul
2:44 moyen de pouvoir répondre à beaucoup
2:45 d'offres qui ont des prérequis variés
2:47 c'est pas dramatique et dans tous les
2:49 cas quand tu vois ce que les recruteurs
2:50 de la TEC demande il est limiterait
2:52 crack limite pour les CV suivant on se
2:54 dit que ce serait intéressant de tester
2:56 nos questions dans des secteurs
2:57 différents commercial aide etc histoire
3:00 de savoir par exemple si dans la santé
3:02 on va être aussi sensible à la phrase
3:05 géologie bullshit que dans la vente par
3:08 exemple ça paraît une excellente idée
3:09 sauf que je me suis rapidement confronté
3:12 à un problème qui est que je ne connais
3:14 pas du tout le jargon technique de
3:15 chaque métier et en fait créer de toutes
3:18 pièces des faux CV crédibles c'est hyper
3:21 dur surtout que les recruteurs c'est les
3:24 premiers à avoir un radar à MiTo donc
3:26 comment on fait dans ce genre de cas
3:27 générer un truc alors qu'on comprend
3:29 rien les cancres le rendent Viny
3:32 il va nous permettre d'écrire des
3:34 expériences crédibles ainsi qu'une
3:36 petite phrase d'accroche qu'on va mettre
3:38 en haut du CV regardez moi ça au cours
3:40 de ces dernières années j'ai acquis une
3:42 expérience pointue en gestion des
3:43 relations clients et dans des cycles de
3:45 vente et de production complexe
3:47 profondément passionné par mon métier je
3:49 fais preuve d'une rigueur absolue pour
3:50 soutenir les entreprises et leurs
3:52 équipes dans leur croissance
3:57 Damien crédible il manque un dernier
4:00 détail c'est probablement le plus
4:02 important mais aussi le plus galère
4:04 c'est sa photo au début je pensais
4:07 utiliser 10 personnes d'asnotes existent
4:09 le fameux site qui génère un nouveau
4:10 visage à chaque fois que on rafraîchit
4:12 la page sauf que c'est une mauvaise idée
4:15 déjà les photos sont parfois dégueu voir
4:18 carrément creepy
4:20 et surtout ça rajouterait un énorme
4:22 billet imaginons que cette photo est
4:24 plus de succès que celle-là est-ce que
4:26 c'est grâce à son grand sourire ou à sa
4:29 coupe de cheveux ou à sa cravate un peu
4:31 pas savoir en fait il faut vraiment
4:32 qu'on fasse des variations de la même
4:34 photo où il y a uniquement la bouche qui
4:37 change c'est le seul moyen du coup soit
4:39 je dois devenir un expert Photoshop en
4:42 deux jours soit on profite des récentes
4:44 avancées en nia générative comme stable
4:47 diffusion grâce à ça on va évidemment
4:49 pouvoir générer des photos de profil
4:52 ultra-réaliste comme ce magnifique
4:53 Damien mais surtout on devrait
4:55 facilement pouvoir faire de la chirurgie
4:57 esthétique si vous avez pas trop suivi
4:59 autour du phénomène stable diffusion cet
5:02 agrégé une communauté absolument
5:04 fascinante qui expérimente dans tous les
5:07 sens et crée des extensions ça peut être
5:09 pour contraindre la génération avec un
5:11 dessin généré des vidéos complètes ou
5:13 encore pour faire de l'in painting limp
5:16 painting c'est l'art de générer
5:18 uniquement une portion d'image par
5:20 exemple j'aimerais un ours derrière moi
5:22 s'il te plaît
5:25 pour nous la première étape ça va être
5:27 de contrôler la pose de notre sujet en
5:30 utilisant posex mais pas un Pokémon
5:31 ensuite il ne reste plus qu'à effacer la
5:34 bouche et remplacer souriant par sérieux
5:36 dans le prompte on clique sur Générer et
5:39 voilà c'est parfait maintenant qu'on a
5:41 quelques CV il est temps d'envoyer tout
5:43 ça à des employeurs j'avoue que je me
5:45 suis pas mal creusé la tête parce que le
5:47 plus simple c'est d'utiliser des sites
5:49 d'annonces comme LinkedIn ou indeed mais
5:52 ma seule crainte c'est que avec un bot
5:53 qui presse 15 boutons par seconde et en
5:56 voie 10000 candidatures dans la journée
5:57 on risque que de se faire bannir
5:59 malheureusement il y a aucun moyen de
6:01 connaître les limites à l'avance à part
6:03 essayer j'ai pris le parti de concentrer
6:05 mes efforts sur indeed c'est un peu
6:07 moins populaire et avec de la chance les
6:09 sécurités anti robots seront pas trop
6:12 violentes le premier script qu'on a
6:13 écrit va tenter de récolter toutes les
6:15 annonces d'un secteur donné et les
6:18 stocker dans une base de données bon
6:19 alors ça tournait depuis quelques
6:21 minutes quand tout à coup voici ce que
6:23 je me suis mangé
6:24 hantise de tout les moteurs à captcha
6:28 avant de se mettre à imaginer des
6:30 systèmes complexes pour éviter les
6:32 détections et continuer notre extraction
6:34 d'offres d'emploi on s'est dit qu'on
6:35 allait tenter un truc simple si vous
6:37 tapez by-pass capture dans le magasin
6:40 d'extension chrome on trouve un paquet
6:42 qui affirme régler ce problème grâce à
6:44 l'intelligence artificielle alors mot au
6:47 début quand j'ai vu ça j'étais archi
6:48 circonspect parce que c'est gratuit donc
6:50 ça veut dire que ils peuvent pas
6:51 financer des micro travailleurs au
6:53 Bangladesh pour résoudre les trucs à la
6:54 limite ils peuvent siphonner vos données
6:56 mais est-ce que c'est vraiment aussi
6:57 simple de contourner les captcha et il
7:00 semblerait que oui vraiment on a
7:02 installé l'extension lancez notre botte
7:04 et attendu 5 minutes 30 minutes là
7:07 normalement il y a tout qui pète
7:08 n'importe quel site deux heures en tout
7:10 on a laissé tourner le bot 8 heures en
7:13 vrai c'est un truc de malade 8h pendant
7:15 lesquelles on a récupéré 37000 annonces
7:18 provenant de plus de 15000 entreprises
7:21 pourtant on ne va pas pouvoir envoyer 37
7:25 un des aspects les plus importants de
7:27 notre expérience c'est de pouvoir
7:28 déterminer de manière fiable et non
7:30 biaisée les réponses positives ou
7:32 négatives de manière complètement
7:34 automatisée or sur indeed pour gérer son
7:37 recrutement un employeur à deux
7:39 solutions soit il récolte les
7:41 candidatures sur la plateforme avec
7:43 l'outil intégré soit il redirige vers
7:45 son propre système ou un simple mail ce
7:48 deuxième scénario pour nous il est assez
7:50 infernal on devrait analyser le contenu
7:52 d'email et évaluer si oui ou non en est
7:55 bleu dans le premier c'est beaucoup
7:57 moins ambigu le recruteur doit
7:58 explicitement indiquer un statut accepté
8:01 conclusion on doit filtrer et se limiter
8:04 à quelques milliers d'offres ça peut
8:06 paraître beaucoup mais c'est un total ça
8:09 veut dire que pour certains corps de
8:10 métier on est en fait assez vite limité
8:13 or nous on a envie de tester plusieurs
8:15 expériences Zaki marrant donc il faut
8:18 trouver une solution la première ce
8:19 serait de diminuer la taille de nos
8:21 échantillons mais pas envie je veux
8:24 vraiment un truc archibéton où on a très
8:27 peu de doutes autre possibilité faire
8:29 participer les recruteurs à de multiples
8:31 expériences en parallèle en leur
8:33 envoyant plusieurs CV sauf que on peut
8:35 pas envoyer plusieurs variations d'un
8:36 même CV imaginez reçoivent deux Damiens
8:38 à analphabète et un autre qui fait la
8:41 tronche il va bugger pas mal je pense
8:42 sinon on pourrait aussi faire plein de
8:44 nouveaux CV mais c'est mégalons chiant
8:47 et vraiment j'ai pas envie surtout que
8:49 j'ai eu une meilleure idée qui va en
8:52 plus nous permettre de faire plein de
8:54 petites expériences supplémentaires vous
8:56 l'aurez peut-être deviné on va croiser
8:58 nos expériences concrètement plutôt que
9:01 de simplement faire grande école versus
9:03 parcours normal on va faire grande école
9:06 mauvaise orthographe grande école bonne
9:08 orthographe université mauvaise
9:09 orthographe université bon orthographe
9:10 une matrice et c'est génial ce que non
9:13 seulement on peut garder de grands
9:14 échantillons mais en plus on aura des
9:16 réponses encore plus intéressantes par
9:18 exemple on va pouvoir savoir si
9:19 l'avantage d'une grande école persiste
9:22 si vous avez une mauvaise orthographe ou
9:24 est-ce que ça vous grille instantanément
9:26 et cette fois la phase de préparation
9:27 est bel et bien terminée on a nos offres
9:30 d'emploi d'un côté nos CV de l'autre et
9:32 un nouveau script job Finder ultra try
9:35 hard point P qui va permettre de mettre
9:37 les uns dans les autres en gros il
9:40 remplit un formulaire tout seul avec le
9:41 bon PDF et avec une grande émotion je
9:44 vous annonce que nous sommes prêts à
9:46 lancer l'expérience c'est parti
9:48 [Musique]
9:57 c'est tellement fascinant à regarder je
9:59 trouve j'adore ce qui est intéressant
10:01 quand on a autant de données c'est que
10:03 en plus de notre expérience en cours on
10:05 peut facilement faire des stats
10:07 totalement random par exemple avec les
10:10 titres des annonces on peut estimer les
10:12 langages de programmation les plus
10:14 demandés voilà et il y a quelques
10:16 surprises le Java qui est loin devant
10:18 avec quasi 2700 annonces mais surtout
10:21 regardez bien le cobble 145 annonce en
10:25 cow-boy pour cet antiquité des années 60
10:27 c'est fascinant cinq fois plus
10:29 d'annonces que Swift un engage moderne
10:31 d'Apple et devine quoi qu'est-ce qu'on a
10:33 trouvé aussi dans les annonces notre
10:34 partenaire du jour au Doubs si ça c'est
10:37 pas une coïncidence
10:39 si vous connaissez pas odoo c'est un
10:42 écosystème d'applis pour gérer son
10:44 entreprise de A à Z e-commerce CRM
10:46 compta automatisation plutôt que d'avoir
10:48 12 abonnements avec des outils en silo
10:50 vous avez une suite centralisée pour
10:53 vous faire gagner énormément de temps on
10:54 avait reçu leur fondateur sur underscore
10:56 avec qui on avait parlé d'Open Source et
10:59 de comment ils ont réussi à trouver un
11:00 modèle rentable c'était passionnant et
11:02 comme vous pouvez le voir ils sont
11:03 partout et vous avez de la chance parce
11:05 que avec le lien dans la description
11:06 vous pouvez obtenir une appli
11:08 gratuitement à vie et moi je vous
11:10 conseille le meilleur deal qui est le
11:12 website builder puisqu'il inclut support
11:14 hébergement et même un nom de domaine
11:16 pendant un an et après essayer
11:17 d'utiliser des interconnexions entre
11:19 happy parce qu'en fait c'est ça le plus
11:20 puissant personne n'en parle genre
11:21 afficher le dashboard de vos ventes dans
11:23 le Rapid wiki par exemple ou votre
11:25 service rh avec votre site fin il y a
11:27 des trucs de ouf à faire et au dos
11:28 recrute des textes d'ailleurs si vous
11:30 avez le même profil que Damien là un
11:31 gros crack n'hésitez pas
11:34 en fait après quelques centaines de CV
11:36 quand même le script a fini par cracher
11:39 vous savez le fameux formulaire à
11:41 remplir et bah la plupart du temps il va
11:43 demander des trucs normaux genre votre
11:45 nom ou votre adresse mais en fait
11:47 parfois ça change il semblerait que les
11:50 employeurs et la possibilité de mettre
11:52 des questions personnalisées de leur
11:55 choix ça peut paraître pas grand chose
11:57 mais en fait c'est une nouvelle
11:58 abominable parce que au temps préparé
12:00 les réponses à l'avance pour 5 6
12:02 questions c'est facile autant là ça fait
12:04 une infinité de cas possible alors
12:06 l'espace d'un instant j'ai pensé à
12:08 mettre ne sais pas voilà mais imaginez
12:11 que la question ce soit quel est votre
12:13 ville de naissance rien répondre ne sait
12:15 pas on la raconte quand même non il faut
12:17 mieux que ça un système automatisé
12:19 capable de répondre à n'importe quel
12:21 question de manière crédible oui bon bah
12:24 voilà bah oui on va encore utiliser
12:26 tchat jptiste devient prévisible alors
12:28 je sais que c'est pas idéal parce que on
12:30 contrôle pas totalement ce qui va en
12:32 sortir mais on va partir du principe que
12:34 l'impact sera négligeable à concerne peu
12:36 de questions sur peu d'annonces le seul
12:38 danger quand même d'utiliser l'API
12:40 d'openhaye où tu payes à la requête dans
12:42 un programme automatisé avec des boucles
12:45 sur des milliers d'opérations
12:48 de budget à la fin là c'est ma petite
12:50 angoisse personnelle ma première idée
12:52 c'était de lui envoyer directement les
12:54 questions des recruteurs mais il faut
12:55 l'avouer pour certaines tâches il est
12:57 quand même un peu débile par exemple à
12:59 la question fournissez trois exemples de
13:01 sites WordPress designer et intégrés il
13:04 a répondu ceci le premier site n'existe
13:06 pas le deuxième c'est pas un WordPress
13:08 et le dernier New Yorker c'est un
13:10 rapport c'est un thème mais c'est tout
13:13 une solution à ça c'est de rendre chat
13:15 GPT plus conscient de ce qu'il est en
13:17 train de faire de lui donner plus de
13:19 contexte le nom du candidat le poste
13:21 actuel celui qu'il cherche dès qu'on a
13:23 fait ça on s'est mis à obtenir des
13:25 réponses d'une pertinence incroyable
13:27 regardez à la question Quels sont vos
13:29 prétentions salariales qui est loin
13:31 d'être facile et répond je suis ouvert à
13:34 toute proposition raisonnable et je
13:36 serai ravi de discuter de mes
13:37 prétentions salariales lors d'un
13:39 entretien t'as franchement cette esquive
13:41 c'est une master class et normalement
13:43 cette fois notre botte est incassable
13:46 après quelques semaines de délai on peut
13:48 considérer que les recruteurs ont eu de
13:50 quoi examiner nos candidatures il est
13:52 temps de mesurer les résultats
13:56 voici la matrice récapitulative des
13:58 croisements des expériences vous
14:00 inquiétez pas je vais résumer le plus
14:02 intéressant au total on a envoyé
14:04 10164 CV on a été recontactés 1503 fois
14:08 et refusé 10421 ce qui veut dire que 71%
14:12 des candidatures n'ont jamais obtenu de
14:15 réponse c'est assez violent en vrai chat
14:17 GPT a généré 2000 excellentes questions
14:20 pour un budget assez impressionnant de 8
14:23 dollars il y a juste une fois où il nous
14:25 a fait une petite sortie de route on
14:27 n'était pas prêt la question c'était je
14:28 vous remercie de nous donner le nom de
14:30 chantier significatif pour lesquels vous
14:32 avez participé au sens de gros projet de
14:35 dev réponse oui le chantier de la
14:38 construction de la Tour Eiffel et la
14:40 rénovation de l'hôtel de ville de Paris
14:41 tu as 150 ans mec maintenant les
14:44 pourcentages que je vais vous montrer
14:46 correspondre au taux de réponse positive
14:48 et la première bonne nouvelle c'est que
14:50 on a des écarts significatifs notamment
14:53 un qui est complètement abusé qui est
14:56 chouette parce que on aurait tout aussi
14:57 bien pu n'avoir rien à observer
14:59 d'intéressant surtout que là on mesure
15:01 le taux d'acceptation pour un premier
15:03 entretien pas pour une embauche c'est
15:06 une étape qui ne coûte rien pour
15:08 l'employeur donc on s'attend à ce que il
15:10 tape large ce qui veut dire que un écart
15:12 de quelques pourcents et déjà énorme en
15:15 réalité et on commence avec le plus
15:17 prévisible les fautes d'orthographe les
15:19 candidats à qui en avaient ont obtenu
15:21 3,6% de réponse positive en moins pas
15:24 négligeable mais je m'attendais à pire
15:27 honnêtement ensuite le niveau d'études
15:29 vous allez voir c'est plus étonnant déjà
15:31 on a observé que les candidats issus de
15:33 Bac + 5 ont obtenu 1,2% de réponse
15:36 positive supplémentaire ça paraît
15:39 ridicule mais en fait quand on regarde
15:40 de plus près c'est plus compliqué que ça
15:42 on a fait ce test avec un profil
15:43 ingénieur technique et un profil école
15:46 de commerce vente et ça n'a rien à voir
15:49 le premier à obtenir 5% de réponse
15:51 positives en plus grâce à ces longues
15:54 études et pour le deuxième ça n'a
15:55 littéra rien changé donc peut-être que
15:58 pour les profils commerciaux on accorde
16:00 plus d'importance aux expériences
16:02 professionnelles que au cursus en tout
16:04 cas 5% de plus c'est pas du tout
16:06 négligeable pour les décos donc si vous
16:08 vous demandez si vous avez eu raison de
16:10 trimer consolez-vous ça n'a pas servi à
16:12 rien maintenant qu'est-ce que ça donne
16:14 si on croise les fautes et le cursus
16:16 scolaire la prédiction c'était que pour
16:18 les grandes écoles les fautes allaient
16:20 être rédhibitoires et en fait c'est
16:22 l'inverse c'est-à-dire que pour eux ça
16:24 ne change rien peut-être que l'école
16:25 valide le candidat d'emblée sans même
16:27 avoir à lire le reste par contre si vous
16:30 n'avez pas de grande école et qu'en plus
16:32 vous faites des fautes là c'est une cata
16:34 12% de réponse en moins donc mettez
16:37 toutes les chances de votre côté et
16:38 attention aux fautes pour la question
16:40 faut-il sourire sur sa photo j'avais pas
16:43 vraiment d'avis et il décide de coaching
16:44 n'ont pas l'air sûr non plus d'ailleurs
16:46 il faut absolument sourire pour montrer
16:47 son enthousiasme ne surtout pas sourire
16:50 pour ne pas passer pour un clown
16:51 permettez-vous d’accord et en fait la
16:53 réponse est on s'en fout voilà d'après
16:54 nos résultats ça change absolument rien
16:57 donc arrêtez de vous créez le chignon
16:59 surtout que vous feriez mieux de vous
17:01 concentrer sur autre chose autre chose
17:03 qui semble avoir un impact complètement
17:06 hallucinant sur vos chances d'être
17:08 sélectionnés un impact tellement abusé
17:11 qu'on a cru à un bug et que on a refait
17:13 nos calculs 10 fois pour être absolument
17:15 sûr de notre coup le dernier profil
17:17 qu'on a étudié c'est celui du beau
17:20 parleur c'est un commercial champion de
17:22 la prose un Victor Hugo du parallé
17:25 Corporate par exemple pour son stage au
17:27 lieu de dire j'ai réorganisé le magasin
17:29 il dit j'ai élaboré un plan pour
17:32 réagencer et optimiser les surfaces de
17:34 vente et on a fait ça pour tout vraiment
17:36 la moindre action banale devenait épique
17:39 on s'est dit on va pousser le bouchon
17:40 tellement loin qui va forcément se faire
17:42 flag et refuser sauf qu'en fait c'est
17:45 pas du tout ça qui s'est passé pas du
17:47 tout accrochez-vous ce profil à
17:49 surperformer à hauteur de
17:51 23%. à l'aide la conclusion est horrible
17:55 vraiment je pensais pas le dire un jour
17:57 mais bouchiter allez sauver votre peau
17:59 bouschitée au max je m'excuse d'avance
18:02 auprès de tous les recruteurs mais c'est
18:05 la vérité vous êtes sensible au bullshit
18:07 plus sérieusement la conclusion c'est
18:09 vous embêtez pas avec les conseils
18:10 aléatoires des articles pour prendre la
18:12 photo parfaite passez plutôt 10 minutes
18:14 avec chat GPT pour corriger vos fautes
18:16 et bien vendre vos expériences c'est le
18:19 plus important et si vous voulez qu'on
18:21 refasse ce genre d'expérience n'hésitez
18:22 pas à nous faire des suggestions en
18:24 commentaire et surtout à aller voir
18:25 notre précédente expérience où on avait
18:28 envoyé plus de 10000 messages sur une
18:30 appli de rencontre juste pour tester
18:31 qu'elle était la phrase d'accroche la
18:33 plus efficace et c'est marrant le
18:35 résultat était aussi déprimant et si
18:37 vous aimez les vidéos bidouille et
18:38 inventions sachez que hier est sorti sur
18:40 la chaîne déclic un grand jeu dont j'ai
18:43 été le présentateur première fois avec
18:45 des invités très stylées si vous voulez
18:47 refaire votre culture générale n'hésitez
18:49 pas c'est dans la description c'était
18:51 micode salut