Un quiz sur les détecteurs d'IA
QUIZ: admettons que je prenne un récit (écrit par un humain) dans un PDF brut, avec ses scories (coupures de mots, numéros de page et autres mentions de mise en page), et que je demande à une IA de retirer tout ce qui ne fait pas partie du texte lui-même, puis de refaire la mise en page et de créer un document Word, puis repasser sur le document Word pour changer tous les noms et inverser les sexes des personnages pour en sortir un autre Word, puis reprendre ce Word et mettre toute la structure (écrite au présent) au passé, ensuite de le traduire en anglais en "respectant le style", et que je prenne enfin le résultat et le soumette à Pangram, quel % "d'humain" résiduel pourrait-il attribuer à ce résultat à votre avis?
22h27: voici la réponse. 100%. Oui, ça m'a étonné aussi. Je l'ai testé sur un texte de moi de 2014, et j'ai fait toutes les démarches exposées ici... et même la traduction a gardé Pangram dans le 100% humain. En médecine, on parlait de spécificité, qui s'évalue chez les gens en bonne santé. Donc, en bonne santé ("sans IA"), malgré toutes ces transformations, Pangram demeure 100% spécifique. Je l'ai testé pour GPT et Claude. Cela concorde avec l'avis de Claude (voir plus bas) qui prédisait que la traduction ne ne changerait pas grand chose. Google et GPT étaient dans le champ, du moins pour leur conclusion.