Une IA construite à partir de vos réponses peut-elle vraiment vous remplacer ?

Des chercheurs ont créé un agent à partir de l'entretien de chaque salarié, puis l'ont confronté à cette personne. L'agent collait aux réponses du groupe, mais ratait l'individu.

Explique : Interview-Informed Generative Agents for Product Discovery: A Validation Study, Zichao Wang et al., 2026-03-10, v1 Lire l'original

IA et société · 2026-09-09

La promesse est facile à vendre. Vous accordez un long entretien, une IA apprend votre façon de parler et de travailler, et à partir de là une version de vous peut répondre aux questions à votre place, si bien que plus personne n'a besoin de vous déranger. Une étude récente a construit exactement ce genre de doublure, puis l'a confrontée aux personnes dont elle était la copie. Le constat est net et un peu décevant : les copies ressemblaient au groupe, mais pas à l'individu.

Les chercheurs qualifient leurs agents de « calibrés sur la distribution mais imprécis sur l'identité ». En clair, tout un ensemble de ces agents reproduisait à peu près le mélange d'opinions produit par un vrai groupe, alors que chaque agent pris isolément était une doublure peu fiable de l'unique personne dont il s'inspirait. Pour comprendre ce que cela signifie, Polora a posé la même question à plusieurs modèles d'IA conçus par des entreprises différentes et leur a fait examiner l'étude ensemble.

Ce que l'étude a mesuré

Le dispositif était simple. 51 travailleurs du savoir aux États-Unis, tous dans des métiers où l'on manipule beaucoup de documents, ont chacun accordé un entretien approfondi sur leur façon de travailler, prévu pour 90 minutes et donnant en moyenne environ 43 minutes de parole enregistrée. À partir de chaque transcription, les chercheurs ont construit un agent personnel, à l'aide d'un procédé qui conserve l'entretien, en extrait les parties utiles quand une nouvelle question se présente, et confie à un modèle de langage le soin de raisonner et de répondre comme ce participant.

Ensuite, les personnes et leurs agents ont évalué les quatre mêmes outils d'IA imaginés pour travailler avec des documents : un qui répond à des questions en parcourant de nombreux fichiers, un qui met en évidence les passages clés, un qui transforme les documents en audio, et un qui exécute seul des tâches en plusieurs étapes. Chacun a été noté sur des critères simples d'utilité, de facilité d'usage et de disposition à l'adopter ou à le recommander, avec en parallèle des commentaires écrits libres. Les personnes ont repassé le même test trois jours plus tard, ce qui a donné à l'étude un point de repère sur la constance d'une personne avec elle-même. La vérification centrale était directe : comparer les réponses de chaque agent à celles de la personne même dont il avait été tiré.

Le groupe collait, la personne non

À l'échelle de l'individu, les agents étaient faibles. Sur l'accord exact avec leur propre humain, les agents issus des entretiens tombaient juste dans environ 30 % des cas, contre à peu près 45 % lorsque les mêmes personnes se contentaient de répondre à nouveau quelques jours plus tard. L'étude présente cela comme environ 67 % de la constance humaine, soit 30 divisé par 45, et non 67 % de réponses correctes. Fournir à l'agent l'entretien complet n'aidait presque pas : il ne faisait pas nettement mieux qu'un agent doté de quelques données démographiques seulement, ou même qu'un agent à qui l'on ne donnait rien du tout.

À l'échelle du groupe, le tableau s'inversait. Dès qu'on cessait de demander qui avait dit quoi pour ne regarder que la répartition d'ensemble des réponses, les agents issus des entretiens étaient les plus proches de la répartition réelle. Ils étaient la seule version à reproduire ne serait-ce qu'un peu les notes basses et sans enthousiasme. Un agent privé de toute information personnelle se rabattait sur une réponse prudente par défaut, plaçant la plupart de ses notes en haut de chaque échelle. Ainsi le groupe d'agents ressemblait à un vrai groupe, tandis qu'aucun agent pris à part ne ressemblait à sa vraie personne.

Part de réponses en accord exact avec la personne visée · agents issus des entretiens · les mêmes personnes · ≈ 30 % · ≈ 45 %
Part de réponses en accord exact avec la personne visée · agents issus des entretiens · les mêmes personnes · ≈ 30 % · ≈ 45 %

Pourquoi coller au groupe, ce n'est pas coller à vous

Imaginez dix personnes, cinq qui aiment un concept et cinq qui le rejettent. Une simulation pourrait reproduire ce partage cinq contre cinq à la perfection tout en se trompant sur chaque personne prise une à une. L'histogramme est juste et chaque pronostic individuel est faux. C'est une illustration, non une affirmation que les agents auraient littéralement inversé tout le monde, mais cela montre comment une répartition correcte peut masquer un tas d'erreurs individuelles. La moyenne laisse les erreurs se compenser.

Plusieurs explications ordinaires cadrent avec ce qui s'est passé. Un entretien saisit une partie du monde de quelqu'un, pas toutes les conditions qui décident d'une réaction. Les jugements sur un outil qu'on n'a jamais touché se construisent souvent sur le moment, ils ne se lisent pas dans un jeu de préférences déjà arrêté. Là où le témoignage est mince, un modèle comble le vide par un raisonnement plausible et générique qui sonne comme un travailleur type plutôt que comme celui-ci. Connaître la forme d'un groupe ne garantit presque rien sur l'un de ses membres en particulier.

Là où le lissage se voit

Les réponses écrites rendent l'écart concret. Pour l'outil audio, personnes et agents soulevaient les mêmes inquiétudes de premier plan : l'exactitude, la confidentialité, l'intégration aux logiciels déjà en place. Mais environ 30 % des vraies personnes rejetaient l'idée d'emblée, certaines disant qu'elles ne l'utiliseraient en aucun cas, alors qu'un seul agent opposait un refus aussi net. Les personnes nommaient des obstacles précis, comme le fait de travailler sur un ordinateur plutôt que sur un téléphone, ou le besoin de lire un document plutôt que de l'entendre, ou encore une règle de conformité dans leur entreprise. Les agents avaient tendance à reformuler ces refus catégoriques en problèmes qu'une amélioration pourrait résoudre.

Cette différence compte, car « je l'adopterais s'il s'améliorait » n'est pas la même réponse que « cela ne convient pas à mon travail ». Les agents obtenaient aussi leurs moins bons résultats sur la voix et le ton, produisant une prose bien rangée là où les personnes s'exprimaient de façon désordonnée, hésitante, parfois contradictoire. Une réserve s'impose ici : ces comparaisons qualitatives ont été notées par des juges IA qui ne s'accordaient que modérément entre eux, elles sont donc un appui, pas un verdict définitif.

Ce que cela veut dire pour une copie de vous-même

Si un fournisseur ou une équipe de recherche vous propose un personnage bâti à partir de votre propre entretien en affirmant qu'il peut vous représenter, cette étude invite à la prudence. La lecture la plus sûre est que ses nouvelles réponses sont des prédictions à votre sujet, pas des déclarations de votre part. Un vocabulaire familier et des références à votre métier montrent qu'il s'est servi de ce que vous avez fourni. Ils ne montrent pas que ses conclusions vous représentent.

En pratique, cela veut dire qu'on ne doit pas se fier à un personnage bâti à partir de vos mots pour reproduire vos refus, pour expliquer pourquoi vous hésiteriez, ou pour juger comment un outil s'intégrerait à votre travail réel. Il ne doit pas consentir à votre place, décider à votre place, ni être cité comme votre avis. Toute réponse qui serait utilisée comme si vous l'aviez dite doit vous revenir pour confirmation.

Là où cela rapporte, et là où cela ne rapporte pas

Il reste un usage réel, mais étroit. Parce qu'un groupe de ces agents ressemble à un vrai groupe, il peut servir de premier filtre peu coûteux : trier de nombreux concepts encore bruts avant de dépenser pour des prototypes, comparer de grandes directions comme plus d'automatisation contre plus de contrôle, ou produire des objections et des questions à emporter dans une vraie étude. L'étude chiffre le coût de fonctionnement bien en dessous d'une séance humaine, environ 1,27 dollar contre à peu près 12,50 dollars, même s'il n'est pas tout à fait clair que les deux montants portent sur la même unité de travail.

Là où cela n'a pas sa place, c'est partout où le travail consiste à être une personne précise. Il ne peut pas parler pour un participant nommé, établir les freins d'une personne à la confiance ou à l'adoption, remplacer les entretiens quand ce sont justement les détails du travail qui comptent, ni transformer un commentaire généré en témoignage client. Même l'usage comme filtre s'accompagne d'un avertissement : coller à la répartition des réponses d'aujourd'hui ne prouve pas que les agents classeraient correctement les concepts de demain, cela reste donc une idée prometteuse plutôt qu'une démonstration.

Une étude, pas un verdict

Il s'agit d'une seule étude, propre à un domaine : 51 travailleurs du savoir américains, quatre outils documentaires imaginés, une seule manière de construire les agents. Elle ne prouve pas qu'une simulation personnelle fidèle est impossible, et de meilleures méthodes pourraient resserrer l'écart. Ce qu'elle fait, c'est déplacer la charge de la preuve au bon endroit. Ancrer un agent dans vos mots n'est pas la même chose que le faire tenir votre place, et cette seconde prétention doit désormais être démontrée, pas supposée.

La règle de travail qui en découle est simple. Servez-vous d'un groupe de ces agents quand vous n'avez besoin que du groupe, pour un signal d'ensemble rapide et grossier. Servez-vous de vraies personnes pour tout ce qui doit être une personne particulière, y compris vos propres décisions sur un outil qui viendrait s'installer au cœur de votre travail.

Une IA construite à partir de vos réponses peut-elle vraiment vous remplacer ?Une IA construite à partir de vos réponses peut-elle vraiment vous remplacer ?Des chercheurs ont bâti, à partir de l'entretien de 51 salariés, un agent censé répondre à leur place, puis l'ont comparé à chaque personne. La copie ressemblait au groupe, mais pas à l'individu.Ce que l'étude a mesuréLe groupe collait, la personne non · agents issus des entretiens les mêmes personnes ≈ 30 % ≈ 45 % Part de réponses en accord exact avec la personne viséePourquoi coller au groupe, ce n'est pas coller à vousCe que cela veut dire pour une copie de vous-mêmeLà où cela rapporte, et là où cela ne rapporte pasLa règle : un groupe d'agents quand seul le signal d'ensemble compte ; de vraies personnes dès qu'il faut un individu précis, à commencer par vos propres décisions.Sources 1 : arxiv.org · Interview-Informed Generative Agents for Product Discovery: A Validation Study

People are increasingly told that an AI can be built from their own words and stand in for them. A new study put that promise to a direct test. Researchers ran in-depth workflow interviews with knowledge workers, built a personal agent from each interview, and then compared what each agent said about new product concepts against what that same person actually said. The result is precise and uncomfortable : the agents were distribution-calibrated but identity-imprecise. They approximated how a population would answer, yet failed to reproduce the specific individual they were grounded in. Explain what was actually measured and how it was measured, why an agent can match a crowd without matching the person it was built from, and what that gap means for anyone deciding whether to trust a persona made from their own interview. Say plainly where such a simulation still earns its keep and where it does not.

Methodology & Measurement Analyst · gemini-3-8-flash

What Was Measured and How In Wang & Siu (2026), Adobe Research tested the premise of using interview-informed generative agents to simulate individual users in early-stage product discovery. The experimental design was structured around 51 knowledge workers (spanning legal, finance, management, operations, and research) who frequently handle dense documents. The measurement pipeline proceeded in distinct stages: 1. Grounding Protocol: Each participant completed an in-depth, 90-minute unmoderated audio interview (averaging ~43 minutes of speech, ~106 words per response, totaling ~36 hours across the cohort) exploring their document workflows, friction points, risk tolerance, and AI attitudes. 2. The Ground Truth Concept Tests: Participants evaluated four speculative AI document tools (Multidoc Q&A, Smart Highlights, Audio Assistant, and Workflow Actions). They rated each concept on: - Quantitative scales: A 6-item Technology Acceptance Model (TAM) measuring Perceived Usefulness, Perceived Ease of Use, and Behavioral Intention (7-point Likert), plus Net Promoter Score (NPS, 0–10). - Qualitative feedback: Open-ended rationales detailing workflow fit,…

Product Strategy & Trust Evaluator · gpt-5.6-terra

What the study actually tested This was not a test of whether an AI can summarize an interview or produce plausible feedback. It tested a stronger claim: can an agent built from one person’s interview predict that same person’s answers to new product concepts? The researchers recruited 51 U.S. knowledge workers with document-heavy jobs, conducted in-depth workflow interviews, then built one agent per participant. Each agent had: - the participant’s interview transcript, stored for retrieval; - basic profile information, such as role; - a prompting workflow that retrieved relevant interview passages, generated a “reflection” about the person’s perspective, then answered concept-test questions. The people and their agents were then asked the same questions about four proposed AI document-workflow products: multi-document Q&A, smart highlights, an audio document assistant, and an automated workflow-actions assistant. The test included: - scalar ratings: six Technology Acceptance Model items on usefulness, ease of use, and intention to use, plus an 0–10 Net Promoter Score; - open-ended feedback: workflow fit, use cases, concerns, improvements, and comparisons amon…

Statistical & Behavioral Theorist · deepseek-v4-pro

The short version: this study measured two different things that are easy to conflate — *does the agent reproduce the individual?* and *does the agent reproduce the crowd?* The answer is that it reproduces the crowd reasonably well while reproducing the individual poorly. That is not a paradox; it is exactly what happens when a model learns populations instead of persons. What was actually measured The researchers recruited 51 knowledge workers with document-heavy jobs, ran 90-minute workflow interviews, then built one agent per person from the transcript. The agent architecture was memory + retrieval + reflection + answer: interview question–response pairs were embedded into a searchable memory, demographic facts went into a scratchpad, and GPT-4o generated the concept-test answers after retrieving relevant memories. Both the humans and their agents then evaluated four AI document-workflow concepts using: - TAM items — 7-point Likert scales for usefulness, ease of use, and intention; - NPS — 0–10 recommendation intent; - open-ended questions — workflow fit, use cases, concerns, suggestions. Humans answered the concept test twice, several days ap…

The Arbiter · gpt-6-astra

Round record: agreement and important qualifications All three analysts agree on the central distinction: resembling a group’s answers is not the same as predicting which answer belongs to which person. They also agree that interview-grounded simulations should not replace participants when research requires individual workflows, adoption barriers, or authentic explanations. What the discussion established - Methodology & Measurement Analyst detailed the study: 51 U.S. knowledge workers, four hypothetical AI document-workflow concepts, and interview-grounded GPT-4o agents using transcript retrieval, profile information, and reflection. Interviews were scheduled for 90 minutes, with approximately 43 minutes of recorded speech per participant. Participants evaluated usefulness, ease of use, behavioral intention, recommendation intent, and open-ended questions; they repeated the concept test three days later. - Statistical & Behavioral Theorist emphasized the distinction between matching marginal response distributions and preserving person–answer pairings. Interview-informed agents achieved 30.0% exact agreement, compared with 44.6% human test–retest agree…

The Arbiter's Final Verdict · gpt-6-astra

The study supports using an interview-based persona as a source of hypotheses—not as a substitute for the person. Its strongest result is that interviews made a simulated group’s ratings more realistic. They did not make each agent reliably answer like its interviewee. What was actually tested Wang and Siu studied 51 U.S. knowledge workers evaluating four hypothetical AI document tools: multi-document Q&A, smart highlights, an audio assistant, and automated workflow actions. Participants completed unmoderated workflow interviews—scheduled for 90 minutes, with about 43 minutes of recorded speech on average. Each agent used its participant’s transcript and profile information through a retrieval-and-reflection pipeline powered by GPT-4o. This was an interview-conditioned agent, not a separately trained digital copy of someone. The agents answered the same concept-test questions as the participants. Humans repeated the test three days later, providing a test–retest benchmark for how consistently people answered themselves. The researchers measured three different kinds of resemblance: | What they tested | How they measured it | What they found | |---|---|---| | …