Retour au blog
    Stratégie IAPreuve de conceptDéploiement de l'IA

    Ce qu'une preuve de concept IA de quatre semaines doit démontrer avant le passage à l'échelle

    Beaucoup de pilotes d'IA convainquent en démonstration puis calent avant la production. Ce que quatre semaines de test doivent démontrer, et comment décider de la suite.

    Par Nichita Railean, CTOPublié le 5 min de lecture

    Une preuve de concept qui impressionne en démonstration peut malgré tout être la mauvaise chose à passer à l'échelle. Le modèle traite les cas d'exemple, la salle est convaincue, et quelques mois plus tard le projet s'est arrêté sans bruit. Gartner a indiqué en janvier 2026 qu'à la fin de 2025, au moins la moitié des projets d'IA générative avaient été abandonnés après la preuve de concept, en raison d'une mauvaise qualité des données, de contrôles des risques insuffisants, de coûts croissants ou d'une valeur métier peu claire.

    Aucune de ces raisons ne porte sur la capacité du modèle à faire la tâche. C'est généralement la partie facile. Une bonne preuve de concept est conçue pour répondre aux questions plus difficiles tant que les enjeux restent faibles. Si vous hésitez encore sur le processus à tester, commencez par cinq questions pour choisir sa première automatisation.

    Une démonstration n'est pas une preuve

    Une démonstration montre que quelque chose est possible. Une preuve montre que cela fonctionne sur vos données, à votre volume, pour les personnes qui l'utiliseront. La différence compte, car le modèle n'est qu'une petite partie d'un système qui fonctionne. Dans un article connu sur le machine learning en production, des ingénieurs de Google ont montré que le code du modèle ne représente qu'une petite fraction d'un système réel, et que l'infrastructure qui l'entoure est vaste et complexe.

    Un test de quatre semaines doit donc faire plus que vérifier si le modèle sait faire le travail. Il doit faire tourner la version réelle la plus étroite de tout le parcours : une entrée réelle qui arrive, le modèle qui effectue son étape, le résultat qui parvient là où les gens travaillent, et une personne capable de le corriger.

    Fixez le seuil de réussite avant la première semaine

    Un pilote sans définition partagée du succès a tendance à s'éterniser, car chaque résultat reste ouvert à l'interprétation. Mettez-vous d'accord sur trois points avant de construire quoi que ce soit.

    • Un jeu de test fait de cas réels. Rassemblez des exemples historiques dont le bon résultat est connu, dans les proportions où ils arrivent réellement, y compris les cas difficiles. Le guide d'Anthropic sur les évaluations recommande des jeux de test qui reflètent la distribution réelle de la tâche et incluent des cas limites.
    • Un point de référence. Mesurez comment le travail est fait aujourd'hui : temps par élément, taux d'erreur, délai de traitement. Les Rules of Machine Learning de Google placent les métriques en premier et conseillent de suivre autant que possible dans le système actuel avant de formaliser ce que fera le nouveau.
    • Un seuil pour chaque mesure. Notez le résultat qui justifierait un passage à l'échelle et celui qui vous ferait arrêter. Rendez chacun précis et mesurable : « la bonne catégorie sur les demandes courantes, et aucune erreur affirmée avec assurance sur les remboursements » plutôt que « ça marche bien ».

    Cinq choses que quatre semaines doivent prouver

    Chaque ligne ci-dessous correspond à une raison pour laquelle les pilotes échouent plus tard. Utilisez le tableau comme ordre du jour de la revue finale.

    QuestionPreuves qui comptentSignal d'alerte
    La qualité est-elle suffisante sur des données réelles ?Des résultats sur le jeu de test convenu, ventilés par type de cas, avec des erreurs revues par les personnes qui font le travailDes résultats uniquement sur des exemples choisis pendant le développement
    Échoue-t-il sans danger ?Les cas incertains sont transmis à une personne, et les erreurs restantes sont faciles à repérerDe mauvaises réponses aussi assurées que les bonnes
    Peut-il accéder aux données en production ?Il a tourné sur de vrais exports ou des connexions en direct, et l'accès comme la protection des données sont convenus pour la phase suivanteDes données de test nettoyées à la main pour le pilote
    Le coût de fonctionnement est-il connu ?Un coût par élément mesuré pendant le test et multiplié par le volume réel, temps de relecture comprisUne estimation fondée sur une poignée d'exécutions
    Les gens vont-ils l'utiliser ?L'équipe l'a utilisé dans son flux de travail habituel et veut le garderDes retours venant uniquement du commanditaire du projet

    Côté données : si les cas de test contiennent des données personnelles, le RGPD s'applique au pilote comme à la production. N'utilisez que les données dont le test a besoin (le principe de minimisation des données, à l'article 5) et vérifiez avant la première semaine comment vous pouvez les utiliser.

    Le coût mérite sa propre vérification. Gartner observe que des projets qui semblent viables au stade de la preuve de concept peuvent devenir un problème budgétaire en production, car de petits coûts par utilisation se multiplient avec le nombre d'utilisateurs et de cas d'usage. Mesurez le coût par élément pendant le pilote, et lisez le coût réel d'un système d'IA pour savoir quoi budgéter d'autre.

    Un plan sur quatre semaines qui laisse place à la réponse

    Quatre semaines suffisent quand le périmètre se limite à un processus et une décision. Un déroulé qui fonctionne :

    1. Semaine 1 : s'accorder et collecter. Fixez le seuil de réussite, constituez le jeu de test, obtenez l'accès aux données réelles et désignez les personnes qui essaieront le système.
    2. Semaine 2 : construire le chemin minimal. Reliez entrée, modèle et sortie de bout en bout, pour le cas principal seulement. Faites tourner le jeu de test complet en fin de semaine, même si les résultats sont faibles.
    3. Semaine 3 : le confier aux utilisateurs. Laissez l'équipe l'utiliser sur du travail réel, en parallèle du processus habituel, pour que rien n'en dépende encore. Consignez chaque correction et mesurez le coût par élément.
    4. Semaine 4 : corriger, relancer, décider. Traitez les types d'erreur les plus fréquents, relancez le jeu de test et rédigez une note de décision d'une page qui confronte les chiffres au seuil de réussite.

    Faire tourner le même jeu de test en deuxième et en quatrième semaine, c'est tout l'intérêt. Le progrès devient un chiffre, et la revue finale ne se transforme pas en débat d'impressions. L'AI Risk Management Framework du NIST indique que les systèmes d'IA doivent être testés avant leur déploiement et régulièrement pendant leur exploitation, et le jeu de test que vous construisez maintenant peut devenir le test de non-régression du système en production.

    Passer à l'échelle, ajuster ou arrêter

    À la fin de la quatrième semaine, il y a trois issues honnêtes.

    • Passer à l'échelle quand chaque ligne du tableau est étayée, que le seuil est atteint et qu'une personne nommée dans l'entreprise porte le résultat. La phase suivante relève de l'ingénierie : intégration, supervision, contrôle des accès et support.
    • Ajuster quand une ou deux lignes sont faibles et que la solution est claire, par exemple une source de données manquante. Convenez d'une courte prolongation avec une date de fin fixe et le même seuil. L'ajustement ne doit pas devenir un état permanent.
    • Arrêter quand la qualité est loin du seuil, ou quand la valeur disparaît une fois le coût de fonctionnement et le temps de relecture comptés. Un pilote qui se termine ainsi au bout de quatre semaines a fait son travail : il vous a évité un projet bien plus lourd.

    Dans nos projets, les pilotes qui passent sans heurts en production sont ceux dont les règles de décision ont été écrites d'abord. Pour fixer un seuil réaliste, estimez ce que vaut le processus aujourd'hui avec le calculateur de ROI, ou parcourez des workflows courants par domaine d'activité pour trouver des candidats qui méritent d'être testés.

    Sources

    1. Gartner: Why 50% of GenAI Projects Fail, and How to Beat the Odds (January 2026)
    2. Sculley et al., Hidden Technical Debt in Machine Learning Systems (NIPS 2015)
    3. Anthropic: Define success criteria and build evaluations
    4. Google for Developers: Rules of Machine Learning
    5. NIST AI Risk Management Framework (AI RMF 1.0, NIST AI 100-1)
    6. Regulation (EU) 2016/679 (GDPR), Articles 2 and 5 (EUR-Lex)