Trouver quel étage de ton RAG se trompe avant de changer de modèle
Un RAG qui répond mal a deux étages qui peuvent casser : la récupération et la génération. Cinq questions, posées dans l'ordre ([reel Instagram Dd6q1k9FGZU](https://www.instagram.com/reel/Dd6q1k9FGZU/)), disent lequel, et quel réglage essayer en premier.
Pourquoi
Quand ton RAG répond mal, le modèle est rarement le coupable. Tu changes de modèle, tu réécris le prompt, tu ajoutes des documents, et la mauvaise réponse revient le lendemain sous une autre forme. Tu as touché au bout de la chaîne alors que la panne était au début : le bon passage n'a jamais été récupéré, ou il a été coupé avant d'atteindre le modèle. Ce kit sépare les deux étages. La récupération : as-tu trouvé les bons morceaux, et tous ? La génération : le modèle s'en est-il servi correctement ? Chaque question a sa mesure et son réglage. Un RAG se débogue comme une plomberie : on…
Quand
Phase : tu as un RAG qui tourne sur tes documents et au moins une dizaine de questions dont tu connais la bonne réponse. Audience : développeur ou PM qui doit dire où ça casse. ✅ Tu sais que c'est ton kit quand La réponse est fausse mais plausible : le modèle comble un trou de récupération Tu as changé trois fois de prompt sans gain mesurable Tu dois défendre ton RAG devant quelqu'un et tu n'as…
Outils inclus
- Llm Evals
- Reranking
- Chunking
- Recherche Hybride Rrf
- Embeddings
- Deepeval