Architecture et technologies
L’expérience, la voix, les personnages, l’orchestration, les sources, les médias et l’observation restent des responsabilités distinctes.
Six responsabilités portent l’expérience : l’interface ; la chaîne vocale ; les personnages et leur contexte ; le Game Master ; les sources et la mémoire ; l’observation et l’exploitation.
L’orchestrateur de Où est Ava ? appartient à ce prototype spécifique ; il ne se confond pas avec un moteur générique.
Dans Où est Ava ?, l’application garde le contrôle du micro, de la transcription, du RAG et du dialogue. Selon le service de sortie, le texte final est converti en voix ou transmis au rendu d’avatar sous forme de texte ou d’audio. Les conditions par appareil sont décrites dans Expérience.
Architecture d’exécution du prototype
De la parole à la restitution : le chemin qui doit répondre maintenant, puis ce qui prépare et mesure le tour suivant.
Une expérience web, une application d’édition et d’orchestration, des services IA et des contenus reliés par des flux clairement séparés.
Expérience web
Services IA · écoute
Édition & orchestration
Mémoire narrative
Orchestration
Services IA · réponse
Autour du chemin audible
Déclenchées vers l’expérience, séparément de l’avatar.
Latence et traces, sans retarder la réponse.
Focus du schéma
Moteur de conversation
Ce moteur organise le tour en direct. Il demande le contexte utile, appelle le modèle de réponse et transmet le texte final à la chaîne de restitution.
Stack logicielle
Les services du prototype, avec leur logo et leur rôle. Les quatre services de rendu d’avatar figurent dans cette liste.
Trois couches reliées : où l'on écrit (Notion), comment l'expérience est orchestrée (API, RAG, GM), quels services externes écoutent et parlent (Deepgram, OpenRouter, TTS…). Cliquez un composant pour le détail et ses liens.
Outils de création / édition
Application / orchestration
Application / orchestration
Orchestrateur d’Où est Ava ?
Chef d'orchestre technique — enchaîne STT, RAG, GM, LLM, TTS par tour
Ce n’est pas le Core générique. C’est l’orchestrateur spécifique du prototype AVA (edge functions Supabase dans ava-proto1) : réécriture de requête, retrieval isolé par personnage, génération, validation, synthèse phrase par phrase. Sur le chemin temps réel, le Game Master pré-tour a été retiré ; le Game Master relationnel tourne après le tour, sans validation bloquante avant chaque réplique. Le Core générique est un développement parallèle, pas cette implémentation.
Ce que fait ce composant
- Edge functions : proxy-llm, proxy-stt, proxy-tts, query-rag, rewrite-query…
- Agrège latences par segment pour l'admin et PostHog.
- Persiste sessions, conversation_log, voice_turn_events.
Dans le flux d'un tour
Tour entrant : STT → rewrite-query → RAG → Max LLM → validateur → TTS → GM post-turn (async)
Liens avec les autres composants
La couche en une phrase
Couche visible par la personne et par l’équipe : l’expérience dans le navigateur, l’orchestrateur du prototype AVA, le back-office de contrôle, et la mémoire isolée par personnage.
Infrastructure / services
Touchez un élément pour afficher le détail ci-dessous.
Trois couches reliées : où l'on écrit (Notion), comment l'expérience est orchestrée (API, RAG, GM), quels services externes écoutent et parlent (Deepgram, OpenRouter, TTS…). Cliquez un composant pour le détail et ses liens.
Outils de création / édition
Application / orchestration
Infrastructure / services
Application / orchestration
Orchestrateur d’Où est Ava ?
Chef d'orchestre technique — enchaîne STT, RAG, GM, LLM, TTS par tour
Ce n’est pas le Core générique. C’est l’orchestrateur spécifique du prototype AVA (edge functions Supabase dans ava-proto1) : réécriture de requête, retrieval isolé par personnage, génération, validation, synthèse phrase par phrase. Sur le chemin temps réel, le Game Master pré-tour a été retiré ; le Game Master relationnel tourne après le tour, sans validation bloquante avant chaque réplique. Le Core générique est un développement parallèle, pas cette implémentation.
Ce que fait ce composant
- Edge functions : proxy-llm, proxy-stt, proxy-tts, query-rag, rewrite-query…
- Agrège latences par segment pour l'admin et PostHog.
- Persiste sessions, conversation_log, voice_turn_events.
Dans le flux d'un tour
Tour entrant : STT → rewrite-query → RAG → Max LLM → validateur → TTS → GM post-turn (async)
Liens avec les autres composants
La couche en une phrase
Couche visible par la personne et par l’équipe : l’expérience dans le navigateur, l’orchestrateur du prototype AVA, le back-office de contrôle, et la mémoire isolée par personnage.
Game Master & RAG narratif
Trois angles — pourquoi un GM, son rôle concret, et les risques du RAG fictionnel.
Un personnage IA ne peut pas seulement être un LLM « bien prompté ». Il doit respecter ce qu'il sait, ce qu'il ignore, ce qu'il cache, son état émotionnel et le rythme de l'expérience. Le Game Master agit comme un réalisateur invisible.
La difficulté n'est pas seulement de faire parler Max. La difficulté est de l'empêcher d'en savoir trop, de répondre trop bien, ou de sortir de son monde.
Les enjeux techniques principaux
Sept questions pratiques — parcourez la liste pour les vérifications de chaque enjeu.
Sept questions pratiques — parcourez chaque enjeu pour voir ce qu’il faut observer ou vérifier.
Latence
Enjeu critique — mesurer l’attente jusqu’au premier son
Questions et vérifications
- Mesurer le temps de transcription
- Distinguer premier texte et réponse complète
- Mesurer le premier son par mode de sortie
- Observer l’attente avec le retour visuel
Touchez un élément pour afficher le détail ci-dessous.
Sept questions pratiques — parcourez chaque enjeu pour voir ce qu’il faut observer ou vérifier.
Latence
Enjeu critique — mesurer l’attente jusqu’au premier son
Questions et vérifications
- Mesurer le temps de transcription
- Distinguer premier texte et réponse complète
- Mesurer le premier son par mode de sortie
- Observer l’attente avec le retour visuel