Comment créer un Agent IA téléphonique pour la gestion d’agenda

Apprenez à créer un agent vocal IA capable de répondre au téléphone et de gérer des rendez-vous via Twilio, N8N, ElevenLabs et Google Calendar.
Ce module pratique vous guide étape par étape dans la création d’un agent vocal IA capable de : 

• Recevoir des appels téléphoniques (via Twilio),
• Transcrire la voix en texte (Speech-to-Text),
• Analyser l’intention de l’appelant (avec GPT-4o ou Mistral),
• Consulter et créer des événements dans Google Calendar,
• Générer des réponses audio naturelles (avec ElevenLabs),
• Boucler la conversation pour une expérience fluide.

Présentation des outils : Twilio, N8N, ElevenLabs, Google Calendar.
Cas d’usage : Automatisation de la prise de rendez-vous par téléphone.

• Architecture globale

Flux complet de l’agent vocal (3 phases : Transcription → Analyse → Réponse audio).

• Configuration de Twilio

Création d’un compte et obtention des credentials (Account SID, Auth Token).
Achat d’un numéro de téléphone avec capacité Voice.
Configuration du webhook pour rediriger les appels vers N8N.

• Configuration d’ElevenLabs

Création d’un compte et choix d’une voix française (ex: Charlotte, Amélie).
Récupération du Voice ID et génération d’une clé API.

• Construction du workflow N8N

Node 1 : Webhook (réception de l’appel).
Node 2 : Switch (détection du 1er appel ou d’une réponse).
Node 3 : Set (message d’accueil).
Node 4 : GPT (analyse de l’intention avec un prompt structuré).
Node 5 : Google Calendar (lecture/creation d’événements).
Node 6 : ElevenLabs (génération de l’audio MP3).
Node 7 : Respond to Webhook (envoi du TwiML à Twilio pour boucler la conversation).

• Intégration de Google Calendar

Création d’un projet Google Cloud et activation de l’API Calendar.

• Configuration des credentials OAuth 2.0 pour N8N.
• Tests et mise en production

Vérification de la connexion entre Twilio et N8N.
Gestion des codes d’erreur courants
Optimisation des réponses audio et des interactions.

• Bonus

Personnalisation de la voix et du prompt GPT.
Sécurisation des clés API et des webhooks.

À la fin de la formation, les apprenants seront capables de :

• Comprendre l’architecture globale d’un agent vocal IA (Twilio  N8N,  ElevenLabs ,Google Calendar).
• Configurer un compte Twilio, obtenir un numéro de téléphone, et paramétrer les webhooks pour recevoir des appels.
• Créer un workflow N8N avec 7 nodes clés (Webhook, Switch, Set, GPT, Google Calendar, ElevenLabs, Respond to Webhook).
• Intégrer ElevenLabs pour générer des réponses audio en français ou autre à partir de texte.
• Connecter Google Calendar via pour lire et créer des événements depuis N8N.
• Tester et déboguer l’agent vocal en conditions réelles.

Lecture
Real world scenarios / examples
Practical exercises
Group work