Contact Center automatisé sans intervention humaine

TWILIO (IVR + téléphonie)

• Clietn soft (  SIP/WebRTC).
• IVR (Interactive Voice Response) capture la voix de l’appelant.
• Transmission en WebRTC vers STT/TTS (Whisper ou équivalent OpenAI).

STT/TTS (Speech-to-Text et Text-to-Speech)

• STT (Whisper/OpenAI) convertit la voix en texte.
• Texte envoyé vers OpenAI pour traduction (TRAD) ou raisonnement (RAG).
• TTS convertit ensuite la réponse d’OpenAI en voix pour la restituer à l’appelant.

JHL comment @Antonio

• ​Antonio demander à Faniry comment il a fait pour record > envoi vers API Whisper STT > retour texte 

OpenAI

• RAG : moteur d’intelligence qui contextualise les réponses grâce aux données d’Odoo.
• Interactions avec Odoo en http (GET/PUT).

ERP Odoo (CRM inclus)

• Cœur de la relation client.
• Reçoit et envoie des données (prospects, tickets, historiques, etc.).
• Interface avec OpenAI via API.
• GET/PUT possible directement depuis l’interface web Odoo.

Interface React personnalisée

• Expérience utilisateur type ChatGPT avec STT/TTS.
• Communication en WebRTC avec le moteur de voix.
• Peut servir de softphone connecté à Odoo CRM.
• Intègre des widgets (par ex. dashboard éducatif ou CRM).

> la partie Widget Softphone ( WebRTC based pour flux voix et http <> ODOO pour les contacts

 

1- comprendre ce qu'est WebRTC

 comprendre ce qu'est WebRTC > Discussion avec ChatGPT 

Définition : protocole de communication en temps réel (audio, vidéo, data) entre navigateurs ou apps sans serveur central intermédiaire pour le flux média.

Rôle ici :

• Permettre à un softphone (React ou autre) de transmettre/recevoir de l’audio en temps réel.
• Interagir avec Twilio (ou un autre provider) pour gérer les flux téléphoniques.

Avantage : latence faible, standard web, sécurisé.

Limite : nécessite un signaling (souvent via un serveur ou un provider comme Twilio) pour établir la connexion.

En savoir plus

2- Comprendre ce qu'est l'offre TWILIO

 Comprendre ce qu'est l'offre TWILIO pour faire un IVR avec approche API ( que ce soit en mode http ou WebRTC ) >  Discussion avec ChatGPT 

• Twilio Programmable Voice :
  • Peut recevoir des appels (GSM, fixe, VoIP).
  • Peut les router vers un IVR (menu vocal) défini avec Twilio Studio Flow (éditeur visuel) ou via API (TwiML XML / REST API).
• Deux approches pour l’IVR :
  1. HTTP (Webhook) : quand un appel arrive, Twilio appelle votre endpoint (URL), et attend un XML (TwiML) en retour pour savoir quoi faire (jouer un message, enregistrer, transférer, etc.).
  2. WebRTC (Voice SDK) : vous pouvez connecter un client Web (React) directement au call flow Twilio, et interagir en direct.
• Exemple simple de TwiML IVR :

En savoir plus

3- Comprendre comment envoyer un flux audio  vers le moteurSTT

 Comprendre comment envoyer un flux audio  vers le moteur de reconnaissance de la parole de openAI API Whisper   Discussion avec ChatGPT  + questionner Faniry (après indeed avoir explorer 1 et 2)

• Deux possibilités :
  1. Mode fichier (simple mais offline)
     • L’IVR enregistre un message → fichier audio → upload via API OpenAI.
     • Exemple :

       import openai, requests
       
       audio_file = open("recording.wav", "rb")
       transcript = client.audio.transcriptions.create(
         model="gpt-4o-mini-transcribe",
         file=audio_file
       )
       print(transcript.text)
       

  2. Mode streaming (temps réel via WebRTC)
     • Twilio Voice SDK peut streamer l’audio en WebSocket.
     • Vous connectez ce flux à OpenAI Realtime API (Whisper).
     • Retour texte quasi temps réel (faible latence).

👉 Pour commencer, je recommande la voie fichier (enregistrement > transcription > texte), puis évoluer vers le streaming.

4- comment récupérer le retour texte reconnu 

 et comment récupérer le retour texte reconnu  ( > @faniry ) + voir comment "router" le texte vers la fiche client CRM de la personne qui a été appelé > donc PUT  > là gros morceau > comprendre comment faire du PUT vers ODOO CRM 

4Récupérer le retour texte reconnu

• OpenAI vous renvoie du JSON avec le texte transcrit.
• Exemple de retour :

  { "text": "peux tu contacter Monsieur Lauret" }
  

5- comment faire du GET des coordonnées contact depuis OODO contact et ... 

 et indeed en parallèle comprendre comment faire du GET des coordonnées contact depuis OODO contact ( ou CRM ) > scénario > dire à l'oral > " peux tu contacter Monsieur LAURET> reco STT > lister les contacts dans la base  ODOO contact > Si  LAURET est dans cette base alors faire dire " vous pouvez laisser un message audio à Mr LAURET l" > Message audio record > envoi STT > le texte est envoyé par email vers Mr LAURET bon pas si simple mais beau challenge ) (et encore mieux pour me  texte est envoyé par email vers Mr  LAURET par whatsApp

5. Router le texte → vers Odoo CRM

• Objectif : PUT dans Odoo.
• Odoo API (REST/XML-RPC/JSON-RPC) permet d’ajouter ou mettre à jour des fiches.
• Exemple via JSON-RPC (Python) :

• Objectif : PUT dans Odoo.
• Odoo API (REST/XML-RPC/JSON-RPC) permet d’ajouter ou mettre à jour des fiches.
• Exemple via JSON-RPC (Python) :

import requests, json

url = "https://votre-odoo.com/jsonrpc"
db = "odoo_db"
username = "user@example.com"
password = "xxxx"

# Auth
response = requests.post(url, json={
    "jsonrpc": "2.0",
    "method": "call",
    "params": {
        "service": "common",
        "method": "login",
        "args": [db, username, password],
    },
    "id": 1,
}).json()

uid = response["result"]

# Exemple : créer une activité dans le CRM
requests.post(url, json={
    "jsonrpc": "2.0",
    "method": "call",
    "params": {
        "service": "object",
        "method": "execute_kw",
        "args": [
            db, uid, password,
            "crm.lead", "write", [[lead_id], {"description": "Message vocal de l'appelant"}]
        ],
    },
    "id": 2,
})

6. Faire du GET depuis Odoo Contact

• Cas d’usage : l’appelant dit "contacter Monsieur Lauret".
• Pipeline :
  1. STT → texte "Monsieur Lauret".
  2. API Odoo (search) dans res.partner :

partner_ids = models.execute_kw(db, uid, password,
    'res.partner', 'search',
    [[['name', 'ilike', 'Lauret']]],
    {'limit': 1})

1. Si trouvé → confirmation à l’appelant via TTS :
   "Vous pouvez laisser un message pour Monsieur Lauret."

7. Extension du scénario

 

• Si message laissé → STT transcription → texte envoyé par :
  • Email via Odoo (mail.message).
  • Ou WhatsApp via Twilio API (programmable messaging).

Exemple WhatsApp Twilio :

from twilio.rest import Client

client = Client("ACxxxx", "auth_token")

message = client.messages.create(
  from_="whatsapp:+14155238886",
  to="whatsapp:+261xxxxxxxxx",
  body="Message transcrit : Monsieur Lauret, vous avez reçu un appel."
)

Équipe d'assistance

Notre équipe d'assistance met tout en œuvre pour vous répondre aussi rapidement que les assistants vocaux.