Flux des données transformées

Retour au tableau de bord

Architecture de stockage

1. Sources API

api_sources.json

2. Pipeline

Transformation

3. Documents

documents.json

4. RAG + LLM

Interrogation

Comment ça marche?

Configuration API: Les sources Dolibarr sont stockées dans data/api_sources.json
Exécution pipeline: Les données brutes sont récupérées depuis Dolibarr
Transformation: Normalisation, enrichissement, formatage
Stockage: Les données transformées sont enregistrées dans data/documents.json
RAG: Les documents sont indexés vectoriellement pour la recherche
LLM: Le LLM utilise les documents pertinents pour répondre

Sources API configurées

Chargement...

Statistiques du stockage

-

Documents

-

Chunks

-

Embeddings

-

Taille (MB)

Documents transformés

Chargement...

Processus de mise à jour

🔄 Actualisation automatique

Les données sont rechargées à chaque requête pour garantir qu'elles sont toujours à jour.

Chaque question recharge les documents
Pas de cache obsolète
Données toujours fraîches

💾 Persistance

Les données transformées sont sauvegardées de manière permanente.

Format JSON structuré
Timestamps de modification
Backup automatique possible

🔍 Utilisation RAG

Le LLM utilise uniquement les documents pertinents pour répondre.

Recherche vectorielle
Contexte pertinent
Réponses précises

Exemple concret

📥 Données brutes Dolibarr

{
  "id": 123,
  "ref": "FAC2024-001",
  "total_ttc": 1500.00,
  "date": "2024-01-15",
  "status": "unpaid"
}

📄 Document transformé

{
  "id": "doc_fac_123",
  "text": "Facture FAC2024-001 du 15 janvier 2024 pour un montant de 1500.00€. Statut: impayée.",
  "metadata": {
    "source": "dolibarr",
    "type": "facture",
    "amount": 1500.00,
    "status": "unpaid",
    "date": "2024-01-15",
    "transformed_at": "2024-03-17T15:30:00Z"
  }
}

🤖 Question LLM

Question: "Combien de factures impayées y a-t-il?"

Processus RAG:

Recherche des documents contenant "facture" et "impayée"
Récupération des documents pertinents (notamment notre facture FAC2024-001)
Fourniture du contexte au LLM
Génération de la réponse basée sur les données réelles

Réponse LLM: "Il y a 1 facture impayée (FAC2024-001) pour un montant de 1500.00€."

RAG Dashboard