Aller au contenu principal

E-12 Rétention des données

Brique E: Données, RAG, contexte, mémoire. Version anglaise: E-12-data-retention

1. Rôle et responsabilités​

Applique TTL, archivage et effacement (droit à l'oubli), avec conservation légale (legal hold) prioritaire.

  • Politiques par type de ressource et classification
  • Exécution planifiée
  • Effacement par sujet dans PostgreSQL, Qdrant, S3

2. Position dans l'architecture et interactions​

  • Appelants: Scheduler (C-09), DPO via portail.
  • Chemin d'exécution: Workflow durable (batch).
  • Toute interaction passe par l'API Control Plane v1 (/v1) derrière la passerelle API (D-14).

3. Composant open source et partie développée​

  • Open source: aucun (à développer)
  • Développé: Entièrement développé.
  • Intégration externe via un adaptateur eai/integrations/<system>.py avec repli in-process lorsque l'URL n'est pas configurée.

4. Modèle de données​

Tables (schéma eai, RLS tenant_id):

  • eai.retention_policies

Colonnes communes : id uuid, tenant_id uuid NOT NULL, created_at, updated_at ; politique RLS current_setting('app.tenant_id', true)::uuid.

5. Contrat​

  • Contrat appliqué: memory-contract
  • Schéma JSON: contracts/v1/memory-contract.schema.json
  • Champs clés: ttl_seconds, expires_at, deletion
  • Validation : POST /v1/contracts/{name}/validate ; application d'un manifeste : POST /v1/manifests/apply.

6. Endpoints API​

  • GET /v1/retention/policies
  • POST /v1/retention/policies
  • POST /v1/retention/run
  • POST /v1/retention/erase
  • POST /v1/retention/legal-hold

Requête POST /v1/retention/erase:

{
  "subject": {
    "type": "user",
    "id": "usr_42"
  },
  "scope": [
    "sessions",
    "memory",
    "documents"
  ]
}

Réponse:

{
  "erasure_id": "era_8",
  "status": "running",
  "legal_hold_blocked": []
}

7. Exemples SDK​

Python:

from enterprise_ai import EnterpriseAI

client = EnterpriseAI(base_url="<control-plane-url>", api_key="eai_xxx_secret")
client.privacy.erase_subject(subject_id="usr_42")

TypeScript:

import { EnterpriseAI } from "@enterprise-ai/sdk";

const client = new EnterpriseAI({ baseUrl: "<control-plane-url>", apiKey: process.env.EAI_API_KEY });
await client.retention.erase({ subject_id: "usr_42", reason: "gdpr_request" });

Java:

EnterpriseAIClient client = EnterpriseAIClient.builder()
    .baseUrl("<control-plane-url>")
    .apiKey(System.getenv("EAI_API_KEY"))
    .build();
client.retention().erase(Map.of("subject_id", "usr_42", "reason", "gdpr_request"));

Go:

c, _ := eai.NewClient(eai.WithBaseURL("<control-plane-url>"), eai.WithAPIKey(os.Getenv("EAI_API_KEY")))
c.Retention.Erase(ctx, map[string]any{"subject_id": "usr_42", "reason": "GDPR erasure request"})

8. Configuration​

  • Variables d'environnement: EAI_DATABASE_URL
  • Clés Helm: controlPlane.config, controlPlane.secrets

9. Contrôles de sécurité​

  • Effacement et conservation légale réservés à security_officer / tenant_admin
  • Preuve d'effacement dans l'audit
  • Toutes les requêtes portent le tenant issu du credential ; RLS PostgreSQL
  • Chaque mutation et décision de politique écrit un événement d'audit chaîné

10. Observabilité​

  • Métriques Prometheus: eai_retention_deleted_total{resource}, eai_retention_archived_total
  • Traces: spans OpenTelemetry avec conventions sémantiques GenAI (gen_ai.operation.name, gen_ai.agent.id, gen_ai.tool.name), attributs eai.tenant_id, eai.run_id, propagation traceparent.
  • Actions d'audit: retention.run, retention.erase, retention.legal_hold

11. Unités FinOps​

  • Réduction du stockage.
  • Émis comme Usage Event (POST /v1/finops/usage) avec tenant, projet, agent et run.

12. Modes de défaillance et résilience​

  • Effacement reprenable par étape
  • Erreurs normalisées (enveloppe error, message_i18n en/fr)

13. Adoption autonome (client d'un client)​

  • enterprise_ai.privacy + Control Plane.
  • SDK: enterprise_ai.privacy / dlp / knowledge_bases / memory / retention / lineage
  • Déploiement minimal : chart Helm avec controlPlane.enabled=true et PostgreSQL ; les composants externes désactivés utilisent leur repli in-process.

14. Tests d'acceptation​

  1. La conservation légale empêche l'effacement
  2. Item expiré supprimé par run
  3. Accès inter-tenant refusé
  4. Erreur renvoyée en fr avec Accept-Language: fr