Transformer une reponse IA en objet auditable
Le pipeline ne pretend pas lire les poids internes d'un modele. Il audite ce qui est observable: prompt, reponse, affirmations, sources declarees, prudence et contradictions avec un contexte local.
Cette page fait partie de l'espace Laverdure CSA protege par Firebase Authentication.
Ce module documente l'outil local qui audite une reponse LLM: extraction des affirmations, statut de verification, defauts de prudence et export lisible dans le Workbench.
Le pipeline ne pretend pas lire les poids internes d'un modele. Il audite ce qui est observable: prompt, reponse, affirmations, sources declarees, prudence et contradictions avec un contexte local.
Le test de base ne depend ni d'Ollama ni de LM Studio. Il sert a verifier que le classificateur local fonctionne avant de brancher un modele.
python tools\csa_llm_claim_pipeline.py --demo
Ollama reste local a la machine de travail. La page Firebase ne lance pas de modele et ne contacte pas un serveur Ollama distant.
python tools\csa_llm_claim_pipeline.py --provider ollama --model llama3.2:latest --context-file reports\csa_llm_minimal_context_2026-05-18.txt --prompt "Explique prudemment ce que CSA-LLM peut faire pour auditer une reponse IA. Donne trois points et une limite."
LM Studio reste local a la machine de travail. Demarrer le serveur dans l'onglet Developer, charger un modele, puis utiliser son identifiant de modele.
python tools\csa_llm_claim_pipeline.py --provider lmstudio --host http://127.0.0.1:1234/v1 --model "identifiant-du-modele-charge-dans-LM-Studio" --context-file reports\csa_llm_minimal_context_2026-05-18.txt --prompt "Explique prudemment ce que CSA-LLM peut faire pour auditer une reponse IA. Donne trois points et une limite."
Chaque affirmation recoit un statut prudent et des defauts eventuels. Le CSV peut ensuite etre importe dans le Workbench comme corpus d'audit.
Le site public contient deja une demo Ollama importable comme jeu d'essai d'audit. Elle sert a relire les defauts de claims et les niveaux de prudence.
Ouvrir l'atelier CSA Ouvrir le CSV demowebapp/*.html.