Webinaire Séance 7

Action de Recherche Graphes de connaissances géohistoriques / October 2024

69 Words, 1 Minutes

Date: jeudi 17 octobre 2024, de 12h30 à 13h30.

Cette séance est consacrée à l’utilisation de grands modèles de langues (Large Language Models) pour répondre à des questions d’historiens.

Programme:

Les larges modèles de langage peuvent-ils répondre avec précision à des questions d’historiens ? - par Mathieu Chartier. CRIHAM, Université de Poitiers.

Résumé : L’émergence des larges modèles de langage (LLM) a bouleversé la recherche d’informations en fournissant des réponses à tout en un temps record. Mais quelles sont leurs forces et leurs limites quand il s’agit de répondre à des questions hétérogènes sur des faits historiques ? Réussissent-ils à répondre majoritairement avec fiabilité, exhaustivité et précision ? Savent-ils suppléer des bases de connaissances aux données structurées ? L’heure est à l’analyse et à la prise de recul sur ces technologies en plein essor, notamment pour des questions complexes ou équivoques d’historiens. Nous avons d’abord analysé les réponses de 14 LLM à des questions d’histoire de types, thématiques et niveaux de difficulté variables. Par ailleurs, nous avons testé diverses approches de génération augmentée de récupération (RAG) pour obtenir un panorama global des capacités des LLM à répondre à des questions d’histoire.

Référence:

Chartier, Mathieu Alexandre, Nabil Dakkoune, Guillaume Bourgeois, and Stéphane Jean. “Évaluation des capacités de réponse de larges modèles de langage (LLM) pour des questions d’historiens.” In 24ème conférence francophone sur l’Extraction et la Gestion des Connaissances (EGC 2024), no. 40, pp. 155-166. 2024.

Ressources: https://github.com/lias-laboratory/experimentalhistorianllm

Revoir la présentation (jusqu’au 30 novembre 2024): https://filesender.renater.fr/?s=download&token=5c459450-2d81-47a2-8c05-8fa630bbc7fd