Variation(s) : produire des ressources au service de l’évaluation en TAL
- Speaker
- Alice Millour (Université Paris 8)
- Date
- Room
- Salle 306, bâtiment IMAG
À travers plusieurs exemples, je discuterai de l’importance de la diversité des ressources d’évaluation pour l’appréciation de la variation et de la performance des systèmes en TAL.
Sur une tâche comme la reconnaissance des entités nommées en français, on observe chez la plupart des systèmes un biais de performance en fonction du « genre textuel » annoté. Si celui-ci semble être à l’origine de la variation de performance, il ne l’explique pas d’un point de vue linguistique. Comment la variation se manifeste-t-elle et impacte-t-elle concrètement les systèmes ? Nous proposons pour y répondre une étude de la variation basée sur sa modélisation sous forme de traits linguistiques proposée par Douglas Biber.
Nous verrons par un second exemple, celui de la transcription automatique du breton, la problématique sous l’angle du coût de production des ressources linguistiques. Quelle stratégie adopter dans le choix des ressources à (faire) produire dans le cadre de langues peu dotées et présentant une forte variation ?
