Annotation, évaluation et mesure d’accord en linguistique de corpus
La constitution et l’évaluation de ressources annotées ainsi que des systèmes automatiques d’annotation revêtent une importance grandissante en linguistique et en TAL. Pour autant, les méthodes d’évaluation ne sont pas toujours maîtrisées ni utilisées à bon escient, notamment en linguistique où la n...
保存先:
| 主要な著者: | , |
|---|---|
| フォーマット: | Article ou chapitre numérique |
| 言語: | Français |
| 出版事項: |
2019
|
| 主題: | |
| オンライン･アクセス: | Accès Université d'Orléans et IFPM Accès Université d'Orléans et IFPM |
| id |
cairn-RFLA_241_0111 |
|---|---|
| record_format |
cairn |
| spelling |
cairn-RFLA_241_0111RFLARevue française de linguistique appliquée https://shs.cairn.info/revue-francaise-de-linguistique-appliquee-2019-1-page-111?lang=fr https://doi.org/10.3917/rfla.241.0111 Annotation, évaluation et mesure d’accord en linguistique de corpus Mathet, YannWidlöcher, Antoine2019 Annotationévaluationmesures d’accordagreement measuresAnnotationevaluationfre Revue française de linguistique appliquée | XXIV | 1 | 2019-10-22 | p. 111-128 | 1386-1204 RFLA_24110 La constitution et l’évaluation de ressources annotées ainsi que des systèmes automatiques d’annotation revêtent une importance grandissante en linguistique et en TAL. Pour autant, les méthodes d’évaluation ne sont pas toujours maîtrisées ni utilisées à bon escient, notamment en linguistique où la nature séquentielle des données textuelles nécessite des méthodes spécifiques. Dans cet article, nous analysons tout d’abord les notions de corpus et d’annotation dans leurs multiples formes, puis nous nous focalisons sur les questions d’évaluation qui en résultent. Nous insistons en particulier sur la différence de nature qui existe entre l’évaluation d’un système d’annotation et l’évaluation de ressources multi-annotées manuellement, et nous donnons un aperçu des outils d’évaluation existants et leur usage possible dans chacun de ces deux cas.The establishment and evaluation of annotated resources as well as automatic annotation systems have growing interest in linguistics and NLP. However, evaluation methods are not always well mastered and used, particularly in linguistics, where the sequential nature of textual data requires specific methods. In this article, we first analyze the notions of corpus and annotation in their multiple forms, then focus on the results of the evaluation questions. In particular, we emphasize the difference in nature between the evaluation of an annotation system and the evaluation of manually multi-annotated resources. We provide an overview of existing evaluation tools and their possible use for each of these two cases.Cairn free access |
| language |
Français |
| format |
Article ou chapitre numérique |
| building |
0/Bibliothèque numérique/ 1/Bibliothèque numérique/Cairn/ |
| topic |
Annotation évaluation mesures d’accord agreement measures Annotation evaluation |
| spellingShingle |
Annotation évaluation mesures d’accord agreement measures Annotation evaluation Mathet, Yann Widlöcher, Antoine Annotation, évaluation et mesure d’accord en linguistique de corpus |
| topic_facet |
Annotation évaluation mesures d’accord agreement measures Annotation evaluation |
| description |
La constitution et l’évaluation de ressources annotées ainsi que des systèmes automatiques d’annotation revêtent une importance grandissante en linguistique et en TAL. Pour autant, les méthodes d’évaluation ne sont pas toujours maîtrisées ni utilisées à bon escient, notamment en linguistique où la nature séquentielle des données textuelles nécessite des méthodes spécifiques. Dans cet article, nous analysons tout d’abord les notions de corpus et d’annotation dans leurs multiples formes, puis nous nous focalisons sur les questions d’évaluation qui en résultent. Nous insistons en particulier sur la différence de nature qui existe entre l’évaluation d’un système d’annotation et l’évaluation de ressources multi-annotées manuellement, et nous donnons un aperçu des outils d’évaluation existants et leur usage possible dans chacun de ces deux cas. |
| author |
Mathet, Yann Widlöcher, Antoine |
| author_facet |
Mathet, Yann Widlöcher, Antoine |
| author_sort |
Mathet, Yann |
| title |
Annotation, évaluation et mesure d’accord en linguistique de corpus |
| title_short |
Annotation, évaluation et mesure d’accord en linguistique de corpus |
| title_full |
Annotation, évaluation et mesure d’accord en linguistique de corpus |
| title_fullStr |
Annotation, évaluation et mesure d’accord en linguistique de corpus |
| title_full_unstemmed |
Annotation, évaluation et mesure d’accord en linguistique de corpus |
| title_sort |
annotation, évaluation et mesure d’accord en linguistique de corpus |
| publishDate |
2019 |
| container_title |
|
| container_issue |
|
| url |
https://ezproxy.univ-orleans.fr/login?url=https://shs.cairn.info/revue-francaise-de-linguistique-appliquee-2019-1-page-111?lang=fr https://ezproxy.univ-orleans.fr/login?url=https://doi.org/10.3917/rfla.241.0111 |
| _version_ |
1877246566349144064 |