1 |
A Methodology for the Comparison of Human Judgments With Metrics for Coreference Resolution
|
|
|
|
In: HumEval at ACL ; https://hal.archives-ouvertes.fr/hal-03650294 ; HumEval at ACL, May 2022, Dublin, Ireland ; https://humeval.github.io/ (2022)
|
|
BASE
|
|
Show details
|
|
2 |
Le repérage de nominations dans les corpus textuels: de l'exploitation de l'analyse des données textuelles à l'exploration des chaînes de coréférence par le TAL
|
|
|
|
In: JADT 2020 : 15es Journées internationales d’Analyse statistique des Données Textuelles ; https://hal.archives-ouvertes.fr/hal-02906925 ; JADT 2020 : 15es Journées internationales d’Analyse statistique des Données Textuelles, Jun 2020, Toulouse, France (2020)
|
|
BASE
|
|
Show details
|
|
3 |
Redonner du sens à l’accord interannotateurs : vers une interprétation des mesures d’accord en termes de reproductibilité de l’annotation
|
|
|
|
In: ISSN: 1248-9433 ; EISSN: 1965-0906 ; Revue TAL ; https://hal.archives-ouvertes.fr/hal-02375240 ; Revue TAL, ATALA (Association pour le Traitement Automatique des Langues), 2019, 60 (2), pp.23 (2019)
|
|
Abstract:
International audience ; Inter-coders agreement measures are used to assess the reliability of annotated corpora in NLP. Now, the interpretation of these agreement measures in terms of reliability level relies on pure subjective opinions that are not supported by any experimental validation. In this paper, we present several experiments on real or simulated data that aim at providing a clear interpretation of agreement measures in terms of the level of reproductibility of the reference annotation with any other set of coders. ; Les mesures d'accord interannotateur sont utilisées en routine par le TAL pour évaluer la fiabilité des annotations de référence. Pourtant, les seuils de confiance liés à cette estimation relèvent d'opinions subjectives et n'ont fait l'objet d'aucune expérience de validation dédiée. Dans cet article, nous présentons des résultats expérimentaux sur données réelles ou simulées qui visent à proposer une interprétation des mesures d'accord en termes de stabilité de la ré-férence produite, sous la forme d'un taux moyen de variation de la référence entre différents groupes d'annotateurs. ABSTRACT. Inter-coders agreement measures are used to assess the reliability of annotated corpora in NLP. Now, the interpretation of these agreement measures in terms of reliability level relies on pure subjective opinions that are not supported by any experimental validation. In this paper, we present several experiments on real or simulated data that aim at providing a clear interpretation of agreement measures in terms of the level of reproductibility of the reference annotation with any other set of coders.
|
|
Keyword:
[INFO.INFO-CL]Computer Science [cs]/Computation and Language [cs.CL]; [INFO.INFO-TT]Computer Science [cs]/Document and Text Processing; inter-coders agreement; reliability level; reproductibility
|
|
URL: https://hal.archives-ouvertes.fr/hal-02375240/document https://hal.archives-ouvertes.fr/hal-02375240/file/TAL_60_2_accords_inter_annotateur_VCORRIGEE.pdf https://hal.archives-ouvertes.fr/hal-02375240
|
|
BASE
|
|
Hide details
|
|
4 |
A computational account of virtual travelers in the Montagovian generative lexicon
|
|
|
|
In: The Semantics of Dynamic Space in French ; https://hal.archives-ouvertes.fr/hal-02093536 ; Michel Aurnague; Dejan Stosic. The Semantics of Dynamic Space in French, John Benjamins, pp.407-450, 2019, Part IV. Formal and computational aspects of motion-based narrations, 9789027203205. ⟨10.1075/hcp.66.09lef⟩ ; https://benjamins.com/catalog/hcp.66.09lef (2019)
|
|
BASE
|
|
Show details
|
|
5 |
Analysis and Automatic Processing of Discourse
|
|
|
|
In: Corpus Linguistics (CL2019) ; https://hal.archives-ouvertes.fr/hal-02377077 ; Corpus Linguistics (CL2019), Jul 2019, Cardiff, United Kingdom (2019)
|
|
BASE
|
|
Show details
|
|
6 |
Analysis and Automatic Processing of Discourse
|
|
|
|
In: Corpus Linguistics (CL2019) ; https://hal.archives-ouvertes.fr/hal-02377077 ; Corpus Linguistics (CL2019), Jul 2019, Cardiff, United Kingdom (2019)
|
|
BASE
|
|
Show details
|
|
7 |
Coreference Resolution for French Oral Data: Machine Learning Experiments with ANCOR
|
|
|
|
In: Computational Linguistics and Intelligent Text Processing. ; https://hal.archives-ouvertes.fr/hal-01889593 ; Computational Linguistics and Intelligent Text Processing., n° 9623-9624, Springer, 2018, Lecture Notes in Computer Science (2018)
|
|
BASE
|
|
Show details
|
|
8 |
Les chaînes coréférentielles en créole de la Guadeloupe
|
|
|
|
In: TALN'2017, atelier DILITAL ; https://hal.archives-ouvertes.fr/hal-01627260 ; TALN'2017, atelier DILITAL, Jun 2017, Orléans, France (2017)
|
|
BASE
|
|
Show details
|
|
9 |
Temporal@ODIL Project: Adapting ISO-TimeML to Syntactic Treebanks for the Temporal Annotation of Spoken Speech
|
|
|
|
In: Thirteenth Joint ACL - ISO Workshop on Interoperable Semantic Annotation (ISA-13), 12th International Conference on Computational Semantics (IWCS’2017), Montpellier, France. ; https://hal.archives-ouvertes.fr/hal-01627261 ; Thirteenth Joint ACL - ISO Workshop on Interoperable Semantic Annotation (ISA-13), 12th International Conference on Computational Semantics (IWCS’2017), Montpellier, France., Sep 2017, Montpellier, France (2017)
|
|
BASE
|
|
Show details
|
|
10 |
Linguistique de corpus : vues sur la constitution, l’analyse et l’outillage
|
|
|
|
In: ISSN: 1638-5748 ; EISSN: 1638-573X ; CORELA - COgnition, REprésentation, LAngage ; https://halshs.archives-ouvertes.fr/halshs-01741333 ; CORELA - COgnition, REprésentation, LAngage, CERLICO-Cercle Linguistique du Centre et de l'Ouest (France), 2017 ; http://journals.openedition.org/corela/4800 (2017)
|
|
BASE
|
|
Show details
|
|
11 |
Covering various Needs in Temporal Annotation: a Proposal of Extension of ISO TimeML that Preserves Upward Compatibility
|
|
|
|
In: LREC 2016 proceedings ; LREC 2016 ; https://halshs.archives-ouvertes.fr/halshs-01318792 ; LREC 2016, May 2016, Portorož Slovenia (2016)
|
|
BASE
|
|
Show details
|
|
|
|