| 4 |
From Error Annotation to Quantitative Analysis: Patterns in Russian Language Learning
|
|
|
|
In: ISSN: 0036-0252 ; Russian language journal ; https://hal.archives-ouvertes.fr/hal-03376956 ; Russian language journal, American Councils for International Education, Michigan State University 2021, 71 (3), pp.39-70 (2021)
|
|
BASE
|
|
Show details
|
|
|
| 6 |
Natural Language Generation : From Data Creation to Evaluation via Modelling ; Génération en langue naturelle : de la création des données à l'évaluation, en passant par la modélisation
|
|
|
|
In: https://hal.univ-lorraine.fr/tel-03254708 ; Computation and Language [cs.CL]. Université de Lorraine, 2021. English. ⟨NNT : 2021LORR0080⟩ (2021)
|
|
Abstract:
Natural language generation is a process of generating a natural language text from some input. This input can be texts, documents, images, tables, knowledge graphs, databases, dialogue acts, meaning representations, etc. Recent methods in natural language generation, mostly based on neural modelling, have yielded significant improvements in the field. Despite this recent success, numerous issues with generation prevail, such as faithfulness to the source, developing multilingual models, few-shot generation. This thesis explores several facets of natural language generation from creating training datasets and developing models to evaluating proposed methods and model outputs. In this thesis, we address the issue of multilinguality and propose possible strategies to semi-automatically translate corpora for data-to-text generation. We show that named entities constitute a major stumbling block in translation exemplified by the English-Russian translation pair. We proceed to handle rare entities in data-to-text modelling exploring two mechanisms: copying and delexicalisation. We demonstrate that rare entities strongly impact performance and that the impact of these two mechanisms greatly varies depending on how datasets are constructed. Getting back to multilinguality, we also develop a modular approach for shallow surface realisation in several languages. Our approach splits the surface realisation task into three submodules: word ordering, morphological inflection and contraction generation. We show, via delexicalisation, that the word ordering component mainly depends on syntactic information. Along with the modelling, we also propose a framework for error analysis, focused on word order, for the shallow surface realisation task. The framework enables to provide linguistic insights into model performance on the sentence level and identify patterns where models underperform. Finally, we also touch upon the subject of evaluation design while assessing automatic and human metrics, highlighting the difference between the sentence-level and system-level type of evaluation.Natural language generation is a process of generating a natural language text from some input. This input can be texts, documents, images, tables, knowledge graphs, databases, dialogue acts, meaning representations, etc. Recent methods in natural language generation, mostly based on neural modelling, have yielded significant improvements in the field. Despite this recent success, numerous issues with generation prevail, such as faithfulness to the source, developing multilingual models, few-shot generation. This thesis explores several facets of natural language generation from creating training datasets and developing models to evaluating proposed methods and model outputs. In this thesis, we address the issue of multilinguality and propose possible strategies to semi-automatically translate corpora for data-to-text generation. We show that named entities constitute a major stumbling block in translation exemplified by the English-Russian translation pair. We proceed to handle rare entities in data-to-text modelling exploring two mechanisms: copying and delexicalisation. We demonstrate that rare entities strongly impact performance and that the impact of these two mechanisms greatly varies depending on how datasets are constructed. Getting back to multilinguality, we also develop a modular approach for shallow surface realisation in several languages. Our approach splits the surface realisation task into three submodules: word ordering, morphological inflection and contraction generation. We show, via delexicalisation, that the word ordering component mainly depends on syntactic information. Along with the modelling, we also propose a framework for error analysis, focused on word order, for the shallow surface realisation task. The framework enables to provide linguistic insights into model performance on the sentence level and identify patterns where models underperform. Finally, we also touch upon the subject of evaluation design while assessing automatic and human metrics, highlighting the difference between the sentence-level and system-level type of evaluation. ; La génération en langue naturelle (natural language generation, NLG) est le processus qui consiste à générer du texte dans une langue naturelle à partir de données d’entrée. Ces entrées peuvent prendre la forme de textes, de documents, d’images, de tableaux, de graphes (réseaux de connaissances), de bases de données, d’actes de dialogue, ou d’autres représentations sémantiques. Les méthodes récentes en NLG, principalement basées sur des modèles neuronaux, ont apporté des améliorations significatives. Malgré ces récents progrès, de nombreux problèmes liés à la tâche de génération subsistent, tels que celui de la fidélité aux données d’entrée, du développement de modèles multilingues, ou de la génération à partir de peu d’exemples. Cette thèse explore trois aspects de la NLG : tout d’abord, la création de données d’apprentissage, puis le développement de modèles de génération, et enfin l’évaluation des méthodes proposées. Nous abordons la question du multilinguisme et proposons des stratégies de traduction semi-automatique de corpus destinés à l’entraînement de modèles de NLG. Nous montrons que les entités nommées constituent un obstacle majeur dans la réalisation de la tâche de traduction, ici considérée de l’anglais vers le russe. Nous décrivons ensuite deux méthodes de traitement des entités rares dans les données d’apprentissages des modèles de NLG : la copie et la délexicalisation. Nous démontrons que l’effet de ces deux mécanismes varie fortement selon la manière dont les données sont construites, et que les entités rares ont un impact important sur les performances des modèles. Concernant la génération multilingue, nous développons une approche modulaire de réalisation de surface superficielle (shallow surface realisation, SSR) pour plusieurs langues. Notre approche consiste à diviser la tâche de SSR en trois composantes : l’ordonnancement des mots, l’inflexion morphologique et la génération de contractions. Nous montrons, via la délexicalisation, que la composante d’ordonnancement s’appuie principalement sur les informations syntaxiques. En plus de nos contributions concernant la modélisation, nous proposons un cadre d’analyse des erreurs axé sur l’ordre des mots, pour la tâche de SSR. Ce cadre permet d’obtenir un aperçu linguistique des performances des modèles au niveau de la phrase et d’identifier les cas où un modèle échoue. Enfin, nous abordons le sujet de l’évaluation de manière plus générale et comparons différentes métriques automatiques et humaines ; nous soulignons la différence entre les méthodes d’évaluation au niveau de la phrase et les méthodes d’évaluations au niveau du corpus.
|
|
Keyword:
[INFO.INFO-AI]Computer Science [cs]/Artificial Intelligence [cs.AI]; [INFO.INFO-CL]Computer Science [cs]/Computation and Language [cs.CL]; Analyse d’erreurs; Data-to-text generation; Error analysis; Évaluation; Evaluation; Génération à partir de données; Génération en langue naturelle; Natural language generation; Réalisation de surface; Surface realisation
|
|
URL: https://hal.univ-lorraine.fr/tel-03254708/document
https://hal.univ-lorraine.fr/tel-03254708
https://hal.univ-lorraine.fr/tel-03254708/file/DDOC_T_2021_0080_SHIMORINA.pdf
|
|
BASE
|
|
Hide details
|
|
|
| 7 |
Ανάλυση γλωσσικών λαθών στον γραπτό λόγο μαθητών δημοτικού: ... : Analysis of linguistic errors in elementary school students’ written speech: ...
|
|
|
|
BASE
|
|
Show details
|
|
|
| 8 |
ANALISIS KESALAHAN PENGGUNAAN ANGGAH UNGGUHING BASA BALI DALAM TEKS LOMBA PIDARTA BALI SISWA SMA/SMK SE-BALI DI UNIVERSITAS PGRI MAHADEWA INDONESIA ...
|
|
|
|
BASE
|
|
Show details
|
|
|
| 9 |
ANALISIS KESALAHAN PENGGUNAAN ANGGAH UNGGUHING BASA BALI DALAM TEKS LOMBA PIDARTA BALI SISWA SMA/SMK SE-BALI DI UNIVERSITAS PGRI MAHADEWA INDONESIA ...
|
|
|
|
BASE
|
|
Show details
|
|
|
| 10 |
An Analysis of Errors in English Writing: A Case Study the Third Semester Students of UBSI
|
|
|
|
In: JURNAL ARBITRER; Vol 8, No 1 (2021); 46-50 ; 2550-1011 ; 2339-1162 (2021)
|
|
BASE
|
|
Show details
|
|
|
| 11 |
Advancing writing analytics methodologies: a hybrid approach to analyzing errors in automated rhetorical feedback
|
|
|
|
In: World Languages and Cultures Conference Papers, Posters and Proceedings (2021)
|
|
BASE
|
|
Show details
|
|
|
| 12 |
Предложные конструкции в унаследованном (эритажном) русском: корпусный анализ
|
|
|
|
BASE
|
|
Show details
|
|
|
| 13 |
Предложные конструкции в унаследованном (эритажном) русском: корпусный анализ ...
|
|
|
|
BASE
|
|
Show details
|
|
|
| 14 |
Análisis de errores fonéticos y ortográficos en la interlengua española de hablantes lituanos ; Phonetic and spelling error analysis of the spanish interlanguage of lithuanian speakers
|
|
|
|
BASE
|
|
Show details
|
|
|
| 15 |
Anàlisi d'errors en l'expressió escrita del català com a llengua addicional : contrast entre l'alumnat serbi i l'anglòfon
|
|
|
|
BASE
|
|
Show details
|
|
|
| 16 |
Lexical Properties of Perceptual Errors Made by Younger and Older Adults Listening to Speech in Multitalker Babble
|
|
|
|
In: Theses and Dissertations (2021)
|
|
BASE
|
|
Show details
|
|
|
| 17 |
Common writing mistakes of the Spanish-speaking university students of French as a foreign language ; Les erreurs fréquentes des étudiants universitaires hispanophones de FLE à l’écrit
|
|
|
|
In: Anales de Filología Francesa; No. 29 (2021): Le monde connecté et les approches interculturelles: vers un nouveau paradigme des frontières?; 769-789 ; Anales de Filología Francesa; Núm. 29 (2021): Le monde connecté et les approches interculturelles: vers un nouveau paradigme des frontières?; 769-789 ; Anales de Filología Francesa; No 29 (2021): Le monde connecté et les approches interculturelles: vers un nouveau paradigme des frontières?; 769-789 ; 1989-4678 (2021)
|
|
BASE
|
|
Show details
|
|
|
| 18 |
Lexical errors analysis of Saudi university english major students’ translation texts
|
|
|
|
BASE
|
|
Show details
|
|
|
| 19 |
What's in a Span? Evaluating the Creativity of a Span-Based Neural Constituency Parser
|
|
|
|
In: Proceedings of the Society for Computation in Linguistics (2021)
|
|
BASE
|
|
Show details
|
|
|
| 20 |
The skill of natural interpreting in a trilingual child
|
|
|
|
In: Topics in Linguistics, Vol 22, Iss 1, Pp 38-62 (2021) (2021)
|
|
BASE
|
|
Show details
|
|
|
|
|
