Search

This chapter defines ‘utterance units’ and describes their annotation in the Japanese Sign Language (JSL) dialogue corpus, first focusing on how human annotators – native signers of JSL – identify and annotate utterance units, before reporting on part of speech (POS) tagging for JSL and semi-automatic annotation of utterance units. The utterance unit is an original concept for segmenting and annotating movement features in sign language dialogue, based on signers’ native sense. We postulate a fundamental interaction-specific unit for understanding interactional mechanisms (such as turn-taking) in sign language social interactions from the perspectives of conversation analysis and multimodal interaction studies. We explain differences between sentence and utterance units, the corpus construction and composition, and the annotation scheme, before analyzing how JSL native annotators annotated the units. Finally, we show the application potential of this research by presenting two case studies, the first exploring POS annotations, and the second a first attempt at automatic annotation using OpenPose software.

Les As. decrivent une methode de production de mots a partir d'une image et montrent dans quelle mesure elle peut etre utilisee pour identifier differents systemes linguistiques du langage par signes dans une aire geographique, en l'occurrence, l'ile d'Amami au sud du Japon. L'analyse de la coherence lexicale et de l'agencement dans la denomination de 25 mots revele des schemas distincts qui sont correles avec les schemas d'interaction sociale entre les 21 personnes soumises a cette experience. En se basant sur les schemas d'interaction sociale et familiale de ces personnes, les As. identifient les types de systemes gestuels qu'ils attendent de chaque groupe, en les classant en gestes non linguistiques, en signes utilises a la maison de maniere isolee et en signes utilises a la maison d'une maniere plus developpee. Cette methode s'avere etre un outil tres efficace pour identifier la variation dans une communaute utilisant le langage par signes