Семинар по жестовой лингивистике

Пару лет назад на этом семинаре я уже делал доклад, в котором сравнивал данные РЖЯ, полученные при помощи традиционной элицитации и данные, полученные экспериментально. В этот раз я расскажу более подробно о статусе суждений о грамматичности (acceptability judgments) в лингвистике, и о том, почему жестовые языки могут вести себя не так, как звучащие. Также предлагаю устроить небольшое обсуждение, где все участники могли бы поделиться своим опытом элицитации суждений о грамматичности в РЖЯ

Аня Клезович сделала доклад про посессивные и экзистенциальные конструкции в жестовых языках, уделив особое внимание жестовому языку Бали — Ката Колок (индон. Kata Kolok, буквально "глухая речь", также Balinese Sign Language). Этот язык возник в изолированной деревне Деса Колок, 2% населения которой — глухие, что в 20 раз превышает норму: обычно доля глухих в обществе слышащих составляет сотые доли процента. Вследствие аномально высокого количества глухих в Деса Колок даже слышащие жители деревни владеют жестовым языком. Ethnologue сообщает, что для 125 человек Ката Колок является родным языком,  а 1000 человек использует его в качестве второго языка.
Для Ката Колок характерны непроизвольность указательных жестов, геоцентрическая система жестов с пространственной семантикой, а также высокая степень полисемии и омонимии. В контексте посессивных конструкций это проявляется, например, в том, что указательный жест может относиться как к обладателю, так и к обладаемому; может использоваться для обозначения как атрибутивной, так и предикативной посессивности. Кроме того, тот же указательный жест участвует в передаче значений локатива и встречается в экзистенциальных конструкциях.

На пятнадцатом семинаре выступил Кирилл Аксенов с докладом про прилагательные в ЖЯ. Прежде всего, было поставлено под сомнение само наличие такой части речи как прилагательные в жестовых языках. Кирилл показал, что отсутствие прилагательных в языках мира вовсе не удивительно. Оказалось, что в таких языках, функции прилагательных могут брать на себя как существительные, так и глаголы - это, например, языки хауса (чадская семья) и бемба (группа банту).
Интересно, что в жестовых языках изменение движения жеста и/или появление немануальных маркеров для выражения сильной/слабой степени признака напоминает модификацию глаголов за счёт изменения этих же компонентов жеста. Например, так могут выражаться аспектуальные противопоставления. Более того, некоторые модификации возможны как на глаголах, так и на прилагательных в предикативной позиции. Таким образом, весьма вероятно, что эти модификации больше привязаны к синтаксическим позициям, чем к частям речи. В целом вопрос о наличии прилагательных в русском жестовом языке остаётся открытым. Однако общая дискуссия помогла сделать некоторые предварительные выводы, которые предстоит проверить экспериментальным путём.

 Прилагательные в ЖЯ.pdf

Влада рассказала про фонологические характеристики жестов, классификацию жестов по смыслу и некоторые исторические изменения в американском жестовом языке, по которым видно, что жесты движутся от иконичности в сторону произвольности.

В своём докладе Лера кратко рассказала о временной локализации, единицах измерения времени и показателях временного дейксиса в жестовых языках. Подробно была рассмотрена временная дистанция в русском жестовом языке. Были показаны типологические сходства в кодировании временных значений со звуковыми и другими жестовыми языками.  

 Time_temporal_distance_Dushkina.pdf

Кирилл Аксёнов и Аня Клезович представили доклад на тему «Syntactic Structure of the Nominal Complex in RSL». Эта работа основана на данных собранных Кириллом и Леной Пасальской в Новосибирске. Во время доклада все участники НУГ ознакомились с предварительным результатами анализа данных, и был намечен план по дальнейшей обработке собранных данных. Кирилл и Аня рассказали, какие порядки модификаторов именной группы носители считают более грамматичными, а какие менее грамматичными. Более того, оказалось, что некоторые комбинации именных модификаторов в целом менее приемлемы, чем другие, что видно из статистики ответов информантов. Эту идею Кирилл и Аня собираются развивать для своего будущего доклада на конференции SWL8. 

Саша рассказала о разработке программ автоматического распознавания в применении к жестовым языкам. 

Первую часть доклада Саша уделила распознаванию поворотов головы. Были обсуждены составляющие, которые нужно выделять при распознавании, а также проблемные места.

Во второй части доклада Саша рассказала про распознавания дактиля в РЖЯ.

 Автоматическое распознавание ЖЯ

В первый день профессор Пфау рассказал о том, как устроено отрицание в жестовых языках (ЖЯ). В своём обзоре он представил как кросс-модальный анализ, сопоставив отрицание в жестовых и звучащих языках, так и внутримодальное, сконцентировавшись на различиях в выражении отрицания внутри ЖЯ. В частности, он показал, что жестовые языки можно разделить на "manual dominant", в которых для выражения отрицания необходим отдельный жест, и "nonmanual dominant", в которых отрицание выражается за счёт немануальных компонентов. Вторая лекция была посвещена формальным подходам к отрицанию в ЖЯ, а третья — использованию пространства, и в частности — согласующимся глаголам.
Хэндаут лекций Роланда Пфау доступен на сайте НУГ в разделе материалы.

Для начала Лена Пасальская и Павел Руднев рассказали об отрицании в типологической перспективе. Затем докладчики перешли к отрицанию в жестовых языках, акцентируя внимание на проблеме, связанной с модальностью жестовых языков, а именно, на одновременности. Отрицание в ЖЯ одновременно может выражаться через отрицательный жест и через немануальные маркеры, то есть повороты головы и выражения лица. Такая одновременность создает проблему для описания отрицательных конструкций в формальной модели.

Лена и Павел привели ряд существующих анализов, решающих эту проблему. Одними из самых главных были анализ Пфау и Кера (Pfau & Quer) и анализ Кремерса (Kremers). Доклад был завершен бурной дискуссией последнего анализа.

 Одновременность в ЖЯ и теория грамматики

Антонина подробна изложила фонологическую модель жеста, основываясь на работе ван дер Кой (van der Kooij). В докладе были представлены проблемы, связанные с этой моделью, а также обсуждения альтернативных подходов. 

Целью исследования было изучение немануальных маркеров, сопровождающих жесты формы и размера (SASS). Маша пояснила, что ее внимание при разборе данных было обращено на щеки, челюсти, язык и губы, то есть на нижнюю часть лица. Здесь важно заметить, что, согласно распространенному в литературе по жестовым языкам мнению, нижняя часть лица, как правило, играет значительную роль в лексике, а верхняя часть — в грамматике.

В качестве метода сбора данных Маша выбрала экспериментальное исследование. В результате анализа полученных данных выяснилось, что немануальные маркеры неравномерно распределены между лексикализованными и продуктивными жестами формы и размера. Лексикализованные жесты чаще сопровождаются ротовой артикуляцией слова (англ. mouthing ), а не независимыми немануальными маркерами (например, надуванием/втягиванием щек или вибрацией губ). Продуктивные же жесты, напротив, почти всегда сопровождаются независимой (и очень редко ротовой) артикуляцией. Еще одним интересным выводом исследования является наблюдение, что выбор немануального маркера зависит от того, что акцентируется: размер или же форма предмета.

 Немануальные маркеры жестов формы и размера в РЖЯ

SL_negation_seminar.pdf

презентация

topic.pdf

RG_gesture_sign.pdf

 SLR 

Я расскажу о своем эксперименте по элицитации суждений о грамматичности в РЖЯ. В последние 20 лет довольно активно идёт спор о том, как надо собирать суждения о грамматичности (в генеративной лингвистике): можно ли полагаться на интроспекцию или малое количество неформально опрошенных носителей, или нужно создавать полноценный эксперимент с филлерами, рандомизированным порядком, и большим количеством носителей. В последние пару лет этот спор активизировался: можно например посмотреть на Gibson & Fedorenko 2013 и Sprouse, Schütze & Almeida 2013. При этом для ЖЯ такого обсуждения по сути не было. Мой опыт элицитации и конкретно моё исследование безличных конструкций в РЖЯ заставили меня попробовать собрать суждения полноценным экспериментальным способом. В ходе доклада я расскажу, что у меня получилось. 

 grammaticality_jugements_RSL (PDF, 864 Кб)

 Глаголы движения в РЖЯ 

Все мы видели (или можем себе представить) словарь жестового языка, в котором слову на звучащем языке соответствует видео или картинка с жестом. Но что, если мы хотим узнать значение незнакомого нам жестового слова? Оказывается, есть и такие словари. На докладе мы обсудим различные словари жестовых языков и попробуем понять, как должен быть устроен поиск по жестам. Обсуждение поможет нам сделать РЖЯ-русский словарь максимально удобным для пользователей.

 Словари ЖЯ_Цфасман 

Достаточно долго считалось, что владение языком некоторым образом связано с интеллектом. Однако исследования животных (дельфинов, птиц, приматов) показали, что все, видимо, не так просто. Во-первых, исследователи показали, что разные интелектуальные задачи (вплоть до счета объектов!) некоторые животные отлично решают и без всякого языка. А во вторых, оказалось, что приматы, которых достаточно долго пытались обучить какому-нибудь естественному языку в целом, на каком-то уровне способны этот язык понимать и выучить. Доклад посвящен исследованиям приматов, которые выучили амслен, и о разных проблемах, связанных с этими исследованиями.

 16.09.20_moroz_talking ape 

Доклад_Акциональность в РЖЯ 

Доклад_Категория аспектуальности в русском жестовом языке

В докладе пойдёт речь об одном из наиболее изученных вспомогательных жестовых языков австралийских аборигенов -- вальбири. Им пользуются носители звучащего вальбири, которые живут в северной части центральной пустыни, во время табу и просто сопровождая речь. Интересным, но, как мы увидим, довольно предсказуемым свойством этого языка является почти полное калькирование звучащей речи. При этом повторяются преимущественно лексические единицы, а морфосинтаксические категории упраздняются.

wsl 

SignWordClasses_tsfasman

metaphors_perova 

kyuseva_fernald&napoli_ions

kimmelman_lexical_comparison 

15_10_30_Pasalskaya_Liddell_and_Johnson_1

15.10.17 moroz numerals RSL

sociolingv_schembri_2015_short 

Начиная с 1970-х годов, нейролингвисты стремились найти общие для жестовых и звучащих языков речевые механизмы и их нейрофизиологическую основу, тщательно анализировали сравнительно редкие случаи «жестовых афазий» — серьёзных мозговых нарушений речи, например, из-за инсульта. Обнаружив многочисленные свидетельства в пользу идеи о том, что жестовые языки — тоже языки, нейролингвисты обратили внимание на уникальные особенности жестовых языков, которые влияют на обработку языковой информации мозгом: использование пространства, нелинейность в речи, опору на зрительный путь передачи информации.
В своём докладе я старался продемонстрировать оба подхода к изучению мозговых основ жестовых языков — фокусирующийся на сходствах и выявляющий различия. Использовались и клинические данные, и исследования нормы. Что произойдёт с носителем жестового языка при инсульте? Когда носитель жестового языка может спутать семантически далёкие жесты? Почему пациенты с повреждениями в правом полушарии лучше справляются с речевыми заданиями, чем те, у кого затронуто левое полушарие? В каких зонах мозга обрабатывается жестовая речь?  Как мозг носителя жестового языка отреагирует на неправильное жестовое слово? Как модальность восприятия речи влияет на физиологию (и даже на анатомию) мозга?

Нейролингвистика жестовых языков (Змановский 1402фр2)

15.04.14 moroz sign language phonology

хендаут по морфологии

прозорова2007_h