Sutton SignWriting , или просто SignWriting , — это система письменных жестовых языков . Она очень показательна и визуально знаковая, как по форме символов, которые представляют собой абстрактные изображения рук, лица и тела, так и по их пространственному расположению на странице, которое не следует последовательному порядку, как буквы, составляющие написанные английские слова. Она была разработана в 1974 году Валери Саттон , танцовщицей , которая двумя годами ранее разработала DanceWriting . Некоторые более новые стандартизированные формы известны как Международный алфавит жестового письма (ISWA).
Когда Саттон преподавал DanceWriting в Королевском датском балете , Ларс фон дер Лит, проводивший исследования по языку жестов в Копенгагенском университете , подумал, что было бы полезно использовать похожую нотацию для записи языков жестов . [1] Саттон основал SignWriting на DanceWriting и в конечном итоге расширил систему до полного репертуара MovementWriting . Однако широко использовались только SignWriting и DanceWriting.
SignWriting не была первой системой письма для жестовых языков, ей предшествовала нотация Стоку ; [2] но она первая, которая адекватно представляет выражения лица и изменения в позе, а также позволяет представлять серии знаков длиннее, чем сложные слова и короткие фразы . Это единственная система, которая находится в регулярном использовании, используемая, например, для публикации студенческих информационных бюллетеней на американском жестовом языке, и использовалась для субтитров к видео на YouTube . [ необходима цитата ]
Саттон отмечает, что жестовое письмо использовалось или исследовалось в более чем 40 странах на каждом обитаемом континенте. [3] Однако неясно, насколько широко оно используется в каждой стране.
В Бразилии на ежегодном собрании FENEIS (Национальной ассоциации глухих) в 2001 году ассоциация проголосовала за принятие жестового письма в качестве предпочтительного метода транскрибирования Lingua Brasileira de Sinais (Libras) в письменную форму. Настоятельная рекомендация бразильскому правительству от этой ассоциации состояла в том, чтобы жестовое письмо преподавалось во всех школах для глухих. В настоящее время жестовое письмо преподается на академическом уровне в Федеральном университете Санта-Катарины в рамках учебной программы по бразильскому жестовому языку. SignWriting также используется в недавно опубликованном «Словаре бразильского языка жестов», содержащем более 3600 знаков, используемых глухими в Сан-Паулу, изданном Университетом Сан-Паулу под руководством профессора Фернандо Каповильи (EJ669813 – Лексикография и технологии бразильского языка жестов: словарь, цифровая энциклопедия, поиск знаков на основе череме и системы общения для глухих с квадриплегией. Извлечено из Информационного центра образовательных ресурсов).
Некоторые первоначальные исследования показали, что сообщества глухих предпочитают видео или системы письма для доминирующего языка; [4] однако это утверждение было оспорено работой Стива и Дайанны Паркхерст в Испании, где они обнаружили первоначальное сопротивление, позже возобновленный интерес и, наконец, гордость. «Если глухие люди учатся читать и писать в своей собственной системе жестов, это повышает их самооценку», - говорит Дайанны Паркхерст.
По состоянию на 2010 год [обновлять], SignWriting широко используется на международных форумах жестов . [ требуется ссылка ] Он принят в 40 странах, среди которых Бразилия, Эфиопия, Франция, Германия, Италия, Португалия, Саудовская Аравия, Словения, Тунис и США. [5]
SignWriting, как Международный алфавит жестового письма (ISWA), был предложен в качестве ручного эквивалента Международного фонетического алфавита . [6] Однако некоторые исследователи утверждают, что SignWriting не является фонематической орфографией и не имеет однозначного соответствия между фонологическими формами и письменными формами. [5] : 163 Хотя такое утверждение оспаривается, было рекомендовано, чтобы страны адаптировали этот знак на основе языка к языку. [7] Существуют две докторские диссертации, которые изучают и продвигают применение SignWriting к определенному языку жестов. Мария Галеа писала об использовании SignWriting для записи на мальтийском языке жестов . [8] Кроме того, Клаудия Савина Бьянкини написала свою докторскую диссертацию о внедрении SignWriting для записи на итальянском языке жестов . [9] [10]
В жестовом письме для представления слов на жестовых языках используется комбинация иконических символов для форм рук , ориентации , положения тела , выражений лица , контактов и движения [11] [12] . Поскольку жестовое письмо, как функциональный шрифт , [13] представляет фактическое физическое формирование знаков, а не их значение, для его написания не требуется фонематического или семантического анализа языка. Человек, изучивший систему, может «прочувствовать» незнакомый знак так же, как англоговорящий человек может «проговорить» незнакомое слово, написанное латинским алфавитом , даже не зная, что означает этот знак.
Число символов обширно и часто обеспечивает несколько способов написания одного знака. Так же, как потребовалось много столетий, чтобы английская орфография стала стандартизированной, орфография в жестовом письме пока не стандартизирована ни для одного языка жестов.
Слова могут быть написаны с точки зрения подписывающего или наблюдателя. Однако почти все публикации используют точку зрения подписывающего и предполагают, что правая рука является доминирующей. Саттон изначально разработал сценарий для записи по горизонтали (слева направо), как в английском языке, и с точки зрения наблюдателя, но позже изменил его на вертикальный (сверху вниз) и с точки зрения подписывающего, чтобы соответствовать пожеланиям глухих писателей.
Все SignWriting показывают перспективу подписывающего. Для некоторых форм руки ориентация недвусмысленна, но цвет глифа всегда указывает на ориентацию руки: черный указывает на тыльную сторону руки, белый — на ладонь. Глиф с пустым контуром (белый) указывает на то, что ладонь обращена к подписывающему, а заполненный (черный) глиф указывает на то, что ладонь обращена от подписывающего. Раздельная штриховка (наполовину черная, наполовину белая) указывает на вид сбоку, а порядок цветов показывает, какой вид сбоку имеется в виду. Хотя в действительности запястье может поворачиваться в промежуточные положения, в SignWriting представлены только четыре ориентации, поскольку их достаточно для представления языков жестов.
Если используется сплошной глиф, то рука располагается в вертикальной плоскости (стена или лицо) перед подписывающим, как это происходит при дактилоскопии. Полоса, стертая поперек глифа через костяшки пальцев, показывает, что рука лежит в горизонтальной плоскости, параллельно полу. (Если используется один из основных глифов формы руки, например, простой квадрат или круг, эта полоса разбивает его надвое; однако, если есть линии для пальцев, вытянутых из основания, то они отделяются от основания, но само основание остается нетронутым.)
На диаграмме слева показана BA-рука (плоская рука) в шести ориентациях. Для трех вертикальных ориентаций с левой стороны рука находится перед подписывающим, пальцы направлены вверх. Все три глифа можно вращать, как стрелки часов, чтобы показать, что пальцы направлены под углом, в сторону или вниз. Для трех горизонтальных ориентаций с правой стороны диаграммы рука находится снаружи, пальцы направлены от подписывающего и, предположительно, к зрителю. Их также можно вращать, чтобы показать, что пальцы направлены в сторону или к подписывающему. Хотя таким образом можно представить неопределенное количество ориентаций, на практике для каждой плоскости используется только восемь, то есть встречаются только кратные 45°.
Существует более сотни глифов для обозначения форм руки, но все они, используемые в ASL, основаны на пяти основных элементах:
Линия, проходящая через половину квадрата или пятиугольника, показывает большой палец поперек ладони. Это E, B и (с расставленными пальцами) 4 руки дактилоскопии.
Эти основные формы изменены линиями, выступающими из их граней и углов, чтобы представить пальцы, которые не расположены так, как описано выше. Прямые линии представляют прямые пальцы (они могут быть под углом, чтобы указать, что они не находятся на одной линии с ладонью; если они направлены к подписывающемуся или от него, они имеют ромбовидную форму на кончике); изогнутые линии для изогнутых (чашевидных) пальцев; крючковатые линии для крючковатых пальцев; линии под прямым углом для пальцев, согнутых только в одном суставе; и перекрещенные линии для скрещенных пальцев, как показано на схеме справа. Пятиугольник и C изменены только для того, чтобы показать, что пальцы разведены, а не соприкасаются; угол изменен только для того, чтобы показать, касается ли большой палец кончиков пальцев или выступает в сторону. Хотя есть некоторые обобщения, которые можно сделать для десятков других глифов, которые основаны на круге и квадрате, детали несколько своеобразны, и каждый из них нужно запомнить.
Для верхнего знака стрелки показывают, что две стрелки «1» движутся по вертикальным кругам, и что, хотя они движутся одновременно (связующая линия), левая рука (полый наконечник стрелки) начинает движение от тела (тонкая линия), поднимаясь вверх, в то время как правая рука (сплошной наконечник стрелки) начинает движение вблизи тела (толстая линия), опускаясь вниз.
В нижнем знаке правая рука с ладонью вниз «X» движется вниз-стороной вниз относительно неподвижной руки с ладонью вверх «B». Это слишком точно: знак ASL будет работать с любым нисходящим зигзагообразным движением, а направление и начальная точка кругов не имеют значения.
Для обозначения движения пальцев существует всего несколько символов. Они могут дублироваться, чтобы показать, что движение повторяется.
Сплошная пуля представляет сгибание среднего сустава пальца или пальцев, а полая пуля представляет выпрямление согнутого пальца. То есть рука «D» с сплошной пулей означает, что она становится рукой «X», в то время как рука «X» с полой пулей означает, что она становится рукой «D». Если пальцы уже согнуты, то сплошная пуля показывает, что они сжимаются. Например, квадрат (сжатый кулак, рука «S») с двумя сплошными пулями — это знак для «молока» (иконическое сжимание вымени).
Направленный вниз шеврон представляет сгибание в суставах, в то время как направленный вверх шеврон (^) показывает, что суставы выпрямляются. То есть рука в форме «U» с направленным вниз шевроном становится рукой в форме «N», в то время как рука в форме «N» с направленным вверх шевроном становится рукой в форме «U».
Зигзаг, похожий на два соединенных шеврона (^^), означает, что пальцы сгибаются многократно и синхронно. Двойной зигзаг означает, что пальцы извиваются или трепещут несинхронно.
Сотни стрелок разных видов используются для обозначения движения рук в пространстве. Обозначение движения становится довольно сложным, и поскольку оно точнее, чем требуется для любого языка жестов, разные люди могут захотеть записать один и тот же знак по-разному.
Для движения левой рукой наконечник стрелы в форме Δ полый (белый); для движения правой рукой — сплошной (черный). Когда обе руки движутся как одно целое, используется открытый (Λ-образный) наконечник стрелы.
Как и в случае с ориентацией, стрелки движения различают две плоскости: Движение в вертикальной плоскости (вверх и вниз) представлено стрелками с двойными стержнями, как в нижней части диаграммы слева, в то время как стрелки с одним стержнем представляют движение параллельно полу (туда и обратно). Кроме того, движение в диагональной плоскости использует модифицированные стрелки с двойным стержнем: поперечная полоса на стержне указывает на то, что движение происходит в сторону, а также вверх или вниз, а сплошная точка указывает на приближающееся движение. Движение туда и обратно, которое также проходит над или под чем-то, использует модифицированные стрелки с одним стержнем, причем часть стрелки, представляющая близкое движение, толще, чем остальная часть. Они являются иконическими, но условными, и поэтому их нужно изучать индивидуально.
Прямые движения происходят в одном из восьми направлений для каждой плоскости, как в восьми главных направлениях компаса. Длинная прямая стрелка указывает на движение от локтя, короткая стрелка с перекладиной позади нее указывает на движение от запястья, а простая короткая стрелка указывает на небольшое движение. (Двойные, в противоположных направлениях, они могут показывать кивание от запястья.) Вторичная изогнутая стрелка, пересекающая основную стрелку, показывает, что рука скручивается во время движения. (Двойные, в противоположных направлениях, они могут показывать дрожание руки.) Стрелки могут поворачиваться, изгибаться, зигзагообразно двигаться и делать петлю.
Стрелки на лице у глаз показывают направление взгляда.
Шесть контактных глифов показывают контакт руки с местоположением знака. То есть, глиф в виде руки, расположенный сбоку от лица, вместе с контактным глифом указывает, что рука касается стороны лица. Выбор контактного глифа указывает на способ контакта:
Если подписывающая рука находится в другой руке, символом для нее является одна из форм руки, приведенных выше. На практике встречается только подмножество более простых форм руки.
Дополнительные символы используются для обозначения расположения знаков на лице или частях тела, отличных от рук. Круг показывает голову.
Существуют символы для представления движений лица, которые используются в различных языках жестов, включая движения глаз, бровей, носа, щек, рта и изменения дыхания. Также может быть показано направление движения головы и взгляда.
Плечи показаны горизонтальной линией. Можно добавить маленькие стрелки, чтобы показать движение плеч и туловища. При необходимости можно добавить руки и даже ноги.
Существуют также символы, указывающие скорость движения, одновременность или попеременность движения, а также знаки препинания.
Существуют различные знаки препинания, которые соответствуют запятым, точкам, вопросительным и восклицательным знакам и другим знакам препинания других письменностей. Они пишутся между знаками, и строки не разрываются между знаком и следующим за ним знаком препинания.
Одной из необычных характеристик SignWriting является использование двумерной компоновки внутри невидимого «знакового блока». Относительные положения символов внутри блока иконически представляют расположение рук и других частей тела, участвующих в представляемом знаке. Таким образом, нет очевидной линейной связи между символами внутри каждого знакового блока, в отличие от последовательности символов внутри каждого слова в большинстве сценариев для разговорных языков. Это также не похоже на другие сценарии языка жестов, которые располагают символы линейно, как в разговорных языках. Однако, поскольку в языках жестов многие фонетические параметры артикулируются одновременно, эти другие сценарии требуют произвольных соглашений для указания порядка различных параметров формы руки, местоположения, движения и т. д. Хотя в SignWriting есть соглашения о том, как символы должны быть расположены относительно друг друга внутри знака, двумерная компоновка приводит к меньшей произвольности и большей иконичности, чем другие сценарии языка жестов. [11]
Однако за пределами каждого знака письмо линейно, что отражает временной порядок знаков. Знаки чаще всего пишутся в вертикальных колонках (хотя раньше они писались горизонтально). Поля знаков располагаются сверху вниз внутри колонки, перемежаясь знаками пунктуации, и колонки идут слева направо по всей странице. Внутри колонки знаки могут быть написаны по центру или смещены влево или вправо в «полосах», чтобы обозначить смещения тела из стороны в сторону.
Sutton упорядочивает знаки в десять групп на основе того, какие пальцы вытянуты на доминирующей руке. Они эквивалентны цифрам от одного до десяти в ASL. Затем каждая группа подразделяется в соответствии с фактической формой руки, а затем снова подразделяется в соответствии с плоскостью, в которой находится рука (вертикальная, затем горизонтальная), затем снова в соответствии с базовой ориентацией руки (ладонь, бок, тыльная сторона). Была предложена система упорядочения с использованием этого начала и примеров как из американского языка жестов, так и из бразильского языка жестов (LIBRAS). [14] Текущая система упорядочения для жестового письма называется последовательностью символов знака, которая анализируется создателем каждого знака, как записано в онлайн-словаре. Эта система позволяет осуществлять внутреннее упорядочение по признакам, включая форму руки, ориентацию, скорость, местоположение и другие кластеризованные признаки, не встречающиеся в разговорных словарях.
Некоторые преимущества SignWriting по сравнению с другими системами письма для жестовых языков:
Однако у него есть и несколько недостатков:
SignPuddle — это текстовое (ASCII) строковое представление знаков. Его можно хранить как обычный текст где угодно и заменять знаками с помощью специальных программ, таких как SignWriting Icon Server. [15] Для него был предложен проект стандарта RFC, [ 16 ] который позже превратился в более строгий проект стандарта, известный как «Formal Signwriting» (FSW). Он также может использовать символы Unicode вместо экранированных символов ASCII. [17] Существует также экспериментальный шрифт TrueType , который использует технологию SIL Graphite для автоматического преобразования этих последовательностей в знаки. [15]
SignWriting — первая система письма для языков жестов, включенная в стандарт Unicode . В Sutton SignWriting (блок Unicode) версии Unicode 8.0, выпущенной в июне 2015 года, было добавлено 672 символа. Этот набор символов основан на стандартизированном наборе символов SignWriting [18] и определенной модели кодирования символов. [19] [12]
Стандарт Unicode охватывает только набор символов. Он не рассматривает макет, позиционирование символов в двух измерениях. Исторически программное обеспечение записывало положение с использованием декартовых ( x – y ) координат для каждого символа. [20] Поскольку Unicode фокусируется на символах, которые имеют смысл в одномерном текстовом контексте, число символов, необходимое для двухмерного размещения, не было включено в предложение Unicode. [12]
Блок Unicode для Sutton SignWriting — U+1D800–U+1DAAF:
Текущее программное обеспечение записывает каждый знак как строку символов в ASCII или Unicode. Более старое программное обеспечение может использовать XML или пользовательский двоичный формат для представления знака. Формальный SignWriting использует символы ASCII для определения двухмерной компоновки внутри знака и других простых структур. [21] Было бы возможно полностью определить знак в Unicode с семнадцатью дополнительными символами. [22] С любым набором символов (Unicode или ASCII) написание знака создает слово, которое может быть эффективно обработано с помощью регулярных выражений. Эти наборы изоморфны .
Sutton выпустил International SignWriting Alphabet 2010 [23] под лицензией SIL Open Font License . Символы ISWA 2010 доступны в виде отдельных SVG-файлов или шрифтов TrueType.
Google выпустила открытый шрифт Noto Sans SignWriting [24] [25] , который поддерживает спецификацию SignWriting в Unicode 8 (uni8) с возможностью изменения символов и лицевых диакритических знаков.
SignWriting доступен на Wikimedia Incubator с помощью "Javascript-based SignWriting Keyboard for Use on Wikimedia and across the Web" Яира Рэнда. Тестовые вики включают ASL Wikipedia на Incubator и другие тестовые вики жестовых языков.
Sutton SignWriting SignMaker (@sutton-signwriting/signmaker) — это редактор знаков, к которому можно получить прямой доступ, встроить в iFrame и загрузить. Он использует как наборы символов Formal SignWriting in ASCII (FSW), так и SignWriting in Unicode (SWU) вместе с соответствующей строкой стиля. Подробную спецификацию см. в draft-slevinski-formal-signwriting.
Для современной разработки веб-сайтов и приложений доступно несколько пакетов на GitHub и NPM.
Для перевода языка жестов текст SignWriting является полезным абстрактным слоем между видео и обработкой естественного языка жестов. [26] Полезность SignWriting в обработке естественного языка была подтверждена новым методом машинного перевода, который достиг более 30 BLEU . [27] [28] Преобразование видео с языка жестов в текст SignWriting является новой областью с возможностями открытого исходного кода. [29]
Доступны дополнительные проекты машинного обучения для распознавания рукописного текста в жестовом письме, жестового письма в устную речь и устного языка в жестовом письме. [30]
