​​ИИ может дискриминировать тех немцев, кто говорит на диалектах

Не менее 40% немцев говорят на различных диалектах, помимо общегерманского литературного языка ("хохдойч"). Среди самых распространенных - баварский, северонемецкий и берлинский. Но, как показывает новое исследование университетов Майнца и Гамбурга, большие языковые модели, например, ChatGPT, демонстрируют явное пренебрежение к носителям диалектов.

Ученые предложили ИИ дать определения для фиктивных персон, якобы использующих один из немецких диалектов, а также для условных носителей нормативного языка. В результате система значительно чаще выбирала для первой группы негативные определения, такие как "необразованный" и "недружелюбный". Когда ИИ спросили, какие профессии могут быть у этих людей, чаще предполагалось, что носители диалектов будут занимать должности, для которых достаточен более низкий уровень образования, например, штукатур или сельхозработник.

В случае с теми, кто якобы говорит на "хохдойч", ИИ полагал, что они могут быть врачами или называл иные профессии, для которых обязательно высшее образование. "ИИ обучается на текстах из интернета, которые отражают общественные предрассудки, таким образом языковые модели воспроизводят и утверждают эти стереотипы мышления", - поясняет Каролин Хольтерманн из Гамбургского университета. Она обращает внимание, что в англоязычные системы ИИ встроен "предохранитель" против дискриминации по языковым признакам - в отличие от немецких.

По словам исследователя диалектов из университета Тюбингена Хуберта Клаусмана, существуют три основных шаблона: право на существование имеет только нормативный язык; он должен быть единообразный; на таком языке будут говорить повсеместно. "Все три неверны", - подчеркивает Хуберт, указывая, что такие воззрения распространились в Германии сравнительно поздно - после 1960-х. В результате носители диалектов чаще получают плохие оценки в школе, у них меньше шансов при поиске вакансий, они хуже зарабатывают. Ученый уверен: нельзя лишать человека права говорить на своем диалекте, это важная часть культурной идентичности.

@dwrussian