-
17:15
-
16:30
-
15:44
-
15:00
-
14:15
-
13:39
-
13:15
-
13:00
-
12:15
-
11:30
-
11:07
-
10:43
-
10:00
-
09:15
-
08:58
-
08:29
-
08:09
-
07:45
Следите за нами в Facebook
GemMaroc: Марокканская революция: интеграция языка дарижа в искусственный интеллект
Марокко только что сделало важный шаг вперед в мире языковых технологий, запустив GemMaroc – новаторское исследование под названием «Раскрытие уровня владения языком дарижа в магистратуре с минимальным объемом данных», которое исследует способность языковых моделей понимать и воспроизводить дарижа, марокканский диалект.
Эта инициатива, возглавляемая группой марокканских исследователей, специализирующихся на искусственном интеллекте и лингвистике, знаменует собой настоящую революцию в интеграции местных языков в цифровые системы. GemMaroc – это не просто научный проект, а акт технологической эмансипации на фоне глобального языкового доминирования в сфере искусственного интеллекта.
Результаты этого исследования впечатляют: всего за два дня обучения исследователям удалось разработать модель, способную понимать и воспроизводить дарижа с поразительной точностью, используя ограниченные ресурсы данных.
Используя небольшой корпус тщательно переведённых и отобранных предложений, команда наблюдала увеличение доли правильных ответов с 33% до более чем 47% без ущерба для эффективности модели на английском языке. Самая продвинутая модель, GemMaroc-27B, даже превзошла несколько международных моделей в тестах на понимание языка дарижа.
Исследование подчёркивает важный момент: успех модели зависит не от объёма данных, а от их качества и разнообразия. Исследователи отдавали предпочтение реальным сценариям и повседневным диалогам, отражающим марокканскую жизнь — устным инструкциям, популярным выражениям и культурным вопросам, — чтобы модель могла учитывать тонкости местного контекста.
Ещё одним важным нововведением стало создание «структурированного языка дарижа», призванного снизить «лингвистический шум», вызванный разнообразием региональных диалектов. Такой подход позволил искусственному интеллекту реагировать более согласованно и точно, проложив путь к разработке образовательных, административных и цифровых инструментов на языке дарижа.
Исследование также выявило фундаментальную проблему: отсутствие стандарта письма для языка дарижа, поскольку он преимущественно устный. Для решения этой проблемы команда использовала гибридный метод, сочетающий арабский и латинский алфавиты, чтобы отразить марокканскую языковую реальность в интернете и социальных сетях.
И наконец, для поддержания баланса навыков модели 20% обучающих текстов остались на английском языке, что гарантирует сохранение общих навыков системы в области математики, логического мышления и понимания контекста.
Благодаря GemMaroc Марокко утверждает себя в качестве пионера в области лингвистического внедрения искусственного интеллекта, доказывая, что передовые технологии могут адаптироваться к местному языку и превратить его в инструмент культурных и социальных инноваций. Этот проект знаменует собой новую эру, в которой дарижа наконец-то войдет в язык машин наравне с основными языками мира.