Розробники Південно-Східної Азії прагнуть демократизувати Штучний Інтелект, створюючи мовні моделі, які краще відображають мови, світогляди та цінності регіону. Монголією мов безпосередньо пов’язані політичні проблеми в регіоні, що характеризується багатокультурною різноманітністю. Чи можуть локалізовані великі мовні моделі зберегти та відобразити нюанси цього регіону?
Розвиток локалізованих мовних моделей в Південно-Східній Азії
У 2023 році з’явились нові моделі, як-от SEA-LION від AI Singapore та SeaLLM від Alibaba DAMO Academy. Обидві ініціативи пропонують підтримку регіональних мов, таких як бірманська, індонезійська, малайська, тайська, в’єтнамська, а також англійської та китайської.
Виклики локалізації мовних моделей
Моделі, розроблені для підходів низько ресурсних мов, стикаються з труднощами. За даними деяких досліджень, 88% мов у світі недостатньо представлені в інтернеті. Це створює серйозні труднощі для точного відображення мовних нюансів та культурного контексту регіону.
Політичні та соціокультурні аспекти мовної ідентичності
Мова не лише засіб комунікації, але й важливий маркер ідентичності, що кодує культурні цінності, традиції та світогляд. У Південно-Східній Азії безліч мов та діалектів викликають потребу в чутливому та відповідальному підході до їхньої локалізації.
Можливості та виклики системи
Дослідження показують, що існує реальна мотивація серед AI-інженерів Південно-Східної Азії для виправлення нестачі представлення мов та світоглядів регіону в західних мовних моделях. Проте існують значні перешкоди, такі як недостатній обмін ідеями між технічними та нетехнічними спільнотами.
Заключні рекомендації
Розробники, практики, академічні кола та громадськість повинні тісно співпрацювати для кращого розуміння та відображення лінгвістичних особливостей Південно-Східної Азії у мовних моделях.
Важливо, щоб ці локалізовані мовні моделі не тільки задовольняли комерційні потреби, але й звучали в унісон з культурними наративами та ідентичністю регіону. Це надасть Південно-Східній Азії більше агентності у світі технологій.
