Решение задачи QA для низкоресурсных языков тюркской языковой группы : магистерская диссертация

Abstract

The purpose of the work is to conduct a comprehensive study of the solution of the QA task for low-resource languages using the example of the Kazakh and Uzbek languages, creating models and datasets in the corresponding languages, using machine translation of datasets from high-resource languages using special markers. The hypothesis of the importance of proximity of languages in choosing the source language for translation is also being investigated. QA models have been created that demonstrate better results for the Kazakh and Uzbek languages than all other publicly available models.

Цель работы состоит в том, чтобы провести комплексное исследование решения задачи QA для низкоресурсных языков в виде казахского и узбекского языка, создав модели и датасеты на соответствующих языках, при помощи машинного перевода датасетов на высокоресурсных языках с использованием специальных маркеров. Также исследуется гипотеза о важности близости языков при выборе языка источника для перевода. Созданы QA-модели, демонстрирующие лучшие результаты для казахского и узбекского языков, чем все другие публично доступные модели.