Автоматты аударма пайдаланылды

Қазан айы KazLLM жобасы бойынша жұмыс істейтін Sustainable Innovation and Technology Foundation мамандар тобы үшін нәтижелі болды

Қазан айында Sustainable  Innovation and Technology Foundation мамандар тобы бірнеше негізгі бағыттар бойынша айтарлықтай жұмыс көлемін аяқтады. Негізгі жетістіктер табиғи тілді өңдеу және жасанды интеллект, сондай-ақ KazLLM және Soyle сияқты қолданыстағы өнімдердің функционалдығын оңтайландыру және жаңарту салаларын қамтиды.

Команда қазақ тілінің емлесін тексере алатын KazLLM моделіне арналған оқу жинағын жасау үшін әртүрлі дереккөздерден мәліметтер жинауды аяқтады. Қазан айында деректер жиынтығының көлемі 409 586 135 токенге жетті, бұл модельдің дәлдігі мен мүмкіндіктерін одан әрі жақсарту үшін маңызды негіз болды.

Сонымен қатар, жаңа токенизаторды жетілдіру жұмыстары жүргізілді, бұл KazLLM моделін қазақша мәтінге тиімдірек үйретуге мүмкіндік берді. Вокодерді  10 спикерде оқыту  жалғасуда, аралық нәтижелер бар. Машиналық мәтінді аудару үлгісі қайта оқытылды, бұл BLEU метрикасын 2 ұпайдан астам жақсаруына әкелді. Сөйлеуді тану және аудару, сондай-ақ мәтінді аудару үшін көп тапсырмалы модельді оқыту жалғасуда. Бұл жұмыстар Soyle өнімінде  text-to-speech функционалында дауысты (ер немесе әйел) таңдау функциясын қосуға, сынақ режимінде төлем жүйесімен жұмысты біріктіруге және сұрауларды параллель өңдеу және жүктемені бөлу есебінен жауап беру жылдамдығын арттыруға мүмкіндік берді.

Команданың тағы бір бөлігі виртуалды аватарды жақсартумен айналысты. Виртуалды аватардың сыртқы түрі жақсартылды және пайдаланушылардың өзара әрекеттесуі үшін виртуалды мектеп кеңсесі қосылды, пайдаланушыларды сәйкестендіру үшін бет-әлпетті тану технологиясы енгізілді, сонымен қатар виртуалды аватар сұрауды өңдеуде жоғары дәлдікті және жақсартылған пайдаланушы тәжірибесін қамтамасыз ететін 70 миллиард параметрі бар KazLLM-нің жаңа нұсқасымен біріктірілді.

KazLLM дамыту жобасы аясындағы жұмыстарды іске асыру AstanaHub-тың ішінара қолдауымен мүмкін болғанын атап өткен жөн.

Пікірлер 5

Кіру пікір қалдыру үшін