Тапсырыс беруші
Шешімдерді қабылдау мерзімі

22.01.26 (қоса алғанда)

Марапаттау нысаны

Жеке талқыланады

Өнім күйі

MVP

Тапсырма түрі

Акт міндеттері

Сфера применения

Медиасфера

Область задачи

Көлік және логистикадағы технологиялар

Тапсырманың (жобаның) мақсаты мен сипаттамасы

Жобаның мақсаты-мобильді спорттық қосымшада компьютерлік көрудің (pose estimation) тегін үлгілері негізінде пайдаланушы жүктеген Бейне бойынша жаттығуларды орындау техникасын Автоматты талдау функциясын іске асыру. Бірінші кезеңде екі негізгі жаттығу қарастырылады: * көлденең жолақтағы тартулар; * еденнен итеру. Жүйе керек: * пайдаланушыдан бейнелерді қабылдау (портрет / пейзаж, бүйірлік түсірілім); * бейнеде адамды және оның тірек снарядын (көлденең жолақ, еден)автоматты түрде табыңыз; * қаңқа моделін шығарыңыз (кадрлар бойынша бірлескен координаттар); * техниканың негізгі биомеханикалық көрсеткіштерін есептеу; * типтік қателер мен орындалу сапасының деңгейін анықтаңыз; * пайдаланушыға қысқаша баға (скор/балл) және 2-4 жеке ұсыныстар беріңіз. Іске асыру үшін қол жетімді ақысыз позаны бағалау шешімдері қолданылады: * MediaPipe Pose / BlazePose (Google, 33 негізгі қаңқа нүктелері үшін тегін үлгі); * Бейне және негізгі өңдеу үшін OpenCV; • Python/Node.артқы өңдеуге арналған js; * қажет болса-оңтайландыру үшін ONNX Runtime / TensorFlow Lite.

Өнім түрі

Мобильді қосымша

Мәселенің сипаттамасы

Пайдаланушылар техниканы бұза отырып, негізгі жаттығуларды жаппай орындайды: * жаттығу әсерін азайтады; * шамадан тыс жүктеме мен жарақат алу қаупін арттырады; * демотивация (прогресстің баяулауы, ауырсыну, нәтижелердің өсуінің болмауы). Қолданбадағы ағымдағы жағдай: * белсенділікті бақылау бар(жиынтық / қайталау есептегіші, қолмен енгізу); * Бейне бойынша техниканы сапалы талдау жоқ; * пайдаланушы әр қайталаудың сапасы туралы объективті кері байланыс алмайды. Техникалық шектеулер мен қоңыраулар: 1. Бейне сапасы және түсіру шарттары o әр түрлі түсіру бұрыштары ( ¾ , бүйірлік, фронтальды); o әр түрлі жарық жағдайлары; o фон және Шу (басқа адамдар, заттар). 2. Құрылғыдағы шектеулі есептеу ресурстары o Барлық құрылғылар нақты уақыт режимінде ауыр модельдерді тарта бермейді; o клиентте де (онлайн-талдау) де, серверде де (жүктелген бейне бойынша batch-талдау) орындау мүмкіндігін қамтамасыз ету қажет. 3. Тек тегін модельдерді/кітапханаларды пайдалануды шектеу o ақылы API-ді қолдануға болмайды (мысалы, motion capture үшін коммерциялық SDK); o opensors / тегін шешімдерге сүйену керек: MediaPipe, OpenCV, PyTorch/TF, ONNX. 4. Техниканы сандық ережелерге рәсімдеу o тартулар мен итерулердің "дұрыстығын" метрика жиынтығына рәсімдеу қажет: бұрыштар, амплитудасы, синхрондылығы; o жүйе қайталауды "сапасыз" немесе "ішінара есептелген"деп санауы керек ауытқу шектерін анықтаңыз.

Tech-тапсырма
Күтілетін әсер

Күтілетін пайдаланушы әсерлері: * Қатысуды арттыру: o геймификация (әр тәсілдің сапасын бағалау, техника бойынша прогресс); o қолданбадағы "жеке жаттықтырушы" сезімі. * Техникадағы қателіктер мен ыңғайсыздық/ауырсыну шағымдарын азайту. * Оқу процесіне субъективті қанағаттануды жақсарту. Күтілетін өнім бизнес әсерлері: * Технологияны талдаудың пайдалы функциясы арқылы retention (D7, D30) өсуі. * Қолданба уақытын және пайдаланушылардың қайтару жиілігін арттыру. * Монетизация мүмкіндігі: o ақылы жазылымдағы кеңейтілген техникалық есептер; o орындау сапасына негізделген жеке жаттығу жоспарлары. Күтілетін технологиялық әсерлер: * Кейінгі оқытылатын модель үшін нақты пайдаланушы қозғалыстарының деректер жиынтығын жинақтау. * Басқа жаттығуларға (скват, Планк, стендтік пресс және т.б.) масштабтауға болатын ішкі позаны талдау платформасы.

Жауапты тұлғаның ТАӘ

Искендеров Ербол

Ескерту