Senior Data Software Engineer

Қысқаша сипаттама

Біз дерекке негізделген архитектурамызды құруға және жетілдіруге көмектесетін Senior Data Software Engineer іздейміз.

Сіздің міндеттеріңіздің қатарында бизнес-мәселелерін шешетін деректер өнімдерін әзірлеу, сондай-ақ DataHub жұмысын қамтамасыз ететін бұлттық платформалық шешімдерді жасау жатады. Деректер инженериясының болашағын қалыптастыруға деген құштарлығыңыз бар болса және жаңашылдық пен командалық жұмыс негізіндегі ортада өсуге мүмкіндігіңіз болса, біз сізді командаға қосылуға шақырамыз.

Міндеттері

Деректер конвейерлерін жобалау және енгізу.
Жаңа платформаға қолданыстағы дерек көздерін біріктіру үшін деректерді жүктеу процестерін ұйымдастыру.
Платформаны әзірлеуге қатысу, оның ішінде архитектураны қолдауға арналған бұлттық шешімдерді (деректерді қабылдау фреймворктары, платформа оркестраторлары және зерттеу орталары сияқты) жасау.
Қолданыстағы ML-конвейерлерді қолдау үшін іске дайын бұлттық шешімдерді әзірлеу бойынша MLOps саласындағы тапсырмаларды орындау.
Жергілікті инфрақұрылымды бұлтқа көшіру жоспарлауына қатысу.

Талаптар

Java, Python немесе Scala тілінде жұмыс жасау тәжірибесі.
SQL тілін еркін меңгеру.
Big Data-дың типтік мәселелерін (параллельді өңдеу, жүктемені теңгеру, деректердің жерге байланыстылығы, ағындық деректер тасымалы және т.б.) түсіну және сәйкес технологиялармен (Apache Spark, Kafka, NoSQL-деректер қорлары) таныс болу.
Деректерді модельдеу принциптерін (реляциялық/өлшемді модельдеу, SCD) және "snowflaking" білу.
Негізгі бұлттық провайдерлердің бірінде (Azure, AWS немесе GCP) шешімдерді іске асырудың практикалық тәжірибесі.
Ағылшын тілі деңгейі кемінде B2 (ауызекі және жазбаша).

Байланыс ақпараты

Товарищество с ограниченной ответственностью EPAM Solutions

Astana Hub қатысушысы