logo

BigData Team

Big Data / Machine Learning Engineer

756 000 ₸
Бөлінді 41 Квот

Курс туралы

Толығырақ BigData Team

Курстың мақсаты: мамандарды Big Data Engineer (BDE) немесе Machine Learning Engineer (MLE) мамандығына дайындау, таза және қолдау көрсетілетін кодты жазуды үйрету, өнім мәселелерін шешу үшін технологияларды таңдауда іргелі білімді қолдануға үйрету. BDE мамандары ақпараттың үлкен массивтерін өңдеу шеңберлерімен (Big Data) жұмыс істеуді үйренеді және деректерді талдау принциптерін түсінеді, ал MLE мамандары жіктеу, регрессия және кластерлеу мәселелерін шешуде практикалық тәжірибеге ие болады, Машиналық оқыту шеңберлерімен жұмыс істей алады және Big Data-мен жұмыс істеу идеологиясын түсінеді.Курс үш бөлімнен тұрады:1. Үлкен деректермен жұмыс істеуге және деректерді талдауға арналған Python: базаны игеруге арналған 10 + модуль ("Pythonic" әзірлеу, қоршаған ортаны баптау негіздері, деректерді талдау негіздері, алгоритмдер мен деректер құрылымдары бойынша база, Big-O белгісі);2. Python-дағы өнеркәсіптік даму: тестілеу, деплой және Код сапасымен жұмыс істеуді үйренуге 9 апта; 3. Бағытқа байланысты (бірдей академиялық жүктеме): (BDE мамандары үшін) Big Data бойынша практикалық курс: HDFS, YARN, MapReduce, Hive, Spark RDD/DataFrame/SQL, Kafka, Spark Structured Streaming, Cassandra/NoSQL, data Layout (Parquet, ORC, ...).(mle мамандары үшін) Machine Learning бойынша практикалық курс: жіктеу және регрессия мәселелерін шешудің 10 апталық тәжірибесі (сызықтық және сызықтық емес модельдер, SVM, кездейсоқ орман және күшейту), нейрондық желілермен жұмыс істеу (терең оқыту) және мұғалімсіз оқыту (Unsupervised Learning).Кіру тестілеуіне сілтеме: https://forms.gle/AxXNcRhRaR6pvKEr7

Ерекше шарттар

айыппұлдар: 1. оқу кезеңінде оқудан шығарылған жағдайда: (Pro-rated) оқудың өткен бөлігі мөлшерінде айыппұл 2. гранттар бойынша есептілікті тапсыру мерзімдерін сақтамағаны үшін (Astana Hub және IT-мектептер арасындағы симметриялық талап) 3. қорытынды тестілеуді (және tech Orda, Astana Hub грант берушілері тарапынан қойылатын басқа да осындай бағалау және біліктілік рәсімдерін) сәтсіз тапсырған жағдайда гранттың толық құны мөлшерінде айыппұл

Курстың егжей-тегжейлері

Деңгей

Жетілдірілгендер үшін

Оқыту форматы

Желіде

Старт

Қыркүйек

Қабылдау емтихандары

Жоқ

Ұзақтығы, апталарда

28

Академиялық сағаттардағы ұзақтығы

291

Оқыту тілі

Орысша

Сабақтарды өткізу күндері

дүйсенбі-жұма

Оқыту әдістемесі

Практика теориялардан гөрі көп

Біліктілік

Big Data Engineeer (BDE) немесе Machine Learning Engineer (MLE)мыналарға да қолданылады: data Engineer, (Big) data Analyst, (Big) data Scientist, Software Development Engineer

Сабақтарды өткізу форматы

1. MOOC + office hours (аптасына 3 рет 3 сағат) 2. онлайн (аптасына бір рет 3-4 сағаттық сабақтар + чатты қолдау)

Дағдылар


Олар мыналарды үйренеді: таза және қолдау көрсетілетін кодты жазу Өнім мәселелерін шешу үшін технологияларды таңдау кезінде информатика, үлкен деректер және машиналық оқыту бойынша іргелі білімдерді қолдану

Python өнеркәсіптік Python-да деректер талдауы бойынша практикалық тәжірибе алу. әзірлеу (pytest, argparse, юникод, кодтаулар, журнал жүргізу, YAML, Mock, Web, дизайн үлгілері, мониторинг, орналастыру)

BDE: Үлкен деректер (HDFS, YARN, MapReduce, Hive, Spark RDD/DataFrame/SQL, Kafka , Spark Structured Streaming, Cassandra/NoSQL, Data Layout (Parquet, ORC))

MLE: Machine Learning (numpy, pandas, scikit-learn, сапа метрикасы, ағаштар мен ансамбльдер (Random Forest, күшейту), нейрондық желілер (NN, DNN, CNN, RNN, Transformers, LLM), бақылаусыз оқыту және өлшемді азайту)

Жиі қойылатын сұрақтар

Ұқсас курстар