logo

BigData Team

Big Data / Machine Learning Engineer

756 000 ₸
Выделено 41 Квот

Цель курса: подготовить специалистов к профессии Big Data Engineer (BDE) или Machine Learning Engineer (MLE), научить писать чистый и поддерживаемый код, научить применять фундаментальные знания при выборе технологий для решения продуктовых задач. Специалисты BDE научатся работать с фреймворками обработки больших массивов информации (Big Data) и будут понимать принципы анализа данных, а специалисты MLE будут иметь практический опыт решения задач классификации, регрессии и кластеризации, уметь работать с фреймворками машинного обучения и понимать идеологию работы с Big Data. Курс состоит из трех частей: 1. Python для работы с большими данными и анализа данных: 10+ модулей для освоения базы (“Pythonic” разработка, основы настройки окружения, основы анализа данных, база по алгоритмам и структурам данных, нотация Big-O); 2. Промышленная разработка на Python: 9 недель на изучение работы с тестированием, деплоем и работой над качеством кода; 3. В зависимости от направления (одинаковая академическая нагрузка): (для специалистов BDE) Практический курс по Big Data: 10 недель практики работы с HDFS, YARN, MapReduce, Hive, Spark RDD/DataFrame/SQL, Kafka, Spark Structured Streaming, Cassandra/NoSQL, Data Layout (Parquet, ORC, ...). (для специалистов MLE) Практический курс по Machine Learning: 10 недель практики решения задач классификации и регрессии (линейные и нелинейные модели, SVM, random forest и boosting), погружение в работу с нейронными сетями (Deep Learning) и обучения без учителя (Unsupervised Learning). Ссылка на входное тестирование: https://forms.gle/AxXNcRhRaR6pvKEr7

Особые условия

штрафы: 1. в случае отчисления в период обучения: (pro-rated) штраф в размере пройденной части обучения 2. за несоблюдение сроков сдачи отчетности по грантам (симметричное требование между Astana Hub и IT-школами) 3. штраф в размере полной стоимости гранта в случае неуспешной сдачи итогового тестирования (и других подобных оценочных и квалификационных процедур, выставляемых со стороны грантодателей Tech Orda, Astana Hub)

Детали курса

Уровень

Для продвинутых

Формат обучения

Онлайн

Старт

Сентябрь

Вступительные экзамены

Нет

Длительность, в неделях

28

Длительность в академических часах

291

Язык обучения

Русский

Дни проведений занятий

пн-пт

Методика обучения

Практики больше, чем теории

Квалификация

Big Data Engineeer (BDE) или Machine Learning Engineer (MLE) также применимо для: Data Engineer, (Big) Data Analyst, (Big) Data Scientist, Software Development Engineer

Формат проведения занятий

1. МООК + office hours (3 раза в неделю по 3 часа) 2. онлайн (3-4-х часовые занятия раз в неделю + поддержка в чате)

Навыки


Научатся: писать чистый и поддерживаемый код применять фундаментальные знания по Computer Science, Big Data и Machine learning при выборе технологий для решения продуктовых задач

Получат практический опыт работы с: анализом данных на Python промышленной разработкой на Python (pytest, argparse, unicode, encodings, logging, YAML, Mock, Web, Design Patterns, monitoring, deployment)

BDE: Big Data (HDFS, YARN, MapReduce, Hive, Spark RDD/DataFrame/SQL, Kafka, Spark Structured Streaming, Cassandra/NoSQL, Data Layout (Parquet, ORC))

MLE: Machine Learning (numpy, pandas, scikit-learn, метрики качества, деревья и ансамбли (Random Forest, boosting), нейронные сети (NN, DNN, CNN, RNN, Transformers, LLM), Unsupervised Learning и Dimensionality Reduction)

Частые вопросы

Похожие курсы