Инженер данных от KARPOV.COURSES

В начале было непросто: много новых терминов и инструментов. Первые модули по проектированию DWH показались сложными — методологии путались. Со временем стало понятнее, когда что применять. Практика с Spark, Airflow, MLflow, Hadoop, Hive, HBase, Kafka, PostgreSQL, Greenplum, Kubernetes, Tableau, DataLens, SuperSet, DVC, Deequ помогла разобраться и понять, как использовать их в реальных проектах. В итоге получил системное понимание инженерии данных, практические навыки и уверенность в решении задач. Курс подходит тем, кто готов разбираться и практиковаться. Если хотите системно освоить инженерию данных - рекомендую.

Несмотря на то что у меня уже был определённый опыт, некоторые вещи стали реальным открытием. Например, что помимо классических нормальных форм существуют методологии Data Vault и Anchor Modelling до курса даже не знал о них. Наконец-то стало понятно, что из себя на практике представляет Big Data. Попробовал кучу инструментов. Впервые поработал с GitLab - намучился с конфликтами слияния. Поработал с Airflow: здесь, честно, хотелось бы больше уроков. Финальный проект сделал относительно легко, но застрял на модуле «Облачное хранилище». Главное для меня - действительно много практики. Нужно было реально выделять время, чтобы всё пройти и понять материал. Если возникали вопросы, поддержка реагировала оперативно. В общем, не скажу, что после курса стал полноценным инженером данных, но появилось ощущение уверенности: теперь понимаю, что если сесть и подумать (или погуглить) - в принципе справлюсь с любой задачей.

Структура курса продумана блестяще. От проектирования DWH и основ MPP СУБД до автоматизации ETL, работы с Big Data и облачными хранилищами - рассмотрены ключевые аспекты работы инженера данных. Проект «построить сквозной процесс от Data Lake на pySpark до хранилища на S3 и Greenplum, связав всё в DAG Airflow» - реальная задача, которую ждешь от качественного курса. Выполняя его, с головой погружаешься в рабочие процессы, а поддержка команды наставников не позволяет опустить руки.