Geekfactor Geekfactor

Практический курс по Big Data

Самый быстрый способ прокачать свои навыки для IT-специалистов.

Python
SQL
Apache Kafka

Подробнее о курсе

Как эффективно обрабатывать большие данные: HDFS, MapReduce и Hive, Spark от RDD до оптимизации, Kafka и Structured Streaming, Cassandra и Data Layout. Практика на реальном Hadoop-кластере.

Курс учит эффективно обрабатывать большие данные. Практические задания выполняются на реальном кластере: Hadoop-кластер в многопользовательском режиме настраивает команда школы. Три части: HDFS, MapReduce и Hive; Spark: from zero to hero; потоковая обработка, NoSQL и Data Layout. Python используется в Spark Python API и Hadoop Streaming.

Кому подойдёт

Разработчикам, которые хотят освоить Hadoop, MapReduce, Hive, Spark, Kafka и Cassandra.

Data Engineers, которым нужно понимать, какую технологию и когда применять.

Аналитикам, которые хотят работать с большими массивами данных, SQL и NoSQL.

Data Scientists, которым нужны навыки сбора, хранения и подготовки данных и масштабирования ML-моделей.

Нужно владеть базой Python, Linux и SQL; опыт с Jupyter и pandas/NumPy желателен.

Результаты обучения

Что вы сделаете на курсе

Распределённые файловые системы и экосистема Hadoop

Оптимизация MapReduce и работа с Hive

Spark: от RDD и DataFrames до оптимизации

Потоковая обработка

Kafka и Spark Structured Streaming.

NoSQL на больших данных

Cassandra и интеграция Spark с Cassandra.

Data Layout

Борьба с data skew, сжатие, горячие и холодные данные, форматы ORC, Parquet и Avro.

Программа Курса

10 занятий и 10 домашних заданий: 30 часов лекций и семинаров и 50 часов самостоятельной работы. Онлайн-формат — живые занятия в Zoom раз в неделю по 3 часа с записью; есть МООК (предзаписанные видео, гибкий график) и смешанный формат.

Менторы на связи три раза в неделю по вечерам, общение — в Telegram, Slack или Discord. Рекомендуемая нагрузка — 8–12 часов в неделю.

FAQ

Можно ли совмещать с работой?

Да: занятия раз в неделю, записи доступны. Рекомендуем 8–12 часов в неделю.

Гарантируете ли трудоустройство?

Нет, школа даёт актуальные знания и навыки, но не гарантирует трудоустройство.

Чем «Онлайн» отличается от «МООК»?

Онлайн — живые занятия по 3 часа в Zoom. МООК — гибкий график, но больше самоорганизации и меньше живого общения.

Есть ли рассрочка?

Да, по запросу на study@bigdatateam.org.

Что нужно знать?

Python, основы Linux и SQL. Школа поможет с материалами для подготовки.

Запись

Оставить заявку