Скоро Data-инженер [2024] [Слёрм] [Николай Марков, Николай Акимов, Ася Гайламазян]

[VkurseBot]

Data-инженер [2024] [Слёрм] [Николай Марков, Николай Акимов, Ася Гайламазян]

На курсе вы:

• Научитесь строить дата-пайплайны и выстраивать эффективную работу дата-архитектуры
• Разберетесь в инструментах для управления данными
• Выполните реальный проект на собственных данных под руководством опытных экспертов

Какие инструменты освоите?
Python, AirFlow, Bash, NiFi, Hadoop, Kafka, Spark, Neo4j, PostgreSQL, MongoDBl, ClickHouse

Программа:
1. Введение.
2. Python и терминал для задач Data Engineering.
- Установочная сессия.
3. Распределенные файловые системы. Hadoop. Map-Reduce.
4. Spark for Data Engineering.
- Встреча по темам 2-4.
5. Реляционные базы данных.
6. NOSQL базы данных и введение в методологии построения хранилищ.
7. Процессинг и перекладывание (перекладка) данных.
8. Оркестраторы данных. AirFlow.
- Встреча по темам 5-8.
9. Шины данных. Kafka. Принципы построения систем потоковой аналитики.
10. ETL-инструменты. NiFi.
11. Архитектура хранилищ данных.
12. Аналитика. Жизненный цикл данных и оценка data quality.
- Встреча по темам 9-12.
13. Работа с собственным проектом в финальном модуле.
14. Заключение

Команда курса
◆ Николай Марков
Писал проекты на Python, а также Golang, C/C++, Scala и Rust
Работал с сетями, протоколами и различными облаками (AWS, GCP, Azure, OpenStack)
Занимаюсь профессиональной разработкой и проектированием уже больше 11 лет
Сейчас выстраиваю аналитические архитектуры и Data Governance в разных компаниях
◆ Николай Акимов
Инженер по внедрению в TaskData
В профессиональном IT уже более 20 лет
Активно участвует в Open Source проектах на Github, поддерживает сообщество NiFi
Начал свою карьеру в качестве системного администратора
◆ Ася Гайламазян
В разных ролях участвовала в крупнейшем проекте «Мегафона»
Работала в сферах телекоммуникаций, игровой индустрии, розничных и оптовых продаж в роли разработчика системного обеспечения
В профессиональном IT более 5 лет. Самостоятельно обучилась на разработчика

Цена: 80000р.