Чему вы научитесь
- Понимание архитектуры Hadoop
- Понимание форматов файлов и возможность выбрать правильный формат для данного варианта использования
- Разрабатывайте приложения в локальной системе, а затем развертывайте их в рабочей среде.
- Параметризируйте код и подготовьте его к работе
- Импорт данных из базы данных mysql в sqoop. Экспорт данных из hdfs в mysql. Получите глубокое понимание sqoop
- Эффективно запрашивайте и анализируйте данные с помощью Hive. Получить четкое представление об улье
- Изучайте Scala — один из лучших языков программирования
- Изучите базовые, промежуточные и продвинутые концепции Spark, которые очень популярны на рынке.
- Работайте со сложными данными и научитесь эффективно их обрабатывать
- Изучите Cassandra и интегрируйте ее со Spark
- Изучите HBase и интегрируйте его со Spark
- Изучите Apache NIFI
- Работа с Spark Streaming — узнайте о Kafka и о том, как он интегрируется со Spark.
- Получите хорошее представление о сквозном конвейере больших данных
Требования
- У вас должно быть хорошее подключение к интернету. Должно быть 6 ГБ свободной оперативной памяти. Этот курс будет работать с 4 ГБ свободной оперативной памяти, но приложения могут работать медленно. Поэтому рекомендуется иметь не менее 6 ГБ свободной оперативной памяти. Жесткий диск SSD увеличит скорость. Если возможно (не обязательно), используйте жесткий диск SSD вместо жесткого диска.
- Базовое знакомство с командами Linux будет полезно
Описание
Разработчики больших данных пользуются большим спросом, и он будет только расти по мере роста объемов данных. Однако овладение навыками, необходимыми для того, чтобы стать инженером по большим данным, может оказаться непосильной задачей. Вот почему мы создали «Курс для разработчиков больших данных» с помощью отраслевых экспертов. Наш курс обеспечивает сквозную реализацию наиболее востребованных навыков работы с большими данными, включая Hadoop, Spark, Kafka, Cassandra и другие. Благодаря 33 часам практического обучения вы начнете с основ и постепенно перейдете к развертыванию на рабочем уровне, устранению неполадок и повышению производительности. Мы охватываем все, от локальной разработки до интеграции со сложными источниками данных, такими как базы данных NOSQL, и даже потоковые данные. Наша команда готова ответить на любые ваши вопросы, а все наши видеоуроки объясняются примерами. К концу этого курса вы станете экспертом по большим данным, готовым взяться за любую работу в отрасли. Не упустите возможность присоединиться к миру больших данных!
Вот краткое описание того, чему вы научитесь на этом курсе:
Познайте мир больших данных. Что такое большие данные и почему это важно
Поймите и изучите концепции, лежащие в основе Hadoop. Понять его архитектуру
Установите программное обеспечение и начните писать код
Изучите важные команды Hadoop
Изучите форматы файлов и поймите, когда использовать каждый из форматов файлов.
Погрузитесь в Sqoop — инструмент, используемый для передачи данных между СУБД и HDFS.
Погрузитесь в Hive — инструмент, используемый для запроса данных в HDFS.
Изучайте Scala — топовый язык программирования
Погрузитесь в Spark, который очень популярен на рынке
Изучите базы данных NOSQL — Cassandra и HBase и интегрируйте их со Spark
Работайте со сложными данными и эффективно их обрабатывайте
Подготовьте производство кода и разверните его в кластере.
Изучите Apache NIFI — мощный и масштабируемый инструмент с открытым исходным кодом для маршрутизации данных.
Работа с потоковыми данными
Изучите Kafka и интегрируйте его со Spark
Изучите методы устранения неполадок и советы по повышению производительности
Для кого этот курс:
- Новички, которые совершенно не знакомы с миром больших данных
- Инженеры-программисты, которые хотят перейти на большие данные или улучшить свои навыки работы с большими данными
- Менеджеры, аналитики данных, которые хотят понять сквозной конвейер больших данных
Язык курса: Английский
Последнее редактирование модератором:
- Статус
- В этой теме нельзя размещать новые ответы.