Основы Hadoop

Этот тренинг дает представление об основах Apache™ Hadoop® и методах разработки приложений, обрабатывающих данные, на его основе. Участники познакомятся с HDFS – стандартом де факто для долговременного надежного хранения больших объемов данных, фреймворком MapReduce, автоматически управляющим параллельным выполнением приложений на кластере, и сопутствующими проектами, составляющими экосистему Hadoop®.
Курс: EAS-015
Длительность:24 ч.
Описание:
Этот тренинг дает представление об основах Apache™ Hadoop® и методах разработки приложений, обрабатывающих данные, на его основе. Участники познакомятся с HDFS – стандартом де факто для долговременного надежного хранения больших объемов данных, фреймворком MapReduce, автоматически управляющим параллельным выполнением приложений на кластере, и сопутствующими проектами, составляющими экосистему Hadoop®.



Цели:
  • понимать ключевые концепции и архитектуру Hadoop®;
  • уметь записывать и читать данные в/из HDFS;
  • разрабатывать программы для классического MapReduce и для YARN;
  • работать с данными в HDFS из MapReduce-программ;
  • получить представление об экосистеме, сложившейся вокруг Hadoop® и ее ключевых компонентах.
Разбираемые темы:
  • Основные концепции Hadoop®;
  • Установка и конфигурирование: локально и в облаке;
  • HDFS: Архитектура, репликация, чтение и запись данных;
  • Команды HDFS;
  • Структура классической MapReduce-программы;
  • Форматы данных для MapReduce;
  • Архитектура YARN;
  • Выполнение работ в классическом MapReduce и в YARN;
  • Распределенный кеш и счетчики;
  • Hadoop Streaming;
  • Экосистема и вендоры Hadoop®;
  • Введение в Pig™;
  • Введение в Hive;
  • Введение в Sqoop;
  • Введение в Flume;
  • Введение в Spark™;
  • Введение в Mahout™.

Целевая аудитория:
Разработчики, архитекторы, разработчики баз данных, администраторы баз данных.
Предварительная подготовка – общее:
Базовые навыки программирования на Java. Умение работать в командной оболочке Unix/Linux (bash). Опыт работы с базами данных желателен, но не обязателен.

Описание:


Сертификат:
По итогам обучения каждому слушателю выдается сертификат о прохождении курсов Luxoft Training. Слушатели онлайн курсов получают электронную версию сертификата (на указанный email) по запросу.
Рекомендуемые дополнительные материалы, источники:
Москва 35 300 р.
Санкт-Петербург 31 770 р.
Омск 26 480 р.
Киев 7 920 грн.
Одесса 7 100 грн.
Днепр 7 100 грн.
Ваш город (формат корпоративного обучения):По запросу


Данные цены не включают в себя стоимость обедов.

Участник тренинга
Для меня очень полезным было рассмотрение архитектуры технологий, относящихся к Hadoop; понимание плюсов и минусов использования Hadoop, областей применения данных технологий. Очень понравился стиль изложения материала, метод преподавания тренера, эмоциональные ударения, удержание внимания аудитории.
Участник тренинга
Отличный тренинг. Получил общее понимание Hadoop и приложений из его экосистемы. Узнал цели использования, плюсы, минусы и т.п. Основы Spark и его преимущества/недостатки по сравнению с Hadoop. Спасибо!
Участник тренинга
Отличный курс: комплексный подход к изложению: доступно, понятно, кратко, с примерами. Общий обзор продуктов, интересные реальные примеры. Особенно описание внутреннего устройства hdfs, Vanilla Hadoop, Apache Spark.
Участник тренинга
Знания по теме приведены в порядок. После курса стало понятно, что же все-таки скрывается за громким словом "Hadoop". Однозначно после курса можно сделать вывод о применении Hadoop для решения прикладной задачи.
Участник тренинга
Очень хорошее погружение в инструмент. Достаточно глубоко и широко, особенно для первого знакомства. Рекомендую этот тренинг для тех, что хочет начать изучение Hadoop. Отличный старт.
Участник тренинга
Отличное преподнесение информации, очень подробно и доходчиво. Отдельно порадовала практическая часть, возможность самостоятельно не только ознакомиться, но и "потрогать руками" технологию.

Записаться на курс





Хотите узнать больше?

По всем вопросам, в том числе для регистрации на курсы, обращайтесь по адресу education@luxoft.com

Вернуться к каталогу
Раcписание курса в
Москвe
  • Москве
  • Санкт-Петербурге
  • Омске
  • Киеве
  • Днепре
  • Одессе
  • Минске
30.08.2017 - 01.09.2017
Тренер:
Слободянюк  Владимир
Слободянюк Владимир
Специалист в области хранилищ данных и интеграционных проектов
Подробнее
Локация:
Москва
Время:
10:00-18:00
Длительность:
24 ч.
35 300 р.

30.08.2017 - 01.09.2017

27.06.2017 - 29.06.2017
Тренер:
Слободянюк  Владимир
Слободянюк Владимир
Специалист в области хранилищ данных и интеграционных проектов
Подробнее
Локация:
Омск
Время:
10:00-18:00
Длительность:
24 ч.
В корзину
26 480 р.

27.06.2017 - 29.06.2017

07.08.2017 - 11.08.2017
Тренер:
Слободянюк  Владимир
Слободянюк Владимир
Специалист в области хранилищ данных и интеграционных проектов
Подробнее
Локация:
Одесса
Время:
10:00-15:00
11.08.2017 10:00-14:00
Длительность:
24 ч.
В корзину
7 100 грн.

07.08.2017 - 11.08.2017

Запланированных дат
в расписании нет
Не подходят даты или время?
Предложите свой вариант
Блоги
Павел Новиков
15.06.2017 08:43:19
Agile Life Planning: Agile для управления личными целями
Где может быть полезным Agile?
Agile - это не только модное слово и даже не только принципы разработки ПО. На мой взгляд, гибкие методологии разработки помимо прочего также предоставляют широкий на...
Манифест Agile-тестировщика. Часть 2
Итак продолжим разбираться с "Манифестом тестировщика", который составили Саманта Лэинг и Карен Гривз.
Следующий принцип:
We value building the best system over breaking the system.
Мы больше ценим...
Павел Новиков
16.05.2017 11:46:21
Участники и «заказчики» процесса тестирования
В данной статье предлагаю рассмотреть, кто является стэйкхолдерами и потребителями сервиса тестирования. Для этого необходимо ответить на следующие вопросы:
Читать больше
Luxoft Training предлагает Вам пройти обучение по курсу «Основы Hadoop». Другие курсы по теме «Архитектура, дизайн и управление базами данных» Вы можете найти в нашем каталоге курсов.
Заказазать корпоративное обучение
для команды
ФИО
Город
Компания
Должность
Email
Телефон
Сообщение


Отмена