Детальна програма курсу
1.Введение
- Обзор технологий Больших Данных. Четыре характеристики Больших Данных и бизнес-значение. Примеры реализации.
- Понимание интеграционного решения Oracle для Больших Данных
- Понимание фаз Больших Данных. Интеграционный процесс Больших Данных.
2.Использование Oracle Big Data Appliance
- Обзор BDA.
- Сопровождение аппаратных компонентов.
- Обзор of the Software Components.
- Сетевые механизмы. Конфигурационные механизмы.
- Инсталяционные указания.
- Ограничения в использовании.
3.Опции захвата данных в BDA
- Обзор Oracle NoSQL базы данных.
- Обзор структуры Hadoop.
- Понимание HDFS.
- NoSQL против HDFS.
- Сценарии использования в реальном времени.
4.Использование распределенной файловой системы Hadoop (HDFS)
- Определение HDFS.
- Компоненты. Архитектура.
- Список достоинств.
- Запуск тестового приложения для добавления лог-файлов в HDFS.
5.Использование Flume in HDFS
- Определение Flume.
- Понимание потоков данных во Flume
- Конфигурация Flume.
- Преимущества использования Flume.
- Запуск тестового приложения.
6.Использование Oracle NoSQL Базы Данных
- Определение Oracle NoSQL базы данных.
- Компоненты. Архитектура.
- Определение KVStore и KVLite.
- Список достоинств.
- Использование Hive
- Обзор Hive. Вызов Hive.
- Создание базы данных
- Hive и таблиц.
- Работа с данными в Hive.
- Создание секционированной таблицы для анализа лог-файлов.
7.Использование Oracle Big Data Коннекторов
- Введение в Oracle Big Data коннекторы.
- Соединение Oracle Exadata с BDA.
- Процесс MapReduce.
- Пример решения проблемы с подсчетом слов в файле при помощи MapReduce.
8.Использование Oracle Loader для Hadoop
- Архитектура OLH.
- Установка OLH.
- Моды OLH.
- Загрузка из различных входных источников - различные форматы OLH.
- Балансировка нагрузки при загрузке в секционированные таблицы.
- Пример загрузки данных при помощи OLH.
9.Использование Oracle Sql Коннектора для HDFS
- Установка OSCH в кластер
- Hadoop и на машину с базой данных Oracle.
- Роль внешних таблиц в OSCH и их создание.
- Сравнение производительности коннекторов.
- Загрузка данных в базу при помощи OSCH.
- Пример доступа к данным из HDFS при помощи внешних таблиц.
10.Использование Адаптера ODI для Hadoop (ODIAAH)
- Обзор of ODI.
- Архитектура ODI и агенты.
- Модули знаний ODI.
- Установка топологии.
- Reverse Engineering таблиц Hive.
- Пример трансформации данных внутри
- Hadoop с помощью ODIAAH.
11.Использование Oracle R Коннектора для Hadoop (ORCH)
- Пример доступа к данным из HDFS при помощи внешних таблиц.
- Список пакетов ORCH.
- Архитектурные компоненты.
- Установление соединения между HDFS и базой данных Oracle.
- пример R программы с использованием ORCH.
12.Использование In-Database Analytics
- Обзор Oracle In-Database MapReduce.
- Обзор Oracle In-Database Analytics.
13.Использование Oracle Big Data Iинтеграционных опций
- Архитектура и компоненты Oracle Big Data Solution.
- Соединение Oracle exalytics с BDA.
- Интеграция результатов BDA с OBIEE.
14.Изучение примеров использования Big Data
- Использование Big Data в промышленности.
- Финансовые сервисы.
- Страховые сервисы.
- Сектор обслуживания.
- Телекоммуникации.
- Розничная торговля.