Technologies of work with big data

2024/2025

Academic Year

RUS

Instruction in Russian

6

ECTS credits

Delivered at:

Department of Applied Mathematics and Informatics (Faculty of Informatics, Mathematics, and Computer Science (HSE Nizhny Novgorod))

Course type:

Compulsory course

When:

1 year, 3, 4 module

Instructor

Максимов Антон Сергеевич

Программа дисциплины

Аннотация

Изучение данной дисциплины базируется на следующих дисциплинах: • Дискретная математика • Теория вероятности • Исследование операций. В результате освоения дисциплины студент должен: • Знать основные характеристики больших данных, знать основные технологии, применяемые для хранения и поиска в больших данных. • Уметь применять методы анализа больших данных, уметь реализовывать приложения для аналитики больших данных

Цель освоения дисциплины

• Ознакомление с основными технологиями решения задач обработки больших по объему, быстро изменяющихся и плохо структурированных данных, объединяемых термином «большие данные»

Планируемые результаты обучения

• Знать архитектуру платформ работы с большими данными Hadoop, Spark, SparkX, Neo4J и уметь разрабатывать приложения на этих платформах
• Знать определения в области больших данных. Международные стандарты
• Ознакомиться с типовыми решениями в прикладных задачах
• Уметь планировать жизненный цикл проектов по аналитике больших данных
• Уметь разрабатывать программные решения для сбора и визуализации данных с использованием библиотек Python

Содержание учебной дисциплины

• Тема 1. Большие данные как феномен ИТ и их роль в технике, экономике и жизни
• Тема 2. Жизненный цикл проекта по аналитике больших данных
• Тема 3. Основные техники работы с большими данными
• Тема 4. Основные технологии и инструменты работы с большими данными
• Тема 5. Приложения больших данных

Элементы контроля

• Домашнее задание
• Экзамен
• Домашнее задание

Промежуточная аттестация

• 2024/2025 4th module
  0.15 * Домашнее задание + 0.15 * Домашнее задание + 0.7 * Экзамен

Список литературы

Рекомендуемая основная литература

• Структуры и алгоритмы обработки данных: Учебное пособие / Колдаев В.Д. - М.:ИЦ РИОР, НИЦ ИНФРА-М, 2014. - 296 с.: 60x90 1/16. - (Высшее образование: Бакалавриат) (Переплёт 7БЦ) ISBN 978-5-369-01264-2 - Режим доступа: http://znanium.com/catalog/product/418290

Рекомендуемая дополнительная литература

• Просчитать будущее: Кто кликнет, купит, соврет или умрет / Сигель Э. - М.:Альпина Пабл., 2016. - 374 с.: ISBN 978-5-9614-4541-1 - Режим доступа: http://znanium.com/catalog/product/917151

Авторы

• Колданов Петр Александрович