Технологии первичной обработки данных

От сырых данных к обоснованным решениям

  • Старт: В любое время
  • Длительность: 5 недель
  • Нагрузка:72 ак.часа
  • Формат: Синхронный или асинхронный

О курсе

Курс поможет освоить основные технологии и методы предобработки и анализа данных

Вы научитесь собирать, очищать и структурировать данные, устранять ошибки, повышать их качество и подготавливать к анализу. Разберете ключевые методы нормализации, визуализации, описательной статистики и работы с временными рядами. В качестве инструментов для обработки данных можно использовать электронные таблицы или язык программирования Python.

Вы научитесь:

  • Готовить данные для последующего анализа (приводить к единой шкале, заполнять пропуски, нормировать, использовать регулярные выражения для извлечения нужной информации)

  • Визуализировать данные

  • Агрегировать данные, а также анализировать и интерпретировать описательные статистики

  • Строить целевые функции

  • Работать с временными рядами, строить тренды и прогнозировать поведение периодических временных рядов 

  • Использовать электронные таблицы и/или Python для обработки данных.

Иконка текста

Минимальные требования

Школьный курс математики и базовые навыки работы с электронными таблицами или знание языка программирования Python (основы, библиотеки Pandas, NumPy).

Содержание

  • Введение в анализ данных

  • Простейшие инструменты для работы данными (электронные таблицы и Python)

  • Визуализация данных

  • Анализ и преобразование данных

  • Регулярные выражения

  • Нормировка данных. Построение целевых функций

  • Временные ряды. Сглаживание, построение трендов. Прогнозирование периодических временных рядов

Команда

  • Елена Георгиевна Михайлова

    Директор ВШЦК, руководитель образовательной программы Аналитика данных, кандидат физико-математических наук, доцент ВШЦК

    Icon

    e.mikhailova@itmo.ru

  • Наталья Генриховна Графеева

    Кандидат физико-математических наук, доцент ВШЦК

    Icon

    nggrafeeva@itmo.ru

  • Ольга Борисовна Егорова

    Кандидат филологических наук, доцент ВШЦК

    Icon

    oegorova@itmo.ru

  • Антон Александрович Бойцев

    Кандидат физико-математических наук, доцент ВШЦК

    Icon

    boitsevanton@itmo.ru

  • Дмитрий Геннадьевич Волчек

    Кандидат технических наук, доцент ВШЦК

    Icon

    dvolchek@itmo.ru

  • Алексей Андреевич Романов

    Кандидат технических наук, доцент ВШЦК

    Icon

    romanov@itmo.ru

  • Мария Александровна Токман

    Кандидат физико-математических наук, доцент ВШЦК

    Icon

    matokman@itmo.ru

  • Рустам Шухратуллович Азимов

    Кандидат физико-математических наук, доцент ВШЦК

    Icon

    rsazimov@itmo.ru

  • Алексей Владимирович Самарин

    Кандидат физико-математических наук, доцент ВШЦК

    Icon

    avsamarin@itmo.ru

  • Екатерина Дмитриевна Васильева

    Инженер

    Icon

    edvasileva@itmo.ru