Перейти к основному содержанию
EDU-MMCS
Вы используете гостевой доступ (Вход)

Интеллектуальный анализ больших данных

  1. В начало
  2. Курсы
  3. Весенний семестр
  4. Магистратура
  5. ИАБолДанн
  6. Spark
  7. Задание

Задание

Требуемые условия завершения
Срок сдачи: вторник, 27 мая 2025, 23:59

Пройдите курс Spark и прикрепите сюда архив, содержащий :

  • скриншот главной страницы курса со значком 100% прохождения
  • ноутбук с выполненными заданиями п.3.20
  • ноутбук с выполненными заданиями п.3.25
  • скриншоты отправки задания на кластер п.4.8 и результатов его выполнения
  • ноутбук с выполненными заданиями п.6.9
  • ноутбук с выполненными заданиями п.6.13
  • ноутбук с выполненными заданиями п.6.9
  • ноутбук с выполненными заданиями п.6.16
  • ноутбук с выполненными заданиями п.6.21
  • скриншоты запуска на кластере python-скрипта с кодом из какого-нибудь из перечисленных выше ноутбуков так, чтобы данные брались из HDFS

Данные, используемые в курсе, можно скачать по ссылке

Не устанавливайте библиотеку pyspark у себя на хосте. Из-за различия в версиях java она не сможет подключиться к кластеру Spark. Пользуйтесь Jupyterlab из контейнера spark-master. Он доступен по ссылке. Рабочая папка - та же, что и в предыдущем курсе: share

◄ Задание
Пропустить Навигация
Навигация
  • В начало

    • Страницы сайта

      • Мои курсы

      • Теги

    • Мои курсы

    • Курсы

      • Весенний семестр

        • Прикладная математика и информатика

        • Фундаментальная информатика и ИТ

        • Математика, механика

        • Педагогическое образование

        • Магистратура

          • Разработка мобильных приложений и компьютерных игр

          • Научные вычисления - 2025

          • ИАБолДанн

            • Общее

            • Hadoop

            • Spark

              • ЗаданиеЗадание

            • Тема 3

          • История инф

          • Data Scince и АД

          • МО (маг ИИ)

          • NLP

          • M1. Artificial Intelligence

          • CSm2Research

          • Мат. модели в МСС

          • НИС

          • Свертки

        • Аспирантура

        • Вечернее отделение

        • Другое

        • ОИИ

      • Осенний семестр

        • Прикладная математика и информатика

        • Фундаментальная информатика и ИТ

        • Математика, механика

        • Педагогическое образование

        • Магистратура

          • Разработка мобильных приложений и компьютерных игр

        • Аспирантура

        • Вечернее отделение

        • Другое

      • Воскресная компьютерная школа

        • Пользователь компьютера плюс

        • Пользователь прикладных программ

        • Программирование I ступень

        • Программирование II ступень

        • Программирование III ступень

        • Архив

      • Воскресная математическая школа

        • Открытое тестирование РНОМЦ и мехмата ЮФУ - 2025

        • Олимпиадная математическая школа

        • Повышение квалификации

        • Доступная математика

        • Лаборатория математического онлайн-образования мех...

        • Осенняя универсиада

        • Научно-практическая конференция

        • ВМШ

          • ВМШ - 24

        • Летняя олимпиадная математическая школа РНОМЦ и ме...

      • Государственная итоговая аттестация

      • Дополнительное образование

      • Олимпиады

      • Видеолекции

      • Разное

      • Архив курсов

      • Заочная школа мехмата ЮФУ

Служба поддержки сайта
Вы используете гостевой доступ (Вход)
ИАБолДанн
Сводка хранения данных
Скачать мобильное приложение Яндекс.Метрика