NameArtem / hse_spark_course

Репозиторий учебных материалов для ДПО от ВШЭ (https://cs.hse.ru/dpo/) и курсов по Apache Spark
19 stars 9 forks source link

Развертывание кластера в VirtualBox + Ubuntu #2

Open Great-Frosty opened 3 years ago

Great-Frosty commented 3 years ago

После установки spark запуск скриптов start-master.sh и start-worker.sh запускает соответствующие процессы, но почему-то не запускает web ui на локалхосте (адрес локалхоста я смотрел командой hostname -I). вопрос низкого уровня: как дебажить\какие настройки окружения могут за эти вещи отвечать? вопрос высокого уровня: существует ли ресурс, дающий хороший обзор всей архитектуры кластера сверху? я подозреваю, что проблема не в скриптах, а в фундаментальном непонимании устройства Спарка\линукса

Great-Frosty commented 3 years ago

Проблема решена, если кто-то столкнётся с похожим - помогла полная переустановка ssh