DataProc

Spark. Падает джоба по таймауту из-за того что не успевают выкачаться зависимости

Для того чтобы это увидеть необходимо проанализировать логи в лог-группе.

Создание кластера dataproc

Сегодня разберём процесс создания кластера dataproc версии 2.0 с нуля. Создадим дополнительные сущности и запустим кластер. После этого подключимся к нему.