Что делать при прекращении сессии во время выполнения задания Spark?

Если таймаут слишком короткий для выполнения задания, то его нужно увеличить. Увеличьте значение параметра heartbeatTimeoutInSecond для продления периода рабочей сессии.

Если система бездействует в течение интервала времени, заданного параметром heartbeatTimeoutInSecond, сеанс автоматически завершается.

См.также

Дополнительные сведения можно посмотреть в статье Creating a Session в справочном центре по API сервиса DLI.