В Apache Spark версий до 3.4.0 приложения, использующие spark-submit, могут указать 'proxy-user' для запуска с ограничением привилегий. Одн…

В Apache Spark версий до 3.4.0 приложения, использующие spark-submit, могут указать 'proxy-user' для запуска с ограничением привилегий. Однако приложение может выполнять код с привилегиями пользователя, отправляющего задание, предоставляя вредоносные классы, связанные с конфигурацией, в classpath. Это затрагивает архитектуры, опирающиеся на proxy-user, например, те, которые используют Apache Livy для управления отправленными приложениями. Обновитесь до Apache Spark 3.4.0 или более поздней версии и убедитесь, что spark.submit.proxyUser.allowCustomClasspathInClusterMode имеет значение по умолчанию "false" и не переопределяется отправленными приложениями.