Невозможно увидеть показатели, связанные с искрой для исполнителей
После внесения изменений в metric.properties
и передача соответствующих аргументов в командной строке, т. е.
"-Dcom.sun.management.jmxremote=true -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false -Djava.net.preferIPv4Stack=true -Dcom.sun.management.jmxremote.port=0 org.apache.spark.deploy.SparkSubmit --conf spark.metrics.conf=./metrics.properties --conf spark.driver.extraJavaOptions=-Dcom.sun.management.jmxremote=true -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false -Djava.net.preferIPv4Stack=true -Dcom.sun.management.jmxremote.port=0`"
Я вижу только метрики, относящиеся к JVM и Kafka (в моем случае это источник в Kafka) для исполнителей, когда я подключаюсь через JConsole. Я не могу увидеть показатели, связанные с искрой для исполнителей. Есть ли что-то, что мне не хватает?
Примечание: я могу видеть метрики, связанные с JVM, Kafka и spark, для "драйвера" при подключении через JConsole.