Как привязать искровых исполнителей к определенной розетке NUMA

Я работаю над apache spark в системе NUMA. Система NUMA имеет 4 гнезда с 8 ядрами в каждом (без Hyperthreading). Мы можем привести аргументы, чтобы назначить количество исполнителей во время выполнения искровых заданий. Моя цель - привязать исполнителя к конкретному сокету NUMA. Я знаю, что есть команда 'numactl --membind --cpubind ', чтобы связать свои процессы с определенной памятью и сокетом.

Мой вопрос касается того, как связать искровых исполнителей на сокете NUMA. Я не нашел ни одной команды для запуска исполнителей искры в коде искры на github.

Где я должен внести изменения, чтобы привязать конкретного исполнителя к конкретному сокету?

Любая помощь очень ценится. Спасибо

0 ответов

Другие вопросы по тегам