Настройка forks и параллелизма

По умолчанию Ansible одновременно обрабатывает лишь несколько узлов. При работе с сотнями серверов такой последовательный темп превращает быстрый сценарий в долгое ожидание. ⏳

Значение forks задаёт, сколько узлов Ansible обрабатывает параллельно для каждой задачи. Чем больше это значение, тем больше машин работает одновременно.

В стандартной конфигурации значение forks равно всего 5. При наличии 200 узлов Ansible обрабатывает их в 40 волн: одна группа из пяти узлов завершается до начала следующей.

Задайте большее значение по умолчанию в файле ansible.cfg, чтобы оно использовалось при каждом запуске. Это самое удобное место для настройки параллелизма проекта.

Используйте флаг --forks (или -f) для разового запуска. Он имеет приоритет над значением из конфигурации, поэтому редактировать файлы не нужно.

Параллельные процессы распределяют одну задачу по узлам, но Ansible всё равно ждёт завершения задачи на всех узлах, прежде чем начать следующую.

Каждый параллельный процесс работает как отдельный процесс на Вашем управляющем узле. Сотни таких процессов расходуют его CPU, память и множество открытых соединений SSH, поэтому ограничением становится сама машина.

Идеального числа не существует. Сравните производительность при нескольких значениях, например 25, 50 и 100, а затем выберите самое быстрое, не перегружающее управляющий узел.

Даже при большом количестве параллельных процессов задача переходит дальше только после ответа самого медленного узла в группе. Один отстающий узел может задержать всю волну.

Количество параллельных процессов задаёт верхнюю границу одновременного выполнения. Затем плагин стратегии решает, как узлы проходят через этот пул, поэтому обе настройки работают вместе.

Большое количество параллельных процессов одновременно открывает множество сеансов SSH. Сочетайте высокое значение с конвейерной передачей и повторным использованием соединений, чтобы контролировать эти накладные расходы.

Ваш сценарий медленно выполняется на 300 узлах, и Вы хотите ускорить его.

Увеличивайте количество параллельных процессов в ansible.cfg или с помощью --forks, чтобы одновременно обрабатывать больше узлов. Значение по умолчанию, равное 5, невелико, но настоящую верхнюю границу задаёт управляющий узел. 🚀