如何在SSH连接方面优化Ansible剧本的性能？

Question

我有下面的剧本test1.yml，它在这个目录/var/myfile/pdf下获取26个子文件夹的istat数据。

  tasks:

    - name: List directories
      raw: "ls -d "/var/myfile/pdf/*/"
      register: subdir

    - name: List pid files
      raw: "istat {{ item }}"
      with_items: "{{ subdir.stdout_lines }}"

我运行剧本，它需要29秒才能完成。

time ANSIBLE_SSH_PIPELINING=True ansible-playbook -i=10.9.9.12, -f 30 test1.yml -vvv

在游戏完成后，下面是详细信息输出所需的时间：

Output:

    real    0m29.144s
    user    0m6.206s
    sys     0m5.618s

现在，我将与istat任务相同的代码放在include_tasks文件中，如下所示。

剧本test2.yml

  tasks:

    - name: List directories
      raw: "ls -d "/var/myfile/pdf/*/"
      register: subdir

    - name: List pid files
      include_tasks: "innertest.yml"
      with_items: "{{ subdir.stdout_lines }}"

cat innertest.yml

      - raw: "istat {{ item }}"

time ANSIBLE_SSH_PIPELINING=True ansible-playbook -i=10.9.9.12, -f 30 test2.yml -vvv

Output:

    real    0m59.044s
    user    0m18.203s
    sys     0m10.118s

如您所见，由于include_tasks，同样数量的任务的时间增加了一倍以上。

在调试中，我还看到为同一个目标主机with_items的26个子目录10.9.9.12触发了26个SHH连接。

我不确定这在内部是如何工作的，但出于性能原因，最好为同一主机上的26个子目录为istat提供一个SSH连接。

有没有一种方法可以提高include_tasks的性能并降低到同一主机的ssh连接的数量？

Answer 1

有没有办法提高表演..。减少到同一台主机的SSH连接的数量？

我知道您想知道“如何提高特定任务的性能并缩短执行时间？”

为了实现您的目标，您可以查看下面的示例、文档和进一步的链接。

---
- hosts: test
  become: false
  gather_facts: false

  tasks:

  - name: Gather subdirectories
    shell:
      cmd: "ls -d /home/{{ ansible_user }}/*/"
      warn: false
    register: subdirs

  - name: Gather stats (loop)
    shell:
      cmd: "stat {{ item }}"
      warn: false
    loop: "{{ subdirs.stdout_lines }}"
    loop_control:
      label: "{{ item }}"

  - name: Gather stats (list)
    shell:
      cmd: "stat {% raw %}{{% endraw %}{{ subdirs.stdout_lines | join(',') }}{% raw %}}{% endraw %}"
      warn: false
    register: result

  - name: Show result
    debug:
      var: result.stdout

的执行和运行时

TASK [Gather subdirectories] ***********************
changed: [test.example.com]
Sunday 31 July 2022 (0:00:01.412) 0:00:01.448 ******

TASK [Gather stats (loop)] *************************
changed: [test.example.com] => (item=/home/user/01/)
changed: [test.example.com] => (item=/home/user/02/)
changed: [test.example.com] => (item=/home/user/03/)
...
changed: [test.example.com] => (item=/home/user/24/)
changed: [test.example.com] => (item=/home/user/25/)
changed: [test.example.com] => (item=/home/user/26/)
Sunday 31 July 2022 (0:00:31.715) 0:00:33.164 ******

TASK [Gather stats (list)] *************************
changed: [test.example.com]
Sunday 31 July 2022 (0:00:01.361) 0:00:34.525 ******

Gather subdirectories ------------------------ 1.41s
Gather stats (loop) ------------------------- 31.72s
Gather stats (list) -------------------------- 1.36s
Show result ---------------------------------- 0.08s

我还用模块进行了测试，而不是使用shell模块

Gather stats (loop) via 'raw' ---------------- 4.96s
Gather stats (list) via 'raw' ---------------- 0.27s

将命令循环起来并为每次运行的命令提供一个参数也会导致大量开销和多个SSH连接，直接向命令提供列表是可能的，从而提高性能，减少运行时和资源消耗。

出于性能原因，最好为同一主机上的26个子目录为istat提供一个SSH连接。

为此，您只需执行一次任务，只需建立一个SSH连接。为此，您可能可以通过Ansible直接向命令提供目录列表，例如

istat {01,02,03,...,24,25,26}

如您所见，为此，命令需要包含大括号，这些大括号需要在Ansible中转义。目录列表需要是一个字符串，其中目录是逗号分隔的。为此，您可以使用join()过滤器。

最后你最终会

istat {% raw %}{{% endraw %}{{ subdir.stdout_lines | join(',') }}{% raw %}}{% endraw %}"

类似的问题，答案是

• 项目‘直接指向'vars’，而不是首先扩展它们。
• “

进一步文档

• 变位(双)带吊带
• 模板设计器文档-转义
• 操纵字符串
• 如何加入Ansible中的字符串列表？
• 支撑展开，如果你在AIX上，你可以看看Shell参数扩展在AIX中不起作用

进一步阅读

• 抗有丝分裂原