Ansibleでyamlファイルの同一タスクでincludeとwith_*がある事を検知する方法を教えて下さい できればsedやawk などで、そのほかの方法でも良いですがファイルはたくさんあります。

Question

お世話になってます
yamlファイルは記述の仕方が自由で、コード規約を守らせていない状況なのですが、そこで次のような問題が発生しました。
『Ansibleでyamlファイルの同一タスクでincludeとwith_*があると高負荷が掛かる』
具体的には下記のようなuserタスクとgroupsタスクのように同一タスクにincludeとwith_*があるとメモリーを食いつぶしてしまうのです。

yamlは書き方が自由なのでこれをなくそうとしても、目で追いかけるしかないのうな状況ですが、非常に多くのyamlファイルがあるので一つ一つ見ていたら見逃しが非常に怖いです。

これをシェルコマンドやコード解析ツールなどで自動検知させる方法はないでしょうか。
どうか教えて下さい。

- name: user
**  include:any.yml**
  debug:
    msg: "user={{ item.name }}"
**  with_items:**
    - name: user1
      group: A
    - name: user2
      group: B
- name: groups
**  include:any.yml**
  debug:
    msg: "group={{ item.group }}"
**  with_items:**
    - name: user1
      group: A
    - name: user2
      group: B

Answer 1

コマンドだけですが、これで検知できます。

find -type f -not -name '*.yml' | xargs rm -f
find -type f -not -name '*.yml'
find . -type d -empty | xargs rm -rf
find . -type d -empty
find -type f -name '*.yml' | xargs sed -i "s/\r//g"
grep -r -n -P '\r'
find . -type f -name "*.yml" | xargs sed -i '/^#/d'
find . -type f -name "*.yml" | xargs sed -i '/^$/d'  
find . -type f -name "*.yml" | xargs sed -i '/^---/d'
grep -r -l ^#
grep -r -l ^$
grep -r -l ^---
find . -type f -empty | xargs rm -rf
find . -type f -empty
grep -r -n 'tasks:' 
grep -r -n 'tasks:' | grep -v -E '*_tasks:'
grep -r -n 'tasks:' | grep -v -E '*_tasks:' | awk '{sub("yml.*", "");print $0;}' | sed '/./s/$/yml/g' | xargs grep -n "" |less #lessで検索して同一ファイルの同一タスクにincludeとwith_*がないか確認(ここがコツ)

上記最後のlessで検索して同一ファイルの同一タスクにincludeとwith_*がないか目視確認
/include|with_

find . -type f -name "*.yml" | xargs sed -i -r 's/ +/ /g'　#タスクブロック化(ここがコツ)
find . -type f -name "*.yml" | xargs sed -i -n '{h; :loop; n; s/^-/-/; t next; H; b loop; :next; x; s/\n *//g; p; b loop;}' #タスク一行化(ここがコツ)
grep -r -n  'include:' | wc -l 
grep -r -n  'with_*' | wc -l
grep -r -n  'include:' | grep 'with_*' >/root/grep_result.txt

最後に出力したファイルの中を確認して誤検知しているものを除外すれば目的を達成できました。

Answer 2

こんな感じでしょうか

find ./ -name "*.yml" | xargs -I % sh -c 'grep include: >/dev/null % && grep with_* >/dev/null % && echo %'