回答編集履歴

- `button` 要素と展開される `li` 要素が隣接しているため、 [`siblings` メソッド](https://api.jquery.com/siblings/)や [`prev` メソッド](https://api.jquery.com/prev/)などを使用して `button` 要素と `li` 要素を関連付けることが出来ます。これを利用すると、以下のように一度の記述だけになります ([動作確認用リンク](https://jsfiddle.net/cw860jov/))。