回答編集履歴

- direnv というものがあります。使い方は覚えていませんが、名前の通りまさに質問者さんのやりたいことをやるためのソフトのはずです。direnv + conda を試してみてください。