Ubuntuで固定IPとDHCPアドレス両方が有効になっている？

IPアドレスの固定設定を入れる為、以下のサイトを参考に設定しました。

IP固定設定は出来たのですが、DHCPのIPアドレスも有効になってしまっており
現在IPアドレスが2個ある状態になってしまっています。
現在どちらのIPでもTeratermからアクセス出来る状態です。
固定IPの方のみ有効としたいのですが、DHCPのアドレスが生きてしまっています。

上記サイトにあるよう以下のように設定しました。

sudo nano /etc/network/interfaces

# The loopback network interface
auto lo
iface lo inet loopback

# The primary network interface
auto ens160
iface ens160 inet static
address  XXX.XXX.XXX.XXX
netmask 255.255.254.0
gateway  XXX.XXX.XXX.XXX
dns-nameservers XXX.XXX.XXX.XXX

$ ip a|grep ens160
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    inet XXX.XXX.XXX.131/23 brd XXX.XXX.XXX.255 scope global ens160
    inet XXX.XXX.XXX.248/23 brd XXX.XXX.XXX.255 scope global secondary ens160

また、DHCPクライアントのプロセスが動作しているようですがこちらが原因でしょうか。

$ ps -ef|grep dhcp
root      1162     1  0  3月05 ?      00:00:05 /sbin/dhclient -1 -v -pf /run/dhclient.ens160.pid -lf /var/lib/dhcp/dhclient.ens160.leases -I -df /var/lib/dhcp/dhclient6.ens160.leases ens160

バージョン：16.04.3 LTS (Xenial Xerus)

ご回答頂けますと助かります。
よろしくお願いいたします。