サブメニューが表示されていてマウスポインターが乗っている間はテキストボタンの背景色を表示させたままにしたい

初歩的かもしれませんがお願いします。

テキストボタンをロールオーバーするとその下にメニューがフェードインで表示されテキストボタンに背景色もフェードインされる仕組みです。こちらはロールオーバーすると「is_active」というクラスをメインのテキストとサブメニューにaddClassしてtransitionでフェードインさせています。
以下ソースコードです。

<header>
  <div id="navpanel">
    <p>ナビゲーションパネル</p>
  </div>
</header>
<nav id="gNav">
  <ul>
    <li><a href="#">ナビゲーション１</a></li>
    <li><a href="#">ナビゲーション２</a></li>
    <li><a href="#">ナビゲーション３</a></li>
    <li><a href="#">ナビゲーション４</a></li>
    <li><a href="#">ナビゲーション５</a></li>
  </ul>
</nav>

* {
  margin: 0;
  padding: 0;
}

header {
  display: block;
  padding: ;
  border-bottom: 1px solid #ccc;
}

#navpanel {
  width: 200px;
  padding: 20px;
  cursor: pointer;
  background-color: #fff;
  transition: all 0.4s ease;
}

#navpanel.is_active {
  background-color: #ccc;
}
#gNav {
  position: absolute;
}
#gNav ul {
  display: flex;
  list-style-type: none;
  padding: 20px;
  opacity: 0;
  background-color: #ccc;
  transition: all 0.4s ease;
}

#gNav ul.is_active {
  opacity: 1;
}

#gNav ul li {
  font-size: 14px;
  margin-left: 10px;
  transform: translate(0, 10px);
  visibility: hidden;
  opacity: 0;
  transition: all 0.4s ease 0.2s;
}

#gNav ul.is_active li {
  transform: translate(0, 0);
  visibility: visible;
  opacity: 1;
}

#gNav ul.is_active li:nth-child(1) {
  transition: all 0.4s ease 0.13s;
}
#gNav ul.is_active li:nth-child(2) {
  transition: all 0.4s ease 0.16s;
}
#gNav ul.is_active li:nth-child(3) {
  transition: all 0.4s ease 0.19s;
}
#gNav ul.is_active li:nth-child(4) {
  transition: all 0.4s ease 0.2s;
}
#gNav ul.is_active li:nth-child(5) {
  transition: all 0.4s ease 0.23s;
}

#gNav ul li a {
  color: #333;
  text-decoration: none;
}

$("#navpanel").hover(
  function() {
    $(this).addClass("is_active");
    $("#gNav ul").addClass("is_active");
  },
  function() {
    $("#gNav ul").removeClass("is_active");
    $(this).removeClass("is_active");
  }
);

この処理だとテキストボタンからマウスポインターが外れると、当たり前ですがロールアウトになりテキストボタンとサブメニューがフェードアウトします。

ただテキストボタンにマウスオーバーしてサブメニューが表示されてるときに、サブメニューにマウスポインターが乗った場合は、テキストボタンの背景色も表示させたままにしたいのです。

しかし、その処理が分かりません。

ご教授いただければ幸いです。