Eloquentのmorphとwithの併用は可能か？

EloquentのPolymorphic RelationsでHogeとFugaを使い分けているデータがあるとします。

 hoge

<?php
namespace App;
use Illuminate\Database\Eloquent\Model;
class Hoge extends Model
{
    public function base() {
        return $this->morphMany(Base::class, 'ref');
    }
}

 fuga

<?php
namespace App;
use Illuminate\Database\Eloquent\Model;
class fuga extends Model
{
    public function base() {
        return $this->morphMany(Base::class, 'ref');
    }
}

 base

<?php
namespace App;
use Illuminate\Database\Eloquent\Model;
class Base extends Model
{
    public function ref() {
        return $this->morphTo();
    }
}

このとき、withメソッドを使わずBaseを得たときの挙動はこうなります。

$base_list = Base::all();
// [
//   ['id' => 1, 'ref_id' => 1, 'ref_type' => 'Hoge'],
//   ['id' => 2, 'ref_id' => 1, 'ref_type' => 'Fuga']
// ]

さらに、withを使うとこうなります。

$base_list = Base::with(['ref'])->all();
// [
//   ['id' => 1, 'ref_id' => 1, 'ref_type' => 'Hoge', 'ref' => [id  => 1, 'name' => 'hoge', 'number' => 0]],
//   ['id' => 2, 'ref_id' => 1, 'ref_type' => 'Fuga', 'ref' => [id  => 1, 'name' => 'fuga', 'text' => 'a']],
// ]

ここまではいいのですが、例えばHogeにだけ新たにImageモデルのリレーションを加えたとします。

 image

<?php
namespace App;
use Illuminate\Database\Eloquent\Model;
class Image extends Model
{
    public function hoge() {
        return $this->belongsTo();
    }
}

 Hoge(改変)

<?php
namespace App;
use Illuminate\Database\Eloquent\Model;
class Hoge extends Model
{
    public function base() {
        return $this->morphMany(Base::class, 'ref');
    }
    public function images() {
        return $this->hasMany(Image::class);
    }
}

このあと、HogeのImageも欲しいので以下のようにwithを書き直すとエラーになります。

$base_list = Base::with(['ref', 'ref.images'])->all();
// Hogeにはimagesがあるが、Fugaにはimagesのリレーションがないのでエラー

当たり前だ、と言われればそれまでなのですが、「あったら取る」「なければnull、またはプロパティ自体が無い」状態のデータが取得したいのです。なんとか方法はないでしょうか。

 試したこと

• Hogeモデルのappendsにimageを加え、getImageAttributeを実装する

class Hoge extends Model
{
    public function base() {
        return $this->morphMany(Base::class, 'ref');
    }
    public function images() {
        return $this->hasMany(Image::class);
    }
    protected $appends = ['images'];
    public function getImagesAttribute($value) {
        return $this->images; // なぜかここでimagesというattributeは無いとエラーになる。
        // なお外部から$hoge->imagesとアクセスした場合はエラーにならない
    }
}