PHPUnitを実行するたびに結果が変わってしまう

Question

現象

1回目のテストの実行と2回目のテストの実行では、結果が変わってしまう。

vagrant@me:~/code$ phpunit tests/Feature/ItemTest
PHPUnit 9.1.2 by Sebastian Bergmann and contributors.

..F.......F..F                                                    14 / 14 (100%)

Time: 00:02.699, Memory: 34.00 MB

There were 3 failures:
// ...

vagrant@me:~/code$ phpunit tests/Feature/ItemTest
PHPUnit 9.1.2 by Sebastian Bergmann and contributors.

...F....F.F..F                                                    14 / 14 (100%)

Time: 00:02.562, Memory: 34.00 MB

There were 4 failures:
// ...

環境

• Laravel 7.x
• Homestead
• sqlite（テスト時のみ）
• phpunit 9.1.2

ソースコード

trait CreatesApplication
{
    public function createApplication()
    {
        $app = require __DIR__.'/../bootstrap/app.php';
        $app->make(Kernel::class)->bootstrap();

        if ($app->environment() !== 'testing') {
            $this->clearCache();

            $app = require __DIR__.'/../bootstrap/app.php';
            $app->make(Kernel::class)->bootstrap();
        }

        return $app;
    }

    protected function clearCache()
    {
        $commands = ['clear-compiled', 'cache:clear', 'view:clear', 'config:clear', 'route:clear'];
        foreach ($commands as $command) {
            Artisan::call($command); // テスト実行時にキャッシュされた設定（env == local等）が反映されないようにするため
        }
    }
}

abstract class TestCase extends BaseTestCase
{
    use CreatesApplication;

    protected function setUp(): void
    {
        parent::setUp();

        $this->seed(SampleSeeder::class);
        $this->withoutMiddleware(VerifyCsrfToken::class); // 419エラー回避のため
    }

    protected function tearDown(): void
    {
        parent::tearDown();
    }
}

class ItemTest extends TestCase
{
    use RefreshDatabase;

    /** @test */
    public function 追加画面()
    {
        $this->actingAs($this->admin)
            ->get(route('admin.item.create'))
            ->assertStatus(200);
    }

    /** @test */
    public function 編集画面()
    {
        $item = factory(Item::class)->create();

        $this->actingAs($this->admin)
            ->get(route('admin.item.edit', $item))
            ->assertStatus(200)
            ->assertSee($tag->name)
            ->assertSee($tag->slug);
    }

    /** @test */
    public function データの追加()
    {
        $data = [
            'name' => $this->faker->word(),
            'slug' => $this->faker->unique()->slug(),
        ];

        $this->actingAs($this->admin)
            ->post(route('admin.item.store', $data))
            ->assertStatus(302)
            ->assertRedirect(route('admin.item.create'));
        $this->assertDatabaseHas('items', $data);
    }

    // ...

テスト内容は一部です。
他にも必要な情報があればコメントいただけると幸いです。

エラーが出ているわけではないので、どこが原因なのか全くわからないです。
なにかのキャッシュが残ったままなのでしょうか？？

ご回答よろしくおねがいします。

追記

ひとつ思い当たる箇所があり、fakerで生成した値がフォームリクエストバリデーションに引っかかっているのではないか、といったところです。
こちらは現在調査中です。

Answer 1

バリデーションのアフターフックを利用して、確認したところ、fakerで生成した文字列がバリデーションのMAX文字列数をオーバーしていたのが原因でした。

public function withValidator($validator)
{
    $validator->after(function ($validator) {
        if ($this->somethingElseIsInvalid()) {
            $validator->errors()->add('field', 'Something is wrong with this field!');
        }
    });
}

https://readouble.com/laravel/7.x/ja/validation.html