Factory Botで多対多の関係のテストデータを生成したい

Question

前提

Rails6で「ユーザーが作品を投稿でき、その投稿に対していいねをすることがきる」Webアプリを制作しています。
現在、デイリーランキング機能（1日にいいねされた数を集計し、その内いいねの数が多い上位6つを取得する）を実装している途中です。
そこでRSpecを使ってデイリーランキング機能のテストを行いたいのですが、RSpec内で使用するテストデータをFactoryBotRailsを使って生成する方法が分からず困っております。

実現したいこと

イメージとしては、以下の画像のような関係のテストデータを想定しています。
デイリーランキングのテストを行う必要があるため、いいね数が段階的に異なるデータを生成したいと考えています。

※ 線が増えると見辛くなるため数字の1517までは省略していますが、オレンジ線と同様にWorks 24までの数字にそれぞれ対応しています。
※ 画像の9~14の下線は無視してください。(ハイパーリンクとして認識してしまっているのですが、作図アプリの都合上消すことができなかったためです。）

ソースコード

モデルとアソシエーション

使用しているモデルとアソシエーションは以下の通りです。

user.rb

class User < ApplicationRecord
  has_many :works, dependent: :destroy
  has_many :likes, dependent: :destroy
end

work.rb

class Work < ApplicationRecord
  belongs_to :user
  has_many :likes, dependent: :destroy
end

like.rb

class Like < ApplicationRecord
  belongs_to :user
  belongs_to :work
end

コントローラー

Likesコントローラーは以下の通りです。

likes_controller.rb

class Api::V1::LikesController < ApplicationController
# 1日のいいねランキングから上位6つを取得
  def get_top_6_in_daily_ranking
    @daily_ranks = Work.joins(:user).includes(:user).select('works.*, users.url, users.name')
　　　　.find(Like.where(created_at: Time.current.all_day).group(:work_id).order('count(work_id) desc')
　　　　.limit(6).pluck(:work_id))
    render json: @daily_ranks
  end
end

(スピード優先のためファットコントローラーの状態のままになっています。
読みづらくて本当にすみません。)

Factory

likes.rb

FactoryBot.define do
  factory :daily, class: Like do
    sequence(:user_id) { |n| "#{n}" }
    sequence(:work_id) { |n| "#{n}" }
    created_at { Faker::Time.between(from: DateTime.now - 1, to: DateTime.now) }
    updated_at { Faker::Time.between(from: DateTime.now - 1, to: DateTime.now) }
    #association :user
  end
end

補足情報（FW/ツールのバージョンなど）

環境

• rails v6.0.3.6
• rspec-rails v4.0.2
• factory_bot_rails v6.1.0