canvas に描画した画像をドラッグで移動させたい

フレームワークはnuxtを使っていますが、javascriptのcanvasについて質問させていただきたいです。

こちら質問にてcanvasに描画したimgを拡大して表示する方法をご教示いただきましたが、今回はそれに合わせてドラッグで大きくなった分移動する事ができる様にしたいです。

一旦以下の様にmousedownやmouseupのイベントを利用してドラッグを実装しましたが修正したい点がいくつかあります。

js
1    let isDragging = false
2    let startX = 0
3    let startY = 0
4    let x = 0
5    let y = 0
6 // mousedown
7    const touchstart = (e) => {
8      startX = e.offsetX
9      startY = e.offsetY
10      isDragging = true
11    }
12//mousemove
13    const touchmove = (e) => {
14      if (isDragging) {
15        const ctx = canvas.value.getContext('2d')
16        ctx.clearRect(0, 0, canvas.value.width, canvas.value.height)
17        x = e.offsetX - startX
18        y = e.offsetY - startY
19        ctx.drawImage(img, x, y)
20      }
21    }
22
23//mouseleave & mouseup
24    const touchend = () => {
25      isDragging = false
26    }

上記の実装方法だと、マウスのドラッグを始めた位置から常に移動してしまうので現在の位置からドラッグで移動できる様にしたいです。しかしそこで分からないのは以下の様にx、yを基準に変更すると移動範囲が大きくなって吹っ飛んでいってしまいます。どうすれば修正できるでしょうか？

js
1       x = x + e.offsetX - startX
2        y = y + e.offsetY - startY

2 . 以下画像青くなっている部分がcanvasですがドラッグして移動した際にimgの底辺がcanvasの底辺より上に行ってしまわない様にしたいです。これは底辺だけではなく画像が拡大後にドラッグされる想定なので全てのimgの辺がそれぞれのcanvasの変より内側にならない様にしたいです。この場合もどのように修正する事が可能でしょうか？