unityでLeap Motionを使ったカメラ移動について

右手の情報でピンチ動作の際にカメラ移動ができるようにしたくて以下のコードを書いてカメラにアタッチしていますが、
いい感じにカメラ移動ができません。
１フレーム前の右手の位置と現フレームの差から移動比を求めています。
右手の移動でカメラ移動ができるようにするにはどうしたらいいでしょうか？

using System.Collections;
using System.Collections.Generic;
using UnityEngine;
using Leap;

public class RightHandCamera : MonoBehaviour {

	//右手の情報
	public GameObject RightHand;
	Vector3 FirstPos;//右手の初期位置
	Vector3 BeforeRHanPos = new Vector3(0,0,0);
	public float DiffX = 0, DiffY = 0, DiffZ = 0;
	//LeapControllerから右手のPINCH情報を取得
	public GameObject LC; //LeapControllerを突っ込む
	HandGesture HG;

	void Start () {
		FirstPos = new Vector3 (transform.position.x, transform.position.y, transform.position.z);
		HG = LC.GetComponent<HandGesture> ();
	}
	
	public int FrameCount = 0;
	public Vector3 Pos20 = new Vector3(0,0,0);
	public Vector3 Pos30 = new Vector3(0,0,0);
	public Vector3 NowPos;
	public float Power = 0;
	void Update () {
		
		FrameCount++;
		RightHand = GameObject.Find ("/Main Camera/HandModels/RigidRoundHand_R/palm");
		Vector3 RHanfPos = RightHand.transform.position;//現フレームの位置
		NowPos = new Vector3(transform.position.x, transform.position.y, transform.position.z);
		Power = HG.secondHandPinchPower;


		if (Power > 0.9f) {

			if (FrameCount % 2 == 0) {
				Pos20 = new Vector3 (RHanfPos.x, RHanfPos.y, RHanfPos.z);
			}
			if (FrameCount % 2 == 1) {
				Pos30 = new Vector3 (RHanfPos.x, RHanfPos.y, RHanfPos.z);
				Diff = Pos30 - Pos20;
				if (Mathf.Abs (Diff.x) < 0.2f) {
					Diff.x = 0;
				}
				if (Mathf.Abs (Diff.y) < 0.2f) {
					Diff.y = 0;
				}
				if (Mathf.Abs (Diff.z) < 0.2f) {
					Diff.z = 0;
				}

				transform.position = new Vector3 (NowPos.x - Diff.x * 1.8f, Mathf.Clamp (NowPos.y - Diff.y * 1.1f, -75f, -25f), NowPos.z - Diff.z * 1.8f);
			}
		} else {
			Pos20 = new Vector3 (0, 0, 0);
			Pos30 = new Vector3 (0, 0, 0);
			Diff = new Vector3 (0, 0, 0);
		}

		}
}