Face Tracking with ARKit で目の位置の座標を取得したい

実現したいこと

タイトルのとうりFace Tracking with ARKitで顔の個別の場所の座標を取得してSceneKitのオブジェクトを動かしたいと考えています。

調べてみたこと

調べてみると以下のような記事が見つかったのですが、Nodeを配置している部分だけSceneKitのオブジェクトに置き換えた場合顔の中心にオブジェクトが移動してしまい、目の位置から離れてしまいました。
【Swift】【ARKit】ARkitのFaceTrackingで楽○カードマンになる！

ARFaceAncherはblendShapesというプロパティを保持していて個別の値が格納されているようなのですが、0-1の範囲の値が帰ってくるもののようで座標には使えそうにありませんでした。

どうしたら顔の個別のパーツの位置の座標を取得することができるのでしょうか？

行動規範の内容に同意します

回答1件

ベストアンサー

ARFaceAncherから、「rightEyeTransform」、「leftEyeTransform」という左右の目の位置情報が取得できるようです。（※iOS12以降）

以下Appleのサンプルですと、レンダリング更新時に常に目の位置情報をモデル（Node）に適用しています。
質問者様が参照したサイトとは作り方が異なるかもですが、こちらの位置情報を利用するのは如何でしょうか。

Swift
1    func renderer(_ renderer: SCNSceneRenderer, didUpdate node: SCNNode, for anchor: ARAnchor) {
2        guard #available(iOS 12.0, *), let faceAnchor = anchor as? ARFaceAnchor
3            else { return }
4        
5        rightEyeNode.simdTransform = faceAnchor.rightEyeTransform
6        leftEyeNode.simdTransform = faceAnchor.leftEyeTransform
7    }