mediapipe计算骨骼旋转

Mediapipe的身体姿势估计模块可以计算出骨骼的旋转矩阵，可以通过以下步骤进行：

1. 调用`Holistic`模块的初始化函数，初始化`Holistic`模块，并加载身体姿势估计模型。

   import mediapipe as mp

   mp_holistic = mp.solutions.holistic.Holistic(static_image_mode=False, model_complexity=2)

2. 读入待处理的图像，并将其转换为RGB格式。

   import cv2

   image = cv2.imread("image.jpg")
   image = cv2.cvtColor(image, cv2.COLOR_BGR2RGB)

3. 调用`Holistic`模块的`process`函数，对图像进行处理，获取姿势估计结果。

   results = mp_holistic.process(image)

4. 从姿势估计结果中获取骨骼的旋转矩阵。

   pose_landmarks = results.pose_landmarks
   if pose_landmarks is not None:
       # 获取旋转矩阵
       rotation_matrix = mp.solutions.pose.PoseLandmark.get_pose_rotation(pose_landmarks).flatten()

通过上述步骤，即可获取Mediapipe计算出的骨骼旋转矩阵。需要注意的是，由于Mediapipe使用的是右手坐标系，旋转矩阵是3x3的矩阵，需要将其转换为UE5中的左手坐标系下的旋转矩阵，具体方法可以参考前面的回答。