mediapipe 坐标转换为UE5中的世界、坐标

首先，需要明确 Mediapipe 和 UE5 中的坐标系。

Mediapipe 使用的是左手坐标系，原点在图像的左上角，x 轴向右，y 轴向下，z 轴指向屏幕外方向。

UE5 中默认使用的是左手坐标系，原点在世界坐标系中心，x 轴向右，y 轴向前，z 轴向上。

因此，需要对 Mediapipe 中的坐标进行转换，使其适应 UE5 中的坐标系。

具体步骤如下：

1. 将 Mediapipe 中的坐标系原点转换为图像中心。可以通过以下代码实现：

image_width, image_height = image.shape[:2]
center_x, center_y = image_width // 2, image_height // 2

2. 将 Mediapipe 中的坐标系缩放到 [0, 1] 范围内。可以通过以下代码实现：

x /= image_width
y /= image_height

3. 将 Mediapipe 中的坐标系转换为 UE5 中的坐标系。可以通过以下代码实现：

ue_x = 2 * (x - 0.5)
ue_y = -(2 * (y - 0.5))
ue_z = depth * -1

其中，depth 为距离相机的深度，需要根据实际情况进行调整。

4. 将 UE5 中的坐标系转换为世界坐标系。可以通过以下代码实现：

world_location = unreal.Vector(ue_x, ue_y, ue_z)
world_rotation = unreal.Rotator(0, 0, 0)
world_scale = unreal.Vector(1, 1, 1)
world_transform = unreal.Transform(world_location, world_rotation, world_scale)
world_location = unreal.MathLibrary.transform_location(actor_transform, world_transform)

其中，actor_transform 为相机的 transform，需要根据实际情况进行传入。

这样，就完成了 Mediapipe 坐标到 UE5 中的世界坐标的转换。