虚拟拍摄（Virtual Production）是一种利用数字技术和虚拟现实技术，在计算机生成的虚拟场景中进行电影、电视、游戏等媒体制作的方法。虚拟拍摄可以让制片人在实时中观看场景，演员在绿幕前实时交互，以及实时编辑和预览，从而更快、更便宜、更有效地制作出更真实的作品。 虚拟拍摄主要分为两种类型：一种是基于实时渲染技术，使用实时渲染引擎（例如Unreal Engine、Unity）将虚拟场景实时渲染成为视频，并且可以通过摄像机、虚拟灯光等设备对场景进行实时捕捉；另一种是基于前期制作，使用虚拟现实设备（例如头戴式显示器、手柄、追踪器）进行拍摄，并在后期进行合成。 虚拟拍摄在电影、电视、游戏等媒体制作中的应用越来越广泛，可以帮助制片人在更短的时间内制作更高质量的作品，并且可以在前期制作阶段节省成本和时间。 本项目旨在于建立一个低成本开源的虚拟拍摄方案。 方案将采用红外定位传感器作为定位方案，microLED屏幕作为背景，利用虚幻引擎进行拍摄。拍摄设备选用手机。后期可以引入机械臂进行机械臂联动拍摄。 采用红外定位传感器和虚幻引擎的定位方案可以实现高精度、低延迟的定位，适用于需要高精度定位的场景。microLED屏幕可以提供高亮度、高对比度和广色域的显示效果，使得拍摄的画面更加生动、细腻、逼真。而手机拍摄设备则非常方便携带和操作，可以快速实现拍摄任务。 在这个方案中，还可以引入机械臂进行机械臂联动拍摄，从而实现更加精确和高效的拍摄。机械臂可以根据预设的拍摄路线和角度进行自动化拍摄，减少人力投入和时间成本。此外，还可以利用计算机视觉和机器学习技术来自动化处理和优化拍摄结果，提高拍摄效率和质量。
- 安装红外定位传感器系统。将红外定位传感器安装在拍摄区域的合适位置如microLED屏四周，以确保可以准确捕捉摄像机的位置和移动轨迹。
- 安装摄像机位置标记点。在拍摄区域内安装摄像机位置标记点，以便红外定位传感器可以准确感知摄像机的位置。标记点可以是发射红外信号的LED灯。
- 校准传感器和标记点。在开始拍摄之前，需要对传感器和标记点进行校准，以确保能够准确感知摄像机的位置和移动轨迹。校准过程通常包括在拍摄区域中移动标记点，以建立一个三维坐标系。
- 进行虚拟拍摄。在完成传感器和标记点的校准后，可以开始进行虚拟拍摄。摄像机在拍摄区域内进行移动，红外定位传感器会捕捉摄像机的位置和移动轨迹，并将其转换为数字信号，然后将信号传输到计算机中进行后期处理。
- 后期处理。虚拟拍摄的数字信号可以用于后期处理，用于创建计算机生成的虚拟角色或其他特效。可以使用虚拟现实技术实时预览虚拟角色的动作和摄像机移动轨迹，以便进行实时编辑和调整。 方案基于Johnny Lee提出的方案
http://www.johnnylee.net/projects/wii/ https://www.youtube.com/embed/Jd3-eiid-Uw https://github.com/xwiimote/xwiimote https://github.com/series8217/trackingdemo https://github.com/MoralCode/WiiDesktopVR http://johnnylee.net/projects/wii/WiiDesktopVR.zip