仅需1美元硬件：Project Sistine 如何利用计算机视觉将 MacBook 变为触摸屏

核心要点

• 超低成本实现：仅使用约 1 美元的简易材料（如小镜子、纸盘、门合页等）即可完成硬件改造。
• 核心物理原理：利用屏幕表面的反射现象，通过观察手指与其反射影像是否接触来判定触摸行为。
• 计算机视觉驱动：通过对 MacBook 内置摄像头加装反射镜，改变视角以捕捉屏幕表面的手指动作，并利用算法转化为触控事件。
• 快速原型开发：该项目名为“Project Sistine”，由四人团队在约 16 小时内开发完成。

详细分析

硬件构造与设计思路

Project Sistine 的硬件设计极其简约且高效。团队的目标是无需外部摄像头即可实现触控功能。他们通过在 MacBook 内置摄像头前安装一个成特定角度的小镜子，使摄像头能够俯视屏幕表面。最终的硬件清单仅包含：小镜子、硬纸盘、门合页以及热熔胶。经过多次迭代，团队设计出一种可以在几分钟内使用美工刀和热熔胶枪组装完成的结构，成功将摄像头视野引向屏幕区域。

触控检测的算法逻辑

该系统的核心在于“反射判定法”。当手指接近屏幕时，由于屏幕表面的反光特性，摄像头会同时捕捉到手指实物及其反射影像。处理流程主要分为以下步骤：首先，利用计算机视觉技术过滤皮肤颜色并进行二值化阈值处理；其次，寻找图像中的轮廓；最后，识别两个最大的轮廓，并确保它们在水平方向上重叠，且较小的轮廓（反射像）位于较大轮廓（手指实物）之上。通过分析这两个轮廓的距离，系统可以精确判断手指是在悬停还是已经触摸屏幕。

行业影响

Project Sistine 展示了计算机视觉在低成本硬件交互领域的巨大潜力。它证明了通过巧妙的物理结构设计与算法结合，可以打破现有硬件的物理限制。虽然这只是一个概念验证（PoC），但它为人机交互提供了一种极具启发性的思路：即利用设备现有的传感器（如内置摄像头）配合极简的辅助配件，实现原本需要昂贵传感器（如电容触摸层）才能达到的功能。这对于教育实验、低成本原型开发以及辅助技术领域具有重要的参考价值。

常见问题

问题 1：Project Sistine 的硬件成本真的只要 1 美元吗？

是的，该项目使用的材料非常基础，包括小镜子、硬纸盘、门合页和热熔胶，总成本约为 1 美元，且组装过程仅需几分钟。

问题 2：它是如何判断手指是否真的碰到了屏幕？

系统利用了屏幕的反射特性。当手指靠近屏幕时，摄像头会看到手指及其反射。通过计算机视觉算法，当手指的轮廓与其反射的轮廓在图像中重合或接触时，系统便判定发生了触摸事件。

问题 3：这个项目使用了什么样的软件技术？

该项目使用了经典的计算机视觉技术，包括皮肤颜色过滤、二值化阈值处理、轮廓检测以及空间位置逻辑判断，将视频流实时转化为触控事件。