leap motion原理（为什么leapmotion控制面板）

本文目录

• 为什么leapmotion控制面板
• leap motion怎么对应屏幕上的位置
• leap motion怎么和unity 3d 实现对接
• 如何把leapmotion连到手机上
• 体验为王 HP ENVY 17 Leap Motion评测
• 如何在Unity中使用Leap Motion进行手势控制
• Kinect和Leap Motion工作方式上有什么区别各自的优势是什么
• leapmotion如何无线连接电脑
• 高通VR加入leap motion手部追踪!
• 基于unity3D游戏引擎与leap motion体感控制器的体感音乐交互类游戏

为什么leapmotion控制面板

LeapMotion 官方文档中文翻译帮助手册教程
使用 LeapMotion 控制面板
来源 changkun 浏览 25 扫码 分享 2022-06-06 13:43:22
使用 LeapMotion 控制面板
概观
LeapMotion 设置
通用设置
追踪设置
问题处理
诊断
校准
Bug 报告
使用 LeapMotion 控制面板
这篇文章描述了 LeapMotion 控制面板，你可以使用里面的设置选项来改变 LeapMotion 控制器
概观
当 LeapMotion 控制面板运行时，它会显示在 Windows 任务栏或 Mac 通知栏区域，你可以通过它来快速启动 AppHome 应用或其他事情。当 LeapMotion 控制器接入并顺利工作时，图标变成绿色。其他的颜色都表示错误或异常。
- LeapMotion 未接入(或 LeapMotion 软件还未检测到)
- LeapMotion 控制器和软件正常工作
- 检测到 LeapMotion 设备上的脏污或阴影
- 表示追踪被暂停，因为 LeapMotion 的帧率低于可接受的阈值。USB 带宽之间的竞争是首要的因素。对于这种情况，应该直接将控制器接入计算机，而不是使用 USB 的集线器或延长线，或者拔掉其他的 USB 设备也是可以的。
- 表明 LeapMotion 的帧速率低于可接受的阈值，你已经关闭了 LeapMotion 中的一些导致性能下降的选项，继续进行追踪将大大降低可靠性。
- 表明软件可以进行更新。
LeapMotion 控制面板还提供了下面一些工具：
启动 AppHome - 打开 AppHome 应用
设置 - 打开 LeapMotion 控制面板
Visualizer - 启动 Visualizer 应用
Pause/Resume 追踪 - 停止/启动 LeapMotion 的追踪数据
LeapMotion 设置
你可以调整 LeapMotion 控制面板的一些设置来进行诊断，你可以在图标的设置选项来打开控制面板。
通用设置
控制面板的通用设置也提供了下面的设置：
勾选允许 WebApp 可以激活 WebSocket 服务器并向他们提供数据（它永阳可以让其他应用连接到 WebSocket 服务，因此关闭这个设置也可能会影响桌面应用程序）。
勾选允许后台应用来激活应用即便在后台运行也能接受追踪数据。
勾选允许图像来激活接受相机图像，如果没有勾选，那么应用会持续接收除了图像以外的数据。
勾选自动节能来激活 LeapMotion 软件降低能耗调整追踪帧率。
勾选自动发送诊断数据来激活 LeapMotion 自动匿名发送诊断数据。
勾选自动交互高度来激活 LeapMotion 自动调整软件交互盒子的高度。
勾选自动更新软件可以自动下载安装软件更新。软件会在重新启动计算机后被安装。勾选安装更新会立即安装更新。
追踪设置
勾选鲁棒模式，可以使软件进入“鲁棒追踪模式”，它允许执行红外照明条件下的追踪。
当 LeapMotion 控制器挂载到 VR 设备时，可以勾选上下追踪优化选项。
取消选中工具追踪可以禁用对工具的追踪。
取消选中手追踪可以禁用对手的追踪。
勾选自动定向追踪，可以允许当它检测从相对侧进入所述视场手设备翻转z轴。点击相反方向键来手动翻转轴。
鲁棒追踪模式
鲁棒模式提高了在明亮的照明条件下的跟踪数据的可靠性。鲁棒模式允许LeapMotion控制器在更广泛的环境条件下工作;然而，其他性能特性可能会降低。对性能的主要作用是，会出现增加的处理延迟和非常快速的运动由用户将导致跟踪数据的丢失。
当光线条件变得糟糕时，LeapMotion控制器在位置至少30秒后就会自动抛弃鲁棒模式。
问题处理
点击显示软件日志来查看 LeapMotion 相关的日志。如果你遇到了问题，我们可能会要求你发送这些日志给 LeapMotion 然后来解决你的问题。你可以保存这些日志的副本。
点击 诊断Visualizer 来打开 Visualizer 应用。 点击校准设备来启动设备校准工具。 点击报告软件问题来打开 bug 报告表单。 点击重置默认设置来恢复 LeapMotion 的原始设置。
取消选中避免性能下降禁用较低的设备帧率检查。当检测到较低的设备帧速率，这样就可以采取纠正措施的帧频检查将暂停跟踪。如果禁用此选项，追踪就不会暂停。 USB带宽问题是低装置的帧速率的最常见的原因，但大部分 CPU 的负载都是没什么问题的，即便是接近或低于我们的最低推荐系统要求的计算机上。
选中低资源模式可以减少Leap Motion控制器和软件使用的CPU和USB带宽。此设置可以减少最大跟踪范围，速度，和准确性，但可能有必要拥塞的USB总线（来自多个USB和蓝牙设备）或评级较低的CPU芯片的计算机上。
点击开始诊断可以执行一系列系统和环境测试。
诊断
争端测试包括了一系列的检查，第一轮的测试包括控制器和软件：
认证 - 验证控制器的固件版本。如果测试失败，请联系 LeapMotion 支持。
设备测试 - 控制器将发送大量数据给 LeapMotion 软件进行检查。
软件测试 - LeapMotion 软件会产生大量数据用于检查（这个测试要求你的一只手位于 LeapMotion 视野内）。
第二轮测试会检查一些外部环境因素：
检查污点 - 检查设备窗口上的污点，如果失败，请清理这个表面。
检查光线条件 - 检查 LeapMotion 控制器内的光线强度。如果测试失败，请考虑移动控制器或耕管广元，如果可能，不要让控制器直接对准光源。
第三轮测试包含一些设备的校准。
点击报告诊断按钮来发送一些 LeapMotion 的测试结果。我们会使用这些信息进行质量控制

leap motion怎么对应屏幕上的位置

概述
屏幕类提供了一个在参照Leap Motion帧中显示屏的坐标和朝向。函数Screen::intersect()计算手指或工具指向方向射线与屏幕平面的交点的位置。此外，Screen::project()函数计算某点投影到屏幕平面的位置。

在使用Screen类之前，考虑到注册屏幕位置会需要你花一些精力，并且只有当你移动屏幕或者Leap才是有效的。你的应用对于API的使用必须是充分值得的，这样用户才会觉得他们的努力没有白费。我们建议你，让你的用户清楚了解为什么你需要他们去注册他们屏幕的位置，并且为用户提供一个快速的测试以验证屏幕位置是否依旧准确。

使用屏幕定位功能的说明可以参考Screen location.
屏幕坐标
对于每个已知屏幕，屏幕类提供了一个原点和向量以表示屏幕范围水平和垂直方向。一个正交的向量也会有提供。
上图：原点和已定位屏幕的方向向量

屏幕的原点坐落在下方，屏幕的左手角落。坐标向量与屏幕一边平行。向量的长度表示以毫米为单位的屏幕长度。正交向量是一个单位朝向向量与屏幕表面正交。
交点和投影点
屏幕类提供了一个intersect()方法来计算手指或者工具指向屏幕的交点。这个函数从尖端物体发射一个射线，然后判断射线与屏幕平面在哪里相交。只要尖端物体指向屏幕所处位置，就会返回一个有效的数值。如果交点是平行的或者指向方向不在屏幕上，在交叉向量中的坐标则都为NaN（not-a-number）。

屏幕类还提供了一个近似的intersect()函数，接受位置和朝向向量，并且计算它与屏幕交点，这样就不需要一个尖端物体了。
上图：三个指向以及与之对应的交叉点
@指针A与屏幕平面相交于屏幕外侧。
@指针B与屏幕直接相交。
@指针C没有与屏幕相交。

另外，屏幕类提供了一个project()函数来计算点在屏幕上的投影位置。与intersect()函数不同的是，project()函数永远返回一个有效值，因为点永远可以投影到平面上。
上图：2个点与相对于的投影点
@点A直接投影到屏幕上。
@点B投影到了屏幕外侧。

你可以依据Leap Motion坐标系统不断调用得到交点和投影点。返回的坐标是三维向量，以Leap Motion为原点毫米为单位衡量的点坐标。
依次的，你可以请求二维归一化的坐标，它们把交点和投影点定义成相对于屏幕低端左下角并且在屏幕平面内的坐标。

当使用归一化坐标时，原点是(0,0,0)，相反的右上角坐标为(1,1,0)。这些点在屏幕平面以内，并且它们的x和y数值在0到1之间，表示点距离屏幕两边的比率（当使用归一化坐标时，z坐标的值一直是0）。例如，在屏幕中心的点被归一为(0.5,0.5,0)。对于交点和投影点，归一化的坐标在屏幕边界外时可能小于0也可能大于1。

默认时，intersect()和project()函数将坐标归一化到（clamp夹在这个范围里）坐标范围(0~1,0~1,0)。这意味着，任何在屏幕边框外的交点和投影点实际上被移动到边框上。但调用intersect()或者project()函数时，你可以通过设置clapRatio参数，来修改默认的“夹板区域”。默认的夹板率是1.0。使用一个更小的数可以减小夹板区域，而使用一个大的数值可以增大区域。例如将clampRatio设置为0.5会将交互区域缩小为以屏幕为中心50%区域，并且把说有点的坐标压缩在0.25到0.75范围里。同样的，如果把clampRatio设置为2.0会将交互区域扩大1倍，点的坐标扩展到-0.5到1.5之间。
找到最近的屏幕
你可以通过控制器实例对象的注册位置得到一张所有屏幕的列表：
Controller controller;
ScreenList screens = controller.calibratedScreens();

注意，屏幕列表永远至少包含一项，即使用户从未注册过屏幕的位置。这项代表用户默认的屏幕。

你可以获取从手指或工具引出的射线会与屏幕列表对象相交的，最近的屏幕：
Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreenHit(pointable);
}
同样地，你还可以在屏幕列表对象中，通过一个点（诸如指尖或者工具的末端位置）来得到与之最靠近的屏幕。
Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreen(pointable.tipPosition());
}
找到交点的像素坐标

Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreenHit(pointable);

Vector normalizedCoordinates = screen.intersect(pointable, true);
int xPixel = (int)(normalizedCoordinates.x * screen.widthPixels());
int yPixel = screen.heightPixels() - (int)(normalizedCoordinates.y * screen.heightPixels());
}
找到在Leap Motion坐标系下的交点坐标
你可以使用intersect()函数得到归一化的坐标，以帮你计算在屏幕上的某一个交点的像素点坐标。
Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreenHit(pointable);

Vector normalizedCoordinates = screen.intersect(pointable, true);
int xPixel = (int)(normalizedCoordinates.x * screen.widthPixels());
int yPixel = screen.heightPixels() - (int)(normalizedCoordinates.y * screen.heightPixels());
}
设置交互区域的大小
当使用归一化坐标时，通过调用inersect()函数来设置calmpRatio参数，你可以将用户说指向的交互区域扩大或缩小。默认情况下，clampRatio参数为1.0，与屏幕边缘相匹配。返回任何在屏幕边界外交点的坐标时，它们都会被归一到边界上。（在交互区域内的点不会受到归一影响）

为了将交互区域二等分，在你调用intersect()函数时，可以将clampRatio参数设置为0.5。
Vector normalizedCoordinates = screen.intersect(pointable, true, 0.5);
如果需要把区域扩展一倍，可以将clampRatio也乘以2。
Vector normalizedCoordinates = screen.intersect(pointable, true, 2.0);
找到指向某处的手指或工具与屏幕的距离
为了取得手指或者工具的指向与屏幕交点的坐标，可以简单地将2个表示这些点的向量相减再取模就可以得到结果。当调用函数intersect()来获取交点，可以将归一化参数设置为false。
Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreenHit(pointable);

Vector intersection = screen.intersect(pointable, false);
Vector tipToScreen = intersection - pointable.tipPosition();
float pointingDistance = tipToScreen.magnitude();
}

为了得到手指、工具与屏幕平面最近的距离，也就是从尖端末梢的点做垂线到屏幕的那个距离，可以使用distanceToPoint()函数传入尖端坐标。
Controller controller;
Frame frame = controller.frame();
if (frame.pointables().count() 》 0) {
Pointable pointable = frame.pointables();
ScreenList screens = controller.calibratedScreens();
Screen screen = screens.closestScreenHit(pointable);

float perpendicularDistance = screen.distanceToPoint(pointable.tipPosition());
}

leap motion怎么和unity 3d 实现对接

1、下载leap SDK for unity

leap SDK for unity是作为plugin library获取leap数据的，而免费版的U3D不支持native plugins。对此开发者中心也有办法能够使免费版的U3D使用leap SDK。

2、首先新建unity工程

***隐藏网址***

4、场景内创建一个plain和一个cube（用以移动）

5、在plugins中新建cs脚本，命名LDCLeapControl.cs，在IDE中添加代码如下：

using UnityEngine;  

using System.Collections;  

using System.Collections.Generic;  

using Leap;  

public static class LDCLeapControl  

{  

    public static float ROTATE_MOD = 3.14F;  

    //member variables;  

    static Leap.Controller _controller;  

    static Leap.Frame _frame;  

    static Leap.Hand _hand;  

    static LDCLeapControl()  

    {  

        _controller = new Leap.Controller();  

    }  

    //getters  

    public static Leap.Frame Frame  

    {  

        get  

        {  

            return _frame;  

        }  

    }  

    public static Leap.Hand Hand  

    {  

        get  

        {  

            return _hand;  

        }  

    }  

    //get latest frame called each second  

    public static void Update ()   

    {  

        if(_controller != null)  

        {  

            Frame lastFrame = _frame == null ? Frame.Invalid : _frame;  

            _frame = _controller.Frame();  

            if(_frame != null)  

            {  

                if(_frame.Hands.Count 》 0)  

                {  

                    _hand = _frame.Hands;  

                }  

            }  

        }  

    }  

    public static float getHandInput(string gesture)  

    {  

        float leapData = getLeapData(gesture);  

        return leapData;  

    }  

    private static float getLeapData(string gesture)  

    {  

        Update();  

        float leapData = 0.0F;  

        if(_hand != null)  

        {  

            Vector3 PalmPosition = new Vector3(0,0,0);  

            Vector3 PalmNormal = new Vector3(0,0,0);  

            Vector3 PalmDirection = new Vector3(0,0,0);  

            PalmPosition = _hand.PalmPosition.ToUnityTranslated();  

            PalmNormal = _hand.PalmNormal.ToUnity();  

            PalmDirection = _hand.PalmPosition.ToUnity();  

            if(gesture == "Rotation")  

            {  

                leapData = -ROTATE_MOD * PalmNormal.x;  

            }  

        }  

        return leapData;  

    }  

}  

6、这时，LDCLeapControl作为一个native plugin已经可以为我们所用了，在Assets中新建脚本：moveBehaviour.cs,并添加代码如下：

using UnityEngine;  

using System.Collections;  

public class moveBehaviour : MonoBehaviour {  

    public float smooth = 2.0f;  

    public float tiltAngle = 60.0f;  

    public bool leapIsEnabled = false;  

    void Update ()   

    {  

        if(leapIsEnabled)  

        {  

            float rotate = LDCLeapControl.getHandInput("Rotation");  

            float tiltAroundY = rotate * tiltAngle;  

            Quaternion target = Quaternion.Euler(0, tiltAroundY, 0);  

            transform.rotation = Quaternion.Slerp(transform.rotation, target, Time.deltaTime * smooth);  

        } 

    }  

}  

在这里利用取得的leapData作为object旋转的quaternion值（position移动等变换同理，略），将该行为付给cube（打开leapIsEnabled开关），运行，现在随着你手腕的左右旋转，方块也会在y方向上旋转了。

如何把leapmotion连到手机上

有了Leap Motion，大家可以跟游戏手柄说拜拜了。
现代智能手机凭借着以手势与触控为核心的新型用户界面为我们带来前所未有的使用体验。随着时间的不断推移，我们几乎可以肯定地认为，在计算的未来中触控技术将扮演愈发重要的关键性角色。不过话虽如此，一系列艰难挑战仍然横亘在开发者面前、使他们很难在台式设备上充分发挥触控机制的巨大优势。
深度相机与3D位置追踪器的出现隐隐给触控式互动操作的迅速普及指出了一条光明的发展道路。虽然目前的最新一代技术仍然远远无法与《少数派报告》中的展示效果相提并论，但其中蕴含的可观潜力却绝对不容置疑。
就在去年，我们曾经对Leap Motion控制器进行过一番评测——这款设备利用高精度动作捕捉与手指追踪技术成功在任何标准化台式机上实现了手势输入机制。作为一套经由标准USB端口连接的设备，Leap Motion控制器通过其内置摄像头与红外LED来捕捉用户手指与手部的细微活动。Leap Motion软件会对图像数据加以处理，并将这些信息翻译成手势以及触控事件。
Leap Motion提供一套指向性极广的SDK，旨在帮助开发人员更轻松地在自己的应用程序当中实现对该设备的支持。它支持跨越多种平台的一系列不同编程语言——除了原生桌面软件之外，Leap Motion还提供一套JavaScript库，从而通过构建Leap兼容性网站的方式将开发成果在Web浏览器上加以呈现。
Leap Motion SDK非常容易上手，掌握之后能为我们带来极为丰厚的回报。它以抽象化方式消除了控制器所固有的大部分复杂因素，通过高级别API实现了对手部及手指追踪数据的捕捉。在今天的文章中，我们将共同探讨如何构建起一款能够充分发挥Leap Motion追踪功能优势的前端Web应用程序。作为初始内容，我们先来说明如何在HTML Canvas元素上渲染手指定位点，而后再一步步讨论怎样利用Pixi.js图形库来配合Leap Motion控制机制开发出简单的2D游戏。
正式开始
Leap Motion JavaScript库依赖于WebSockets将来自控制器的数据提交并显示在用户的Web浏览器之上。WebSockets标准的设计目标在于允许JavaScript代码运行在网页当中，从而确保网页与远程服务器之间始终保持有长效连接——这一特性通常被用于创建基于浏览器的聊天客户端以及其它一些实时类Web应用程序。
当用户部署好了自己的Leap Motion设备、并为其安装了附带的软件及驱动程序之后，其中作为内置软件组件之一的轻量级WebSocket服务器就会运行在用户计算机的后台进程当中。由Leap Motion控制器捕捉到的数据会被发往WebSocket服务器，这是为了能够让相关数据直接交由Web浏览器使用、而无需另行安装额外的浏览器插件。Leap Motion JavaScript库与本地WebSocket服务器相连，负责捕捉数据并利用部分简单API进行打包以保证其易于使用。
作为开发工作的第一步，让我们首先创建一个网页，并在其中载入Leap Motion JavaScript库、获取来自设备的数据并记录下浏览器调试控制台中的部分数据：
***隐藏网址***
上述代码的head元素中包含一个script标签，它的作用是从公司的CDN处下载Leap Motion JavaScript库。Leap Motion针对生产使用环境推出一套精简版本，此外还针对开发用途提供非精简版本。在这里我们使用的是非精简版本，这是为了能够在需要使用浏览器的JavaScript调试器时能够更轻松地对代码进行单步调试。大家可以点击此处访问Leap Motion官方网站，并在这里下载到前面提到的这两种版本。
在第二个script标签中，也就是页面body之下，我们利用Leap.loop方法对来自设备的数据进行捕捉。Leap Motion驱动程序会发出数据“帧（frame）”，这些帧也就是经过处理的控制器视频流快照。该软件每秒大约会产生30帧数据，从而持续不断地为应用程序的运行提供必要信息。被传递至该loop中的匿名函数在每次接收到新帧时都会执行一次。
Leap Motion API大大简化了对手部、手指以及工具位置的检测流程。这里的“工具”被认定为一种延长状物体，例如铅笔，其中一端由用户把持在手中。在Leap Motion的表述体系当中，通用术语“指向物（pointable）”被用于描述作为工具或者手指存在的对象。帧对象当中包含一项名为pointables的属性，用于显示一系列显示在帧内的指向物对象。
在前面的示例中，每一帧内所包含的一系列pointables都被输出至控制台当中。如果大家检查这些被推送至控制台的指向物对象，就会发现其中有多项属性被用于描述显示信息——例如指向物的长度与宽度、指向物末端的空间坐标以及该指向物末端的移动速度等。
在火狐开发者控制台中查看指向物对象。
计算标准化手指位置
利用指向物数据，我们将建立一套简单的演示范例，用户可以利用它通过移动手指控制屏幕上某个元素的位置。第一步，我们需要获取指尖的具体位置。下面的示例代码为如何获取单个指向物的原始坐标：
Leap.loop(function(frame) { if (frame.pointables.length 》 0) { var position = frame.pointables); } });
在多数情况下，大家都会优先使用Leap Motion软件所提供的自动稳定功能，而不太可能直接使用原始tipPosition数据。Leap Motion控制器会以极高的精度对图像中的活动对象加以检测，并从中甄别出使用者手部几乎难以察觉的细微摇晃及活动。另一项名为stabilizedTipPosition的备选属性则允许我们收集同样的数据，但在结果中过滤掉上述细微活动。现在我们已经获得了用户手指的物理坐标，接下来要做的就是将其与浏览器窗口内的位置进行关联。
在Leap Motion的术语体系中，由控制器加以追踪的大型虚拟空间被称为互动框（interaction box）。帧对象的interactionBox属性当中包含多种方法与属性，它们负责提供与互动框及其维度相关的具体信息。它采用一种便捷的标准化方法，即将某个物理点的原始坐标换算成能够代表该点在互动框中相对位置的等效数值。
标准化定位机制非常实用，因为它能帮助我们获取手指的原始位置、并将其与应用程序窗口中的对应点加以映射。标准化坐标使用浮点数值格式，具体数值在0到1之间浮动。要想获取浏览器窗口中对应点的相对数值，大家只需将X与Y值同目标区域的高度与宽度相乘即可：
Leap.loop(function(frame) { if (frame.pointables.length 》 0) { var position = frame.pointables); console.log("X: " + x + " Y: " + y); } });
在屏幕上绘制手指位置
利用标准化定位机制，现在我们已经可以在网页上绘制手指的具体位置。为了简单起见，这篇文章将只向大家展示如何利用DOM元素实现这一目标。只需创建一个具备绝对位置的div，而后将其top与left属性分别设置为对应的X与Y坐标，我们就能将Leap Motion loop中的标准化函数用于定位：
***隐藏网址***
这样一来，当用户在Leap Motion控制器前方移动自己的手指时，屏幕上的div元素也将随之发生位移。在目前为止的示例中，我们只涉及单一手指的处理，也就是使用pointables数组中的第一个元素。在接下来的示例中，我们将逐步探寻数组中第一个元素的作用、从而使每根手指都成为可操作对象。这一次，我们将在HTML 5 Canvas上描绘手指位置、而不再使用DOM元素：
***隐藏网址***
在上面的示例中，我们利用forEach方法对pointable项目进行了遍历。它会对每一个标准化位置进行识别，而后将其作为矩形绘制在屏幕当中。此外，clearRect方法在处理每一帧图像时都会被调用一次，旨在确保前一帧所绘制的矩形切实得到清除。
上述示例当中还引入了另一项新功能，即frameEventName选项。在默认状态下，Leap.loop回调将被调用至每一个提取自Leap Motion控制器的帧数据。对frameEventName选项中的“animationFrame”值进行设置会改变这一行为机制，从而令Leap.loop与浏览器的绘制周期保持一致。它会利用浏览器的requestAnimationFrame API，从而确保该回调只在浏览器准备进行绘制时被调用。
检测手势
除了手指位置，Leap Motion SDK还能够识别出其它几种手势动作，其中包括扫动与点触。Leap Motion帧对象当中包含一个手势属性，能够提取从帧数据中检测出的一系列手势信息。以下示例代码显示了如何对扫动手势进行迭代、对其起始与结束位置进行标准化处理并最终将结果绘制在Canvs当中：
var canvas = document.getElementById("canvas"); var ctx = canvas.getContext("2d"); var options = { enableGestures: true, frameEventName: "animationFrame" }; Leap.loop(options, function(frame) { ctx.clearRect(0, 0, ctx.canvas.width, ctx.canvas.height); frame.gestures.forEach(function(gesture) { if (gesture.type != "swipe") return; var start = frame.interactionBox.normalizePoint(gesture.startPosition); var end = frame.interactionBox.normalizePoint(gesture.position); var startX = ctx.canvas.width * start); ctx.beginPath(); ctx.moveTo(startX, startY); ctx.lineTo(endX, endY); ctx.stroke(); }); });
Leap Motion SDK在默认状态下不会显示手势。为了获取手势数据，我们必须将选项对象的enableGestures属性设为true，而后再将其传递至Leap.loop方法当中。如果该选项没有经过设置，那么frame.gestures数组将直接为空。
每一种手势都具备一项type属性，用于描述该手势的相关性质。在forEach loop当中，首先利用条件表达式来忽略不属于扫动的手势动作。接下来，利用interactionBox对手势的起始与结束位置进行标准化处理。最后，利用标准Canvas绘制API来描绘由起始位置到结束位置的线条。
在面对Leap Motion设备进行手部扫动操作时，大家应该能够在Canvas上看到自己的动作轨迹线条。手势检测在更为广义的互动操作之下起着非常关键的作用。举例来说，大家可以通过向左或者向右的扫动操作帮助用户导航至相册界面的上一个或者下一个显示条目当中。

体验为王 HP ENVY 17 Leap Motion评测

　　【IT168 评测】刚刚收到了一款来自惠普的高端娱乐笔记本ENVY 17 Leap Motion SE，亚马逊报价11299元（ENVY 17-J106TX
），产品一到评测室，立刻引来了小伙伴们的围观，其实大家关注的焦点都是其加入的Leap Motion体感技术——一种全新的人机交互方式。个人觉得，这应该是惠普领先行业的一次新尝试，对于玩腻了鼠标、触控并且喜欢尝鲜的朋友，可多加关注。
▲体验为王 HP ENVY 17 Leap Motion SE评测
　　ENVY系列是惠普消费娱乐本的王牌系列，产品线已经覆盖14、15、17寸，很多新技术，都会率先加入到ENVY系列旗下的产品中，比如说Beats Audio音效技术，智盾硬盘保护技术，生物指纹识别，超高清3200*1800屏幕（部分型号），还有此次加入的Leap Motion体感操作等等，该系列的特点是简约金属外观风格，凸出娱乐真实体验。
ENVY 17 Leap Motion SE
参数名称
参数规格
处理器
英特尔第四代酷睿i7-4702MQ(2.2~3.2GHz)
芯片组
HM87, Intel Haswell
内存
8124 MB(DDR3-1600 DDR3 SDRAM)
显卡
NVIDIA GeForce GT 750M （2 GB 独立显存）
硬盘
HGST 2*(1000 GB, 5400 RPM, SATA-III)
显示屏
17.3 英寸( 分辨率1920x1080 )
电池规格
11.1V/62Wh
无线网卡
Intel(R) Wireless-N 7260
有线网卡
Realtek PCIe GBE Family Controller
尺寸重量
29.94mm~33.8mm/3.37Kg/3.94Kg
　　对ENVY 17 Leap Motion SE感受如下：
　　1、Leap Motion公司的软硬件配套很好，识别准确，可玩性高。
　　2、4 个扬声器和两个低音炮 Beats Audio娱乐音效好
　　3、全高清屏幕，但上下可视角度一般
　　4、触控屏幕偏厚重
　　什么是LeapMotion？
▲ 带体感接收器的ENVY 17！
　　是一项高精度体感技术，与Kinect类似，通过特殊接传感器，重建手掌真实三围运动信息，识别丰富的手势动作，以在应用中获得隔空操作体验效果。另外，其实这个技术不仅可识别手指的运动，细一些的手持工具，比如笔杆，筷子等都可以作为体感互动的工具。
　　至于原理，你会看到惠普ENVY 17键盘下有个黑条儿，那就是LeapMotion的传感器了，Leap Motion采用红外LED+灰阶camera的方式采集3D信息，由于只采集手部信息，所以Leap Motion的运行效率不错，识别也很精细。
▲LED+灰阶camera的方式采集手指3D信息
京东年货：Leap Motion体感控制器创意礼品 698元！
　　目前，除了惠普Envy 17 Leap Motion SE，有消息称，还会有11款惠普一体电脑和台式机将内置Leap Motion技术，而且据Leap Motion公司首席执行官Michael Buckwald在伦敦的新闻简报会上表示，2014年CES后，这项技术也将集成到未来的手机和平板上，所以可以想象，这可能将是继触控操作后的又一场体验革命！
体验HP ENVY 17 Leap Motion SE
　　和传统的键盘/鼠标、触摸板、多点触控屏技术不同，Leap motion不用接触电脑，就能在一定距离内操作电脑，所以用起来灵活性更大。而且双手表达的动作信息远比鼠标指针复杂的多，因此玩法上有很大差别，但掌握这项操作的窍门很简单，双手并用，指点或者抓挠，玩的挺上瘾的！
▲通过Fn+空格键开启Leap Motion功能
　　目前，Leap Motion已经共计吸引了超过8.5万开发人员在应用商店中发布了超过150个支持该设备和技术的应用程序。ENVY 17也内置了许多款精选游戏，像大家都十分喜爱的经典的《水果版卡丁赛车》、外国版切水果的《森林大叔劈木头》等等，通过手势控制来体验这些小游戏都非常有意思。
　　由于Leap motion的游戏需要我们同时运动双手来操作，而且双手不直接接触笔记本电脑，这样就避免了以往的“键盘手”和“鼠标手”现象，还有一些游戏需要我们做出大幅度的双臂动作，这样就直接运动了我们的上肢各个关节和肌肉群，有助于缓解长时间在电脑前坐而不动而产生的各种身体不适，看来玩电脑也能算健身了！
▲Leap Motion体感游戏
　　目前，Leap Motion只能识别手指动作，而据说明年1月份，Leap Motion会有软件升级。新版本软件将再提升体感跟踪精度，并且加入追踪整个手掌，同时分出每根手指……确实很神奇的一项功能。
▲Leap Motion测试落点精确 识别度高
细节外观 HP ENVY 17 Leap Motion SE
　　17寸的游戏本其实在国内型号不多，毕竟国内消费者不像外国人一样需要大尺寸。数一数也就是ENVY 17、外星人17寸，镭波和微星这样的几款产品。惠普ENVY 17相对于这些，最大的外形特点是它更像一个正常的笔记本，而非外形较夸张的游戏本儿。为何这么说呢?因为今年整个ENVY系列都是银色阳极氧化铝金属风格，而且走的是简约风格，所以在娱乐本中的辨识度很高。
▲细节外观 HP ENVY 17 Leap Motion SE
　　很多人第一眼看上去，ENVY 17就显得特别高大上。巧克力键盘的风格很像苹果的感觉。细看ENVY 17的键帽是雾面的，而且不是传统巧克力键盘的平面，它有个类似枕形的凹陷，快速打字的时候手指移动会有明显的边界感，不易出错，打字效率高。
▲HP ENVY 17 Leap Motion SE细节图赏
　　个人觉得，如果能把Leap Motion的传感器放到触控板的位置上会更好一些。因为在做双手大动作的时候，左手过低可能会越出传感器的倒锥形范围(Leap Motion有固定的采样高度范围)。
▲接口齐全 四个USB3.0外接方便
　　HP ENVY 17 Leap Motion的接口十分齐全，左侧标准HDMI、RJ45网口、双USB3.0，SD卡槽。右侧双USB3.0、耳麦二合一接口、电源接口、DVD刻录。都是标准规格接口，不需要额外的转接头。完全可满足家庭影音娱乐需求。
性能与总结 HP ENVY 17 Leap Motion SE
　　配置来讲，ENVY 17 Leap Motion SE没有明显的软肋，在游戏性能上达到了Geforce GT 750M主流游戏本应有的表现。而且该机也预留了升级空间，可自行安装1条8GB内存。另外比较惊喜的是，ENVY 17有两个标准SATA3硬盘位，可供升级！唯一有些遗憾的地方是，送测机没有配置IPS广角屏幕，使得机器在视角和色彩上有些不足。
▲ENVY 17非常好拆 1颗螺丝搞定！
ENVY 17 Leap Motion SE
参数名称
参数规格
处理器
英特尔第四代酷睿i7-4702MQ(2.2~3.2GHz)
芯片组
HM87, Intel Haswell
内存
8124 MB(DDR3-1600 DDR3 SDRAM)
显卡
NVIDIA GeForce GT 750M （2 GB 独立显存）
硬盘
HGST 2*(1000 GB, 5400 RPM, SATA-III)
显示屏
17.3 英寸( 分辨率1920x1080 )
电池规格
10.8V/62Wh
无线网卡
Intel(R) Wireless-N 7260
有线网卡
Realtek PCIe GBE Family Controller
尺寸重量
29.94mm~33.8mm/3.37Kg/3.94Kg
　　
ENVY 17 Leap Motion SE采用了酷睿i7-4702MQ处理器，从他的名称来看，i7-4702MQ是一款4核心8线程的CPU，TDP为37W，集成HD4600核芯显卡，是一款适合与独显搭配的CPU。其性能，可达到上一代TDP 45W的核CPU的水平，拥有更高的能效。
　　CINEBENCH R11.5、R15理论性能测试
　　我们使用CINEBENCH R11.5、R15进行了测。CINEBENCH R11.5、R15的CPU测试项目纯粹使用处理器渲染一张高精度的3D场景画面，从而测试出CPU单线程与多线程的处理能力。
　　从测试结果可以看到，酷睿i7-4702MQ多线程6.31pts，单线程1.38pts。583cb、118cb，成绩领先上代高端i7-3840QM大约15%，是i5低电压处理器的两倍以上。
　　3Dmark 11图形性能测试
▲GT 750M独显具备主流游戏本的性能
　　在性能方面，我们使用3Dmark 11对ENVY 17进行了测试，从图形项目得分可以看到，GT 750M属于主流游戏显卡的标配，性能较上代GT 650M提升10%左右，实测某些游戏可能会提升20fps左右。
　　PCmark 7\8 综合应用性能测试
▲PCmark 7测试得分较高 应用性能出色
　　PCmark7、8 是一款硬件效能评估工具，它比较侧重于日常软件的模拟评估。ENVY 17 Leap Motion SE在PCmark7测试中取得了4911分\PCmark8中得分3571（Home），这样的成绩高于目前笔记本的平均水平，完全满足我们运行Photoshop、After Effects 、3ds Max等大型软件的需求。
　　散热情况
　　温度测试环节，将ENVY 17拷机30分钟，室温在20度左右，用Fluke进行测试，可以看到正面键盘处热量有聚集，不过最高处仅有36度，所以手摸上去仍然比较凉爽，此时用软件监控CPU核芯温度在67度左右，属于正常范畴。而机身背面，由于内部空间较大，所以没有热量堆积，发热全在出风口附近。
　　PCMARK 8的续航测试
　　对ENVY 17 Leap Motion SE感受如下：
　　1、Leap Motion的软硬件配套很好，识别准确，可玩性高。
　　2、4 个扬声器和两个低音炮 Beats Audio娱乐音效好
　　3、全高清屏幕，但上下可视角度一般
　　4、触控屏幕偏厚重
　
　从产品来讲ENVY 17加入的新功能Leap motion确实很有意思。在玩腻了ASDW+鼠标操作的游戏后，偶尔来一局手势飞行或者徒手开赛车感觉很轻松，而且也活动了筋骨。推荐喜欢尝鲜的朋友不妨试试。
马逊报价11299元（点击查看
ENVY 17-J106TX）

如何在Unity中使用Leap Motion进行手势控制

一、对Leap Motion的能力进行评估
在设定手势之前，我们必须知道Leap Motion能做到哪种程度，以免在设定方案之后发现很难实现。这个评估依靠实际对设备的使用体验，主要从三个方面：
1.Leap Motion提供的可视化的手势识别界面
2.SDK文档说明
3.Leap商店中的APP
基本可以的得出：
1.Leap Motion的识别对于水平方向或者以水平方向为基础手势能够较好的识别。
2.对于握拳或者垂直的行为识别会出现误差，这种误差和具体的手势行为有关。
3.不应该过分依赖高精确度，Leap Motion能检测到毫米级别是没错的，但是有时候会把你伸直的手指识别成弯曲的，所以要做好最坏的打算。

Kinect和Leap Motion工作方式上有什么区别各自的优势是什么

Kinect侧重识别人体全身骨骼，但也可以识别脸和手（目前只能识别出两个手指），Leap Motion只能够识别手，但精度比kinect识别手的高。

leapmotion如何无线连接电脑

1、在电脑上打开蓝牙设置。
2、找到LeapMotion设备。
3、进行配对即可连接电脑。LeapMotion是面向PC以及Mac的体感控制器制造公司Leap于2013年2月27日发布的体感控制器，5月13日正式上市，随后于5月19日在美国零售商百思买独家售卖。

高通VR加入leap motion手部追踪!

高通近日向到家展示了其新型VR一体机，据悉，这款VR一体机加入leap motion手部追踪。

当下，不少尚在发展期的的技术可能成为突破 VR 输入障碍的钥匙，手部跟踪技术即是这些关键技术之一，而 Leap Motion 公司则是该领域行业龙头。

Leap Motion 取得的最新进展是手部跟踪技术与移动 VR 头显的结合。去年年底，该追踪系统已正式集成到高通出品的头显上。

这意味着在未来一年内，Leap Motion 的手部追踪系统“版图”或将继续往其他 VR 头显扩张。据 Leap 说，在头显开发过程中，手部跟踪技术完全是可选的，而且价格相对便宜(外部传感器成本仅为80美元)，所增重量相对头显整机而言更可忽略不计。

显然，该系统也不需要任何外设或硬件支持，甚至即便采用该技术，是否在应用中开启仍然是开发者/玩家的自由。这一点至关重要：许多第三方或实验版VR外设本就很难在头显制造商处获得支持，而与头显集成的手部追踪技术在使用中的“可选性”则大大降低了它的“侵略性”。开发者不必苦苦寻觅制造商支持，也不必担心相同技术在其他头显上的普及率，同时玩家也能拥有选择的余地。

CES大会上英特尔发布的参考级头显中也搭载了一款相似不同类的手部跟踪系统，但外媒证实高通版更优，因为相较之下后者的实际追踪性能要胜于前者(至少就目前而言)。

此次GDC大会上 Leap 的演示和以往别无二致：用户可以通过用手揉捏、拉伸来制造大小不同的物件。演示内容并非新事，但它在高通头显上的表现甚佳，当然也远非完美：手部动作的错读和手势的识别效率等问题依然存在。

希望Leap Motion能够在手部追踪技术走入消费级头显之前进一步解决这些问题，当然目前它的表现已值得圈点。

最后，Leap Motion存在着和其他手部追踪技术一样的问题：虽然它解放了用户的双手，但在与物件的交互中缺少触觉反馈。玩家仍不能在实际体验中感受到按、推等真实触感。

尽管如此，在Leap Motion公司的设想中，该技术的运行环境仍是那些不一定依赖于触觉反馈的应用。对于Leap和其他手部追踪技术而言，在OculusTouch等VR手柄不停发展的背景下，如何说服别人“手”才是最完美的输入机制、手部追踪系统才是未来VR的必要组件之一或将是该技术发展的关键。

自然，短期内手部追踪技术不会成为VR输入的主要形式，但Leap Motion对此并不“着急”：就目前而言，Leap追踪系统能够作为可选组件轻松添加到移动/PC头显中，而这正是公司将该系统运用在高通头显上的意义;它是对手部追踪技术在头显制造商中的一次推广，并能有机地扩大手部追踪技术的安装版图。

基于unity3D游戏引擎与leap motion体感控制器的体感音乐交互类游戏

体感音乐游戏融合了音乐，运动和游戏元素，使游戏玩家获得多种感官体验，受到

游戏玩家特别是年轻玩家的青睐。本文利用 unity3D 游戏引擎配合 leap motion 体感控

制设备实现了一种体感音乐交互游戏。主要使用了手势检测、节奏分析、碰撞检测等关

键技术实现游戏模式选择模块，音乐选择模块，游戏模块与分数结算模块。设计的游戏

利用 leap motion 体感控制设备将体感音乐融入到游戏环境中，游戏玩家可以通过手势

或键盘操纵游戏过程。由于加入体感控制设计，使游戏模式更加丰富，增强了游戏的可

玩性与玩家的活动范围。改变了传统的游戏模式，使得游戏过程更加灵活，更利于玩家

的身心健康。使用 DOTween 游戏动画引擎在游戏中添加的补帧动画效果使游戏界面更

加灵活，大大提升了玩家体验感。最后对实现的游戏进行了测试。

关键词 人机交互  Leap Motion 控制器  Unity3D  体感游戏  节奏分析

1.选择游戏模式

玩家进入游戏后，将会观看游戏进入指南与操作手势帮助（如图17、18所示），之后无需玩家操作，经过一段时间后自动进入模式选择场景。

玩家在此处可选择将手左滑锁定本地歌曲模式，这时可以看到写有“custom music”的游戏对象面积小幅度变大，而玩家将手右滑锁定内置歌曲模式时，可以看到写有“select music”的游戏对象面积以同等程度变大。

之后玩家握拳选定模式，这时被选中的模式相对应的游戏对象面积进一步增大，之后整个游戏场景逐渐消失黑屏数秒后进入相应的歌曲挑选场景，值得注意的是在场景黑屏之前取消握拳动作意味着玩家放弃选定，游戏对象的大小会恢复并等待玩家的下一次操作。

2.选择游戏歌曲

2.1本地模式

通过选定写有“custom music”的游戏对象进入本地歌曲挑选界面，玩家可以通过屏幕中显示的虚拟手型确定自己手部相对屏幕所处的位置 ，此时对于屏幕中所显示的歌曲对象，可以做出点击手势点击“listen”按钮试听音乐，点击“play”按钮开始所选择歌曲的游戏。

此时若界面中罗列了超出屏幕显示数量的歌曲，玩家可以通过手的上下滑动浏览歌曲列表。

2.2内置模式

通过选定写有“select music”的游戏对象进入内置歌曲挑选界面，玩家可以通过屏幕中显示的虚拟手型确定自己的手势动作，通过手的左右挥动来选择不同的歌曲，锁定歌曲后，玩家可以通过将手掌反转180°的操作来更换歌曲游戏的难易度，每翻转一次玩家都可以通过屏幕中的难易度栏来确认目前的游戏难易度，锁定难易度后，玩家通过握拳操作选定当前歌曲并且以此歌曲开始游戏，此时可以观察到屏幕中显示歌曲封面的对象面积逐渐增大，之后场景透明度降低，在数秒的黑屏缓冲后进入游戏场景。

值得注意的是，如果在场景进入黑屏之前取消握拳手势，则被认定为放弃进入游戏，屏幕中的封面游戏对象会逐渐恢复此前大小并等待玩家的下一次操作。

3.进入游戏

玩家进入游戏后可以看到以宇宙为背景的游戏场景，跟随音乐的节奏会在屏幕中出现蓝色节奏点，节奏点在运动至与屏幕下方的两个光球相同的z坐标位置时，玩家需要操纵两个光球，使其与节奏点x坐标重合，也就是所谓的“接住”节奏点。玩家“接住”节奏点时，屏幕上出现hit字样并增加玩家的生命值（如图23所示），当玩家错过某个节奏点时，屏幕上出现miss字样并减少玩家的生命值（如图24所示）。若玩家连续“接住”节奏点且没有任何一个点被错过时，玩家的连击数会根据“接住”的节奏点数量增加，一旦玩家错过了某一个节奏点，则连击数立即归零。

玩家通过手的左右滑动来操纵光球，光球时刻保持与玩家手所在位置相同的x坐标，而除此之外的y，z则保持游戏默认值不变，在游戏开始时玩家若判断音乐前奏过长影响游戏体验，可以通过握拳的手势跳过音乐前奏部分。在游戏进行的任何时间玩家都能够使用将手掌反转180°的方式更改游戏背景的颜色以享受更加舒适的游戏过程。

4.游戏结束

(1)显示游戏成绩

在歌曲结束后，游戏界面在数秒的黑屏缓冲后进入游戏分数结算场景，场景中会显示玩家当前游戏的得分与失分，也就是“接住”与错过的节奏点的数量，此外还会显示玩家的连击数与游戏等级，以此来判断本局游戏玩家的表现是否出色。

(2)选择下一步动作

此时屏幕右下方存在两个游戏对象分别写有“retry”与“back”字样，玩家通过手的左右挥动来做出不同的选择，被选择的游戏对象面积将会增大，锁定选择后玩家通过握拳动作进入相应的下一个场景，选择“retry”对象时，玩家将再次体验与上一局游戏相同的歌曲与难易度，选择“back”对象时，玩家将会回到相应的音乐挑选场景，从本地音乐模式进入时玩家回到本地音乐挑选场景，从内置音乐模式进入时玩家回到内置音乐挑选场景。