Gun-shaped pointing device

・Problem description

Large-screen touch devices are a very expensive commodity.

Even if you want it, it is difficult to install it later.

By reusing liquid crystal televisions and projectors at home,

If you can operate any application, the range of utilization that was not possible before will be expanded.

Therefore, we aimed to develop an inexpensive large-screen touch board that can be retrofitted.

大画面のタッチデバイスは、非常に高額商品です。

欲しくなっても、後からの取り付けは困難です。

家庭にある液晶テレビやプロジェクタを再利用し、

任意のアプリケーションを操作できるようになれば今までできなかった活用の幅が広がります。

そこで、後付け可能で、安価な大画面タッチボードの開発を目指しました。

• Spresenseの主要機能の利用

Demo Movie

A gun-shaped device with Spresense serves as an input interface.

The gun-shaped device is equipped with an infrared LED and emits light so that the position can be determined.

In addition, it detects tilt from the acceleration sensor, detects motion such as gun reload operation, and has a trigger and function button, and the operation is transmitted via BlueTooth.

And the status is displayed on OLED as feedback.

Reception of the gun type device is performed by Windows PC.

Originally developed software realizes the behavior of the Spresense input interface as an operation that imitates the mouse operation of the OS.

An infrared camera is connected to the Windows PC, and the position of the infrared LED is identified as spatial recognition by image analysis to identify the planar position.

By changing the installation position of the infrared camera, it is possible to operate from various directions.

Spresenseを搭載したガン型デバイスは、入力インターフェイスとして機能します。

ガン型デバイスには、赤外線LEDが仕込まれており位置がわかるように発光しています。

また、加速度センサから、傾きを検出し、ガンのリロード操作のようなモーションを検知したり、トリガーや、ファンクションボタンを備えており、その動作は、BlueTooth経由で送信します。

そして、状態は、フィードバックとしてOLEDで表示します。

ガン型デバイスの受信は、WindowsPCで行います。

独自で開発したソフトウェアが、Spresenseの入力インターフェイスの挙動をOSのマウス操作を模した操作として実現しています。

WindowsPCに赤外線カメラを接続し、赤外線LEDの位置を画像解析による空間認識として、平面位置を特定しています。

赤外線カメラの設置位置を変えることで、様々な方角から操作が可能です。

• ハードウェア

【ハードウェア】

◇Outgoing device [発信デバイス]

・SPRESENSE

・Bluetooth add-on Board

・SENSOR-EVK-701 KX122-1037

・NeoPixel LED

・Speaker

・OLED

・Trigger Button

・IR LED

・Battery

◇Recieve Device

・WindowsPC

・IR Camera

・BlueTooth

・TV / Projector

【Software】

・VisualStudio

・VisualStudio Code

• Principle [原理]

• Example [事例]