AGIラボ
...
🖐️
✌️
👍
☝️
🤟

Hand & Eye Gesture Control

AGI Gestures

手と目で、Macを操る。
カメラひとつで、ジェスチャーがショートカットになる。

ジェスチャー × アクション

好きなジェスチャーに、好きな操作を割り当てる。設定例:

👍
サムズアップ

プレゼンのスライド送り

(例) Enter キーを実行
✌️
ピース

スクリーンショット撮影

(例) ⌘⇧4 を実行
🖐️
パー

動画の再生 / 一時停止

(例) Space キーを実行
グー

直前の操作を取り消す

(例) ⌘Z を実行
☝️
指差し

Webページを読み進める

(例) スクロールを実行
👎
サムズダウン

不要なタブを閉じる

(例) ⌘W を実行
🤟
アイラブユー

音声入力に切り替え

(例) 🎙 Fn Fn を実行
両手

両手ジェスチャー

左手と右手の組み合わせで、さらに多くのアクションを。設定例:

✌️+

全ファイルを保存

(例) ⌘⇧S を実行
🖐️+🖐️

アプリを終了

(例) ⌘Q を実行
👍+✌️

スクリーンショット

(例) ⌘⇧4 を実行

目のジェスチャー

まばたきやウインクで、手を使わずに操作。設定例:

😌

文字起こしを開始

(例) ⌘⇧9 を実行
◁😉

直前の操作を取り消す

(例) ⌘Z を実行
😉▷

やり直す

(例) ⌘⇧Z を実行

しくみ

📷

カメラが捉える

Macの内蔵カメラで手と目を認識

🧠

AIがジェスチャーを判定

AIがMac上でローカル処理

アクション実行

ショートカット・マウス操作を発火

完全ローカル処理。カメラ映像はセキュアに保護。

ジェスチャー認識はすべてMac上で完結します。カメラ映像や認識データが外部サーバーに送信されることはありません。AIモデルもアプリにバンドルされており、オフラインでも動作します。

ローカルAI処理ネットワーク通信なしオフライン動作カメラ映像は端末内で完結

機能

片手・両手のジェスチャーを、キーボード・マウス・テキスト入力に変換。

10種のジェスチャー

手の7種+目の3種(両目閉じ・左右ウインク)。直感的な操作を実現。

ショートカット実行

任意のキーボードショートカットを割り当て。修飾キーも自由自在。

マウス・スクロール

スクロール、マウス移動、クリックを加速度付きで操作。

両手ジェスチャー

左手と右手の組み合わせで、さらに多くのアクションを割り当て。

連続実行

ジェスチャー維持中はキーを押し続ける。スクロールに最適。

オーバーレイ表示

認識中のジェスチャーとプログレスを画面中央にリアルタイム表示。

テキスト入力

定型文やスニペットをジェスチャーひとつで入力。

左右の手を区別

同じジェスチャーでも手ごとに別のアクションを設定可能。

AGIラボログイン

AGIラボでログインすると、すべてのジェスチャー設定と機能を利用できます。

こんな使い方ができる

ハンドジェスチャーで、Macの操作をもっと自由に。

🎬プレゼン中にスライドをジェスチャーで操作
🍳料理中や手が汚れている時にハンズフリーで操作
🎵動画・音楽の再生・停止をジェスチャーでコントロール
📡配信中にシーン切り替えやエフェクトをトリガー
🎙ジェスチャーで macOS 音声入力を起動してハンズフリー入力
アクセシビリティ支援としてキーボード操作を代替

バージョン履歴

直近のリリース履歴と変更内容。

ダウンロード

macOS (Apple Silicon) 対応 / 利用にはAGIラボログインが必要

AGI Gestures - 手と目のジェスチャーでMacを操作