ORPHE フラ・モーションソニファイア

ORPHE INSOLE 2台で、足裏圧ヒートマップ、IMU、CoP、Kāholo / Hela / ʻAmi のリアルタイムフェイズ推定、音生成、JSONセッション保存を試すプロトタイプです。

読み込み中...
音声オフ 停止中

接続

2台のインソールを接続し、左右を割り当てます。自動割当は利用可能な場合に mount_position のbit0を使います。

未接続
デバイス情報待ち
割り当て: 未割当
Bluetooth未接続 センサー受信待機中 バッテリー不明 通信モードMode 4
未接続
デバイス情報待ち
割り当て: 未割当
Bluetooth未接続 センサー受信待機中 バッテリー不明 通信モードMode 4

足裏圧とCoP

片足6点の圧力を表示します。青い点は推定Center of Pressureです。

左足

リアルタイム足裏圧ヒートマップ

0 0 0 0 0 0
合計圧0
前足 1-40%
前+中 1-50%
踵 60%
加速度x--y--z--
ジャイロx--y--z--

右足

リアルタイム足裏圧ヒートマップ

0 0 0 0 0 0
合計圧0
前足 1-40%
前+中 1-50%
踵 60%
加速度x--y--z--
ジャイロx--y--z--

見える閾値

ダンサーと実機テストしながら調整できます。後で学習モデルを作る前に、まずはシンプルで説明できる判定にしています。

検出語彙

まずは確実に区別したい3ジェスチャだけに絞ります。過検出する候補はここでOFFにできます。

センサー信号の割り当て

白丸の図番号は物理位置です。実機の press.values の順番が図と違う場合は、ここで対応する信号番号を入れ替えてください。

左足

図の番号ごとに、対応する実機の信号番号を選べます。

右足

図の番号ごとに、対応する実機の信号番号を選べます。

検出イベントと教師ラベル

テイク後にダンサー/教師のラベルとメモを追加できます。ラベルはエクスポートするJSONに含まれます。

ジェスチャ収録データセット

判定アルゴリズムを作り直すために、3つのジェスチャを教師ラベル付きで収録します。圧力、CoP、加速度、ジャイロ、試行ID、区間ラベルを1つのJSONに保存します。

区間0
圧力0
IMU0
マーク0
経過0s
「連続収録開始」を押してから踊り、動きが変わるタイミングでKāholo/Hela/ʻAmi区間ボタンを押してください。
  1. 「連続収録開始」を押して、Kāholo / Hela / ʻAmi を好きな順番で何回か繰り返す。
  2. ジェスチャが切り替わるタイミングで、該当する区間ボタンを押す。フェイズ指定は不要です。
  3. 休止や分からない動きは「区切り/未ラベル」、特徴的な瞬間は「注釈マーク」。
  4. 終わったら「収録停止」して「収録JSON保存」。