ブラウザで動くライブ楽器 · 登録不要

Gesture Synth手の動きを音楽に変えます。

手を上げ、親指と人差し指を合わせると音が鳴り、空中で動かすと音程と音色が変わります。この無料のGesture Synthは左右の手に別々の声部を割り当てるため、Webカメラだけでメロディー、ハーモニー、ゆっくり変化するドローンを演奏できます。気に入った演奏は15秒のクリップに録画し、ダウンロードまたはシステムの共有メニューへ送れます。 演奏・録画・端末内での全編プレビューは無料で、ログイン不要です。動画のダウンロードやシステム共有は1本US$9.99の買い切りで、定期契約はありません。書き出す際はGoogleまたはメール・パスワードでログインします。購入動画は支払いから30日間ダウンロードできます。ループのMIDIノート書き出しは無料ですが、動画や同じ音声は含みません。

入力
両手 / マウス
エンジン
端末内 Web Audio
出力
15秒の共有クリップ

ジェスチャーエンジンを読み込み中…

このページで直接録画

ひとつのポインターでメロディーを描く音を聴いてみましょう。

この15秒の演奏は、パブリックドメインの童謡「きらきら星」の冒頭です。マウスモードでCメジャー、68 BPM、温かい三角波を選び、ひと続きで演奏しました。映像と合成音は上の楽器と同じ端末内レコーダーで作成しており、マイク、ファイルのアップロード、別録りの音源は使っていません。

  1. 01マウスモードを開く
  2. 02Cメジャーで冒頭のフレーズを演奏
  3. 03録画してプレビュー、ダウンロード、または共有
自分の15秒クリップを作る

01 / 使い方

カメラの許可から最初の音まで、3つの手順だけです。

Gesture Synthは複雑な音楽ソフトを設定するより、目の前の楽器を手に取る感覚に近いツールです。アカウント、インストール、MIDI接続、空のプロジェクトは必要ありません。手の位置と音の関係を短時間で覚え、そのまま即興演奏を始められるよう操作を絞っています。

  1. 01

    楽器を開始する

    「カメラを開始」を押し、ブラウザに表示される許可画面でアクセスを認めてください。現在のブラウザは音を鳴らす前とカメラを使う前にユーザー操作を求めるため、同じクリックからオーディオエンジンも起動します。Webカメラがない場合や許可を出したくない場合は、マウスモードで同じシンセエンジンを演奏できます。

  2. 02

    親指と人差し指を合わせて音を鳴らす

    親指と人差し指を近づけると鍵盤を押したように音が始まり、指を離すと止まります。判定には小さな余裕を持たせているので、境界付近で指先が自然に揺れても、同じ音が細かく再発音されにくくなっています。

  3. 03

    動きで音程と音色を整える

    Sing & Playは左手の1〜4本の指で4つの設定済みコードを選び、右手の高さで音量、傾きで音色を調整します。両手を認識した場合のみ発音します。録画は15秒または120秒、初期設定は120秒。従来の3モードは15秒です。 演奏・録画・端末内での全編プレビューは無料で、ログイン不要です。動画のダウンロードやシステム共有は1本US$9.99の買い切りで、定期契約はありません。書き出す際はGoogleまたはメール・パスワードでログインします。購入動画は支払いから30日間ダウンロードできます。ループのMIDIノート書き出しは無料ですが、動画や同じ音声は含みません。

02 / ジェスチャー操作

Webカメラの画面が、2次元の演奏スペースになります。

横方向で音程、縦方向でフィルターの明るさを選び、親指と人差し指の距離で音をオン・オフします。左右の手は同じ規則を使います。2本目の声部は別の楽器を覚えるものではなく、同じ空間にもうひとつ動く鍵盤を置く感覚です。

X / 横方向
現在のスケールに含まれる音を選びます。音程はスケール内に固定されているため、大きく動いても半音の間へ迷い込まず、メロディーのまとまりを保てます。
Y / 縦方向
ローパスフィルターの開き具合を調整します。手を高くすると輪郭のある明るい音になり、低くすると高域が抑えられて温かく柔らかな音色になります。
指先の距離
小さなヒステリシスを使って発音と停止を切り替えます。指先がトリガー位置の近くで細かく動いても、長く伸ばした音を安定して保てます。

03 / 自分の音を作る

無数のノブではなく、演奏に役立つ選択だけを残しました。

スケール

最初の動きから自然なメロディーを作れます。

メジャーペンタトニックは明るく、外れた響きになりにくいため、初めての演奏に向いています。7音のなじみある動きにはメジャー、少し暗い中心にはマイナーを選んでください。ルートを変えると、覚えた手の動きはそのままに、音域全体を別の調へ移せます。

波形

楽器の輪郭を選びましょう。

サイン波は滑らかで軽く、三角波は少しだけ輪郭が強くなります。ノコギリ波ではフィルターの動きがはっきり聞こえ、矩形波は空洞感のあるゲーム音のような質感になります。同じエンベロープが短い音にも長く伸ばす音にも反応するため、複雑な音作りは必要ありません。

代替操作

Webカメラがなくても、楽器はそのまま使えます。

マウスモードはカメラモードと同じ音域、スケール、波形、シンセエンジンを使います。ポインターを動かして位置を確かめ、押したまま音を鳴らし、ドラッグしてスケール上のメロディーをつないでください。カメラを許可する前に操作を覚える最も速い方法でもあります。

04 / カメラとプライバシー

プライバシー

リアルタイムのカメラ解析と手の座標は端末内で処理し、アップロードしません。マイクは別途有効にした場合のみ録音に混ぜ、スピーカーには返しません。購入を確認した場合に限り、選んだ録画だけを支払い前に非公開ストレージへ送信します。マイクを使った録画には声も含まれます。

再読み込み後の復元用に、ブラウザはプレビューを24時間保存しようとしますが、消去される場合があり、バックアップではありません。アップロード済み未払い動画は最大30日間保存します。支払い済み動画は支払いから30日間ダウンロードでき、その後は定期的に削除します。再ダウンロードしても期限は延びません。

  • 演奏・録画・全編プレビューは無料。動画のダウンロードや共有は US$9.99 /動画1本。買い切りで、定期契約はありません。
  • Googleとメール・パスワードは、同じメールアドレスでも別のアカウントで、自動統合されません。購入時と同じ方法でログインしてください。
  • プレビューと同じ動画です。対応ブラウザはMP4、それ以外はWebM。支払いから30日間ダウンロードできます。
  • マイクはオン。コードと一緒に録音しますが、スピーカーには返しません。ヘッドホンを推奨します。

05 / よくある質問

手をカメラに映す前に、知っておきたいこと。

ここでは gesture-synth.com の Gesture Synth について説明しています。親指と人差し指を合わせるか、マウスまたはタッチで演奏エリアを押し続けると音が鳴ります。左右の位置で音を選び、上下の位置で音色の明るさを変えます。

Gesture Synthとは何ですか?

演奏・録画・端末内での全編プレビューは無料で、ログイン不要です。動画のダウンロードやシステム共有は1本US$9.99の買い切りで、定期契約はありません。書き出す際はGoogleまたはメール・パスワードでログインします。購入動画は支払いから30日間ダウンロードできます。ループのMIDIノート書き出しは無料ですが、動画や同じ音声は含みません。

テルミンと同じ楽器ですか?

同じではありません。一般的なテルミンは電磁界で手の位置を測り、音程を連続的に変化させます。Gesture SynthはWebカメラとブラウザの手のトラッキングを使い、横位置を選択中のスケールの音へ割り当てます。触れずに演奏する点は似ていますが、技術、反応、音程の扱いは異なります。

Synthesizer Vのような歌声合成ソフトですか?

Sing & Playではマイクを任意で有効にし、シンセの伴奏と歌声を録音できます。声の変換やボコーダー機能はありません。無料MIDIはループのノート情報で、動画や元の音声、DAWとのリアルタイム接続ではありません。

MIDIコントローラーやソフトのインストールは必要ですか?

必要ありません。このページを開けば、Webカメラまたはマウスですぐ演奏できます。ドライバー、DAW、MIDIケーブル、専用ハードウェア、ユーザーアカウントは不要です。

Webカメラの映像はサーバーへ送られますか?

リアルタイムのカメラ解析と手の座標は端末内で処理し、アップロードしません。マイクは別途有効にした場合のみ録音に混ぜ、スピーカーには返しません。購入を確認した場合に限り、選んだ録画だけを支払い前に非公開ストレージへ送信します。マイクを使った録画には声も含まれます。 再読み込み後の復元用に、ブラウザはプレビューを24時間保存しようとしますが、消去される場合があり、バックアップではありません。アップロード済み未払い動画は最大30日間保存します。支払い済み動画は支払いから30日間ダウンロードでき、その後は定期的に削除します。再ダウンロードしても期限は延びません。

Webカメラなしでも演奏できますか?

はい。マウスモードでは横の動きで音程、縦の動きで明るさを調整し、マウスボタンを押すと音が鳴ります。スケール、波形、音量、シンセエンジンはカメラモードと同じです。

どのブラウザで最も安定して動きますか?

パソコン向けの最新ChromeまたはEdgeは、カメラアクセス、WebAssemblyの高速化、低遅延のWeb Audioを比較的安定して同時利用できます。SafariとFirefoxも主要APIに対応していますが、端末やバージョンによって動作が異なる場合があります。

演奏を録画して共有できますか?

Sing & Playは左手の1〜4本の指で4つの設定済みコードを選び、右手の高さで音量、傾きで音色を調整します。両手を認識した場合のみ発音します。録画は15秒または120秒、初期設定は120秒。従来の3モードは15秒です。 演奏・録画・端末内での全編プレビューは無料で、ログイン不要です。動画のダウンロードやシステム共有は1本US$9.99の買い切りで、定期契約はありません。書き出す際はGoogleまたはメール・パスワードでログインします。購入動画は支払いから30日間ダウンロードできます。ループのMIDIノート書き出しは無料ですが、動画や同じ音声は含みません。

Practice resources · English

Full tutorial · English

English resources: note positions, short exercises and saving your take.

信号の準備完了

説明はここまで。空気の動きを音に変えてみましょう。

Gesture Synthへ戻る