ピアノ on akky@サイボウズラボ・ブログ

Audeo - 鍵盤部分だけのピアノ上で動かした手の映像から音を鳴らす技術

Mon, 08 Feb 2021 00:00:00 +0000

音が鳴らないピアノを弾いた手の映像から、指の動きを見て音声をつけるという研究[pdf]が Audeo です。

ワシントン大学のエリ・シュリザーマン氏の研究室のこの研究では、音楽家がピアノを弾いている「映像」だけを持ってきて、その映像から本来流れていたであろう「楽曲」を構築します。

ピアノ演奏の動画(映像)からピアノロールに変換するコンポーネント(Video2Roll)、生成されたピアノロールから指が重なって見えない箇所や音楽的に不自然な個所を本来の演奏に近いMIDIデータに変換するコンポーネント(Roll2Midi)、MIDIから楽曲を再生するコンポーネント(Midi Synth)を通すことで、ピアノの上で動かした指から、音楽を鳴らせたそうです。動画があります。

ピアノの音色を変えることもできますし、ピアノを弾くことでバイオリンを鳴らす、みたいなこともできますね。

研究としては音階と指がはっきり見えているピアノが適していて実現可能性が高かったのかもしれませんが、演奏の動画から音程が取れるなら、他の楽器についても同様のことはできるようになるのでしょう。

この研究が進めば、テーブルで指を動かすだけでスマートフォンが曲を鳴らす、みたいなこともできるようになるかもしれないですね。

via TheNextWeb

Pianogram - 鍵盤のどの音階がどれぐらい弾かれるかを可視化

Wed, 26 Nov 2014 00:00:00 +0000

Pianogram は、ある曲がピアノ上で弾かれる際に、どの鍵がどれぐらい使われるかというのを可視化するサービスです。

上はリストのラ・カンパネラを処理したもの。

「エリーゼのために」や、可視化の結果がわかりやすいショパンの「黒鍵のエチュード」や「チョップスティックス」など10曲を選んで、解析結果が表示できるようになっています。

また、MIDI形式のファイルをアップロードすれば同じように解析してくれます。拡張子.MID のピアノ曲のファイルを上げてみたところ、それらしい結果が出力されました。

via Flowing Data

丸いピアノPianoArc

Thu, 13 Nov 2014 00:00:00 +0000

PianoArcは丸いピアノです。

レディーガガの2012-2013ワールドツアーで、ツアーピアニストのブロケット・パーソンズさん(Brockett Parsons)が使用していた、演者の周りをぐるっと囲む円形のキーボード。

当然、音階がどうなってるのかという疑問がわきます。一周したって上がり続けるわけではないでしょう。88鍵のピアノが3台分繰り返して、残りの28鍵が制御用、全部で292キーとなるそうです。

サイズ的に複数入っての連弾も可能。というか、腕2本だけで約300鍵をフルに活用する演奏をする方がたいへんそうな気がします。

パーソンズさんを中心としたチームがPianoArcを開発したわけですが、注文すれば別のを作ってもらうことも可能だということです。お値段は「ご相談」ということ。

via PianoArc Keyboard Controller :: Gadgetify.com

鉄拳ピアノ - ピアノを格闘ゲームのコントローラに。闘いながら音を鳴らす

Fri, 31 Jan 2014 00:00:00 +0000

Geoggrey “McCool” Guterl さんのプロジェクト Tekken Piano は、ビデオゲームのコントローラを電子ピアノに置き換えてしまうというもの。

電子ピアノからのMIDI出力を、arduino 経由でXBOX360 に接続しています。インタラクションデザインのプロジェクトとして一学期掛かって制作したそうです。

ゲーム内のキャラクターを操作するとピアノとしての音も鳴るので、操作の結果が音楽としても聴こえます。音の割り当てを工夫すると、音楽としてももっと聴けるものになったりするかもしれませんね。

via Guy Plays Tekken With Electric Piano For Controller | Geekologie

意思を持ったかのような「魔法のピアノ」

Fri, 13 Dec 2013 00:00:00 +0000

シカゴのユニオン駅、時計塔のグランドホール広場に設置されたグランドピアノ、ただの自動演奏ピアノかと思いきや、周りの人に反応して弾く内容が自由に変化します。

もし4分弱の時間があったら、後ろの説明読む前に動画を観たほうが楽しいですよ。

リモートで演奏できるように作られたこのピアノを弾いているのは、地元のピアニストAndrew Blendermannさん。

習ったばかりなのかな? 拙く引き出した小さな女の子ですが、びっくりすることが。

思わず踊りだす人も。

ゴキゲンなジャズに立ち止まった男性がたまたま持っていた箱の中身は?

ハーモニカ吹きのおじいさんともコラボ