Blob Opera
Blob Operaは、David LiがGoogle Arts and Cultureと共同で制作した機械学習の実験作品です。オペラ歌手は自身の声を、表現豊かで美しい楽器として用います。この実験はそうした声に敬意を表し、誰もが演奏法を学べる楽器として位置づけています。4つのオペラの声をリアルタイムで演奏しましょう。歌唱スキルは一切不要です!
私たちは4人のオペラ歌手と協力し、機械学習モデルに歌い方を教えました。テノールのChristian Joel、バスのFrederick Tong、メゾソプラノのJoanna Gamble、ソプラノのOlivia Doutneyが16時間の歌唱を録音し、畳み込みニューラルネットワーク(Convolutional Neural Network)と呼ばれるアルゴリズムのトレーニングに使用しました。この実験で聴こえるのは彼らの声そのものではなく、彼らから学んだことに基づいて、機械学習モデルがオペラ歌唱とはどのような響きかを理解した結果です。ブロブを上下にドラッグして音程を変えましょう。前後にドラッグすると異なる母音になります。別の機械学習モデルにより、ブロブはあなたの入力にリアルタイムで反応し、ハーモニーを奏でます。
プレイヤーコメント