芝工大,一体感が共有できるライブ体験システムを開発

芝浦工業大学は,脳波などの生体信号から複数の参加者の精神的な盛り上がりを計測し,度合いに応じてハートマークや桜吹雪などの視覚効果として演出し一体感を世界中で共有できるエンターテイメントシステムを開発した(ニュースリリース)。

没入型ヘッドマウントディスプレーの登場により,自宅にいながら没入感のあるライブを視聴することが可能となっている。しかし従来のライブ体験システムでは,受動的視聴が多く演者と複数の観客の相互作用から生じる一体感を得られにくいという問題があった。

そこで研究グループは,ライブ参加者全員が簡易脳波計を装着し,取得した脳波から全員の集中度を解析。解析結果に基づいた視覚効果をそれぞれのライブ画面に視覚的に再生することで,一体感が感じられるシステムを開発した。

このシステムは,簡易脳波計で脳波などを測定し,精神的な盛り上がりに伴って増加する脳波のβ/α比が増加し,閾値を超えたときに視覚効果を生成し表示する。今回「クライアント型」と「サーバ型」を開発した。

実装例として,ユーザ数と同数の簡易脳波計,タブレット端末,没入型ヘッドマウントディスプレー,クライアントPC,および1台のサーバPCから構成し,各ユーザは脳波計と没入型ヘッドマウントディスプレーを装着し,額部と耳部の間で計測された脳波信号をタブレット端末上に送信する。計測された脳波信号からβ/α比を算出。クライアントPC上のデータ処理プログラムに送信する。

「クライアント型」では同データ処理プログラムがβ/α比に対応する視覚生成情報を生成し,サーバPC上に送信する。その後全クライアントPC上に共有し,全ユーザの画面に反映する。「サーバ型」の場合は,クライアントPC上のデータ処理プログラムではβ/α比の処理はせず,サーバ上のデータ処理プログラムにて平均値を算出する。盛り上がりに伴って増加する脳波のβ/α比が増加し,閾値を超えたときに視覚効果を生成し表示させる。

今回,6名(3名1組)で実験を行なった結果,「クライアント型」では,他のユーザとは効果を共有しない従来のシステム型よりも一体感を感じるアンケート評価が上回り,「サーバ型」でもβ/α比の増加のタイミングが揃って効果が生成されたときには一体感や達成感を感じる感想が得られたという。

研究グループは,このシステムが場所を選ばずに参加をして一体感を感じることができるため,2020年東京オリンピック開催に伴うライブ会場不足や,ライブ会場のバリアフリー化の遅れの解決も期待されるとしている。

新着記事

  • KEKら,機械学習でX線吸収スペクトル解析を自動化
    KEKら,機械学習でX線吸収スペクトル解析を自動化 2019年04月19日
  • 浜ホト,世界最高出力産業用パルスレーザーを開発
    浜ホト,世界最高出力産業用パルスレーザーを開発 2019年04月19日
  • 東北大ら,高温・大気中で安定なn型混合導電体を開発 2019年04月19日
  • JSTとAMED,2019年度の目標決定と課題の公募を開始
    JSTとAMED,2019年度の目標決定と課題の公募を開始 2019年04月19日
  • 阪大,セルロースの固有複屈折を解明 2019年04月18日
  • 住友化学,米企業と光学フィルムなどを開発 2019年04月18日
  • 技科大ら,光合成に黄緑色光を使うための光スイッチを発見 2019年04月18日
  • 2025年デジタル・デバイス市場,32.8%増の7168億円 2019年04月18日