ＮＴＴ、視聴したい部分のみ配信するインタラクティブ・パノラマ映像配信技術を開発

見たいところが自由に選べる
インタラクティブ・パノラマ映像配信技術を開発
〜よりリアルな視聴体験が安価なＩＰネットワークで実現可能に〜



　日本電信電話株式会社（本社：東京都千代田区、代表取締役社長：三浦惺、以下ＮＴＴ）は、複数台のカメラで撮影した映像を広視野なパノラマ映像として合成・圧縮し、そのパノラマ映像の中で、ユーザが視聴したい部分のみを効率的に配信するインタラクティブ・パノラマ映像配信技術を開発しました。
　なお、本技術の検証のために２月中旬に実ユーザをモニターとした実証実験を実施し技術の有効性を確認しました。
　本成果は、大容量のパノラマ映像を安価なＩＰネットワークで配信し、ユーザが見たい部分を自由に視聴可能なインタラクティブ・パノラマ映像配信サービスを提供することを可能にするものです。


１．背景と目的
　近年、大画面テレビやブロードバンドネットワーク環境の普及に伴い、ＩＰＴＶサービスへの注目がますます高まっています。それにともない、ＩＰＴＶのサービスも多様化し、立体感ある３次元映像や、ハイビジョンの４倍の解像度を持つ４Ｋ映像のような高精細・高解像度の映像により、臨場感あふれる映像コンテンツのラインナップが充実してきました。しかし、臨場感あふれる映像が配信されても、「配信された映像をそのまま受動的に視聴する」という現在の視聴スタイルでは、音楽ライブなどをイベント会場で視聴しているかのような「その場にいる臨場感」を得ることは難しいと言えます。これは、私達が劇場やスタジアムに赴いた際は、頭や目を動かして、全体を見たり、好きなアーティストや選手だけを追って見るなど、自由に好きなところを見る能動的な行動が伴うのに対し、配信された映像を受動的に視聴する場合、視聴できる映像は画一的であり、限られているためです。
　これまで、「その場にいる臨場感」を実現するためには、高精細・高解像度な映像全体を常に配信し続ける必要がありましたが、この方法では映像のデータ容量は膨大になり、安価なＩＰネットワークで配信するのは困難となります。
　今回開発した技術は、複数台のハイビジョンカメラで撮影した映像を広視野なパノラマ映像として構築し、パノラマ映像の中からユーザが視聴している領域を効率的に配信することにより、現在普及している安価なＩＰネットワークでも、ユーザが視聴したい部分を自由に選択し、体感品質よく視聴することを可能にします。これによりユーザは、「視聴したいところを自分で選んで視聴する」という、能動的な視聴が可能になり、あたかもイベント会場で視聴しているかのような、よりリアルな臨場感を味わうことができます。


２．技術の特徴
　（１）パノラマ映像合成
　　　広角に配置した複数台のハイビジョンカメラを用いて撮影された映像から、重なりあう部分の３次元情報を推定して、それぞれのカメラ間の連続した映像を合成することで、広範囲な視野の映像を表現する、つなぎ目のない高解像度のパノラマ映像を合成します。
　（２）パノラマ映像符号化・配信
　　　パノラマ映像を複数のタイルに分割し、映像符号化国際標準方式Ｈ．２６４　Ａｎｎｅｘ　Ｈ（ＭＶＣ）を用いて同期した形で圧縮符号化します。そして、ユーザに要求された視聴領域が含まれるタイルを高い解像度と符号化レートで、それ以外の部分は符号化レートを抑えた形で、必要なタイルのみを同期配信することで、ネットワーク帯域を効率的に利用することができ、かつ、ユーザが視聴領域を操作する際に映像をスムーズに移動や拡大縮小できるので、体感品質よく映像を視聴することができます。

　技術の詳細については【別紙１】をご参照ください。


３．技術評価実験
　本技術を一般のユーザに体験して頂き、映像品質や操作性などについて検証するとともに、ユーザがどのような視聴行動をとるのかという点などについて調査することを目的として評価実験を実施しました。今回の実験により、視聴している領域を効率的に配信することで、安価なＩＰネットワークにおいてもパノラマ映像配信サービスの提供が可能であることを確認できました。実際体験して頂いた皆様からは、映像の品質について良い評価を頂いただけでなく、「操作できるのが非常に面白かった」「チケットが購入できずライブに行くことができなかったときにこのようなサービスがあると便利だと思う」というように、サービスの内容についても非常に高い評価をいただきました。一方でご要望として、「もっとズームアップして見たい」「操作感をもっと良くしてほしい」といったご意見をいただきました。

　《実験概要》
　　１．日時、場所：２０１１年２月９日〜１６日　カラオケ店舗（ビッグエコー）２店舗（東京・大阪）
　　　　　　　　　　　※株式会社第一興商様のご協力により実施
　　２．視聴環境：（視聴端末）ＰｌａｙＳｔａｔｉｏｎ（Ｒ）３の開発ツール（※１）、ＰＣ
　　　　　　　　　　（利用回線）フレッツ光
　　　　　　　　　　※技術評価実験のシステム構成については【別紙２】参照
　　３．配信映像：＜１＞Ａｌｉｃｅ　Ｎｉｎｅ“ＴＯＫＹＯ　ＧＡＬＡＸＹ”（２０１１年１月６日、於　日本武道館）
　　　　　　　　　　　※（有）ＰＳ　ＣＯＭＰＡＮＹ様、（株）徳間ジャパンコミュニケーションズ様のご協力により実施
　　　　　　　　　　＜２＞中野腐女シスターズ他　“腐女らＮｉｇｈｔ　ＬＩＶＥ−Ｚ〜腐華絢爛〜”
　　　　　　　　　　　（２０１０年１２月３０日、於　Ｓｈｉｂｕｙａ　Ｏ−ＥＡＳＴ）
　　　　　　　　　　　※（株）ケイダッシュステージ様のご協力により実施
　　４．参加者：各アーティストのファンクラブから募集した約９０名

　　※１　株式会社ソニー・コンピュータエンタテインメント様のご協力により借用。ＰｌａｙＳｔａｔｉｏｎ（Ｒ）３は、株式会社ソニー・コンピュータエンタテインメント様の商品です。また、「ＰｌａｙＳｔａｔｉｏｎ」は同社の登録商標です。


４．今後の予定
　広視野なパノラマ映像を用いたインタラクティブ・パノラマ映像配信サービスは、これまでとは全く異なる映像配信サービスになるため、本実験で得られた技術的・サービス的な知見を活かし、今後の研究開発の方向性について検討するとともに、本技術の実用化に向けた技術開発、サービス性の向上を目指します。



・【別紙１】インタラクティブ・パノラマ映像配信技術について
　＊添付の関連資料を参照

・【別紙２】技術評価実験のシステム構成について
　＊添付の関連資料を参照