裸眼3Dディスプレイ、2D動画をAIで3D化 目の位置も追跡
とんでんの店舗で、2D動画をリアルタイムで3D化し視聴者の目も追う裸眼3Dサイネージの実証が始まった。ただ、うまく見えるのは1人だけだ。
ディスプレイの前に立つと、おせち料理が画面から手前に浮き出して見えた。3Dメガネはいらない。体を左右に動かせば、料理の見える角度も変わる。AIがカメラで見る人の目の位置を追っているためだ。元の映像はごく普通の2D動画で、AIがその場で3D化している。
和食チェーンのとんでん、ソフトバンク、SBクリエイティブの3社は11月12日、この裸眼3Dのデジタルサイネージの実証実験を、とんでん白幡店（さいたま市）で報道陣に公開した。ソフトバンクによると、この3Dディスプレイの国内実証は初めて。3D映像が2D映像より来店客の注目を集め、料理への関心や購買意欲を高めるかを調べる。
裸眼3Dディスプレイの仕組みは？
ソフトバンクの公文勇二氏は3つの技術を挙げた。1つ目は、かまぼこ状のレンズを並べて左右の目に別々の映像を届ける「レンチキュラーレンズ」。2つ目は、映像内の奥行きを推定して右目用と左目用の映像を生成する「深度推定AIモデル」だ。これにより3D専用の映像を作らなくても、既存の2D動画をそのまま使える。公文氏は「一番のポイント」と話す。3つ目は、カメラ映像から視聴者の目の位置を検出する「AIアイトラッキング」で、位置に合わせて映像を調整する。
課題は「1台につき1人」
アイトラッキングが検出できるのは、ディスプレイ1台につき1人。複数人で見ると、全員に3Dに見えるわけではない。ほかの記者が体験する様子を離れて見ると、角度によって画面が蜃気楼のようにゆがんで見えた。客が行き交う飲食店で何人に届けられるかは課題になりそうだ。
SBクリエイティブは今後、この技術をクラウド型サイネージ配信システム「BeyondCAST」に組み込む考えだ。実現すれば、企業は手持ちの2D動画を登録するだけで3Dディスプレイに流せる。
効果はアンケートなどで確かめる。12日午後3時時点では、「3Dに飛び出して見えたか」などの設問は肯定的な回答ばかりだった。「おせちへの興味が高まったか」は「高まった」が大半で、「変わらなかった」も数票あった。両社は結果を踏まえ、商用化を検討する。
注目のアプリ
SUMO：数字パズル正しいマスを選んで足し算、目標の数に。覚えるのは簡単、極めるのは難しい。無料、全年齢向け。
Dialo：話して学ぶ語学アプリAIの会話パートナーと話すだけ。一文ごとに添削され、あなたの言語で解説が返ってきます。9言語、A1からC2まで。
ediviewer：EDIファイルを文書のように読むEDIFACTやX12メッセージを開き、各セグメントの意味を表示。JSON/XML変換、PDF・Excel出力。ローカルで動作、アップロード不要。
giftdetect：数分でぴったりの贈り物相手、シーン、性格を選ぶだけ。検索エンジンが地元ショップの商品説明を読み、合うものを並べます。無料、登録不要。
