サービス

技能：エンジニア

技能：デザイナー

技能：ビジネス職

技能：バックオフィス

ジャンル

<h3>はじめに</h3>

<p>こんにちは！ DMM VR labのパトリックです。<br />
『GDC』に引き続き『IEEE VR 2019 OSAKA』にも参加して参りました。</p>

<p>『GDC』についての記事はこちらからご覧ください。</p>

<p><a href="https://inside.dmm.com/technology/gdc-vrdc-2019" target="_blank">DMMのVRリサーチャーがみたGDC/VRDC 2019</a></p>

<p><a href="https://inside.dmm.com/entry/2019/04/04/gdc-vrdc-2019" target="_blank">inside.dmm.com</a></p>

<p>『IEEE VR』は1993年から続くVRの国際学会で、毎年多くのVR研究者が論文を発表しています。<br />
過去最大規模で開催された今年は、140の口頭発表、200を超えるポスターセッション、35以上のリサーチデモ、18以上のワークショップが行われました。</p>

<p>すべてをご紹介することは難しいので、今回も一参加者の視点でレポートしたいと思います。</p>

<h3>ワークショップ</h3>

<p>『IEEE VR』のワークショップは3/23(土)と、3/24(日)に主に行われました。<br />
そのなかでとくに興味深かったのは、VRにおけるさまざまな倫理の課題についてディスカッションを行った「EVR:The First IEEE VR Workshop on Ethics in VR」と、VR/ARの周辺技術により実現できる次世代の超人スポーツについて考察する「SHS: The First IEEE VR Workshop on Superhuman Sports」という２つのワークショップでした。</p>

<h4>EVR:The First IEEE VR Workshop on Ethics in VR</h4>

<p style="text-align:center"><img alt="" height="600" src="https://image.dmm-corp.com/50vgimk7bh4z3n6sprm2r4j07mhe" width="800" /></p>

<p>VRは現実のエッセンスを抜き出し、究極的には体験者にとって現実と見分けがつかないコンテンツを提供します。<br />
そして文字どおりなんでもできるため、コンテンツを提供する立場としては高い倫理観が求められます。<br />
ワークショップでは、「責任を持って価値あるVRコンテンツを創造するには？」をテーマに、少人数のグループでディスカッションを行いました。</p>

<div data-oembed-url="https://twitter.com/AATudor/status/1109642973619208193?s=20">
<div style="max-width: 550px;">
<div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 56.25%;"><iframe allowfullscreen="" src="//if-cdn.com/jDUJwzW?app=1" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" tabindex="-1"></iframe></div>
</div>
<script async="" charset="utf-8" src="//if-cdn.com/embed.js"></script></div>

<p>ワークショップのオーガナイザーを務めたAna-Despina Tudor博士(London College of Comunication)によると、VR制作における倫理の問題は7つに大別できます。<br />
<strong>1.Misrepresentation</strong><br />
　不正確な情報を誤って伝えること<br />
<strong>2.Bias</strong><br />
　偏見・先入観を与えること、また偏見・先入観を持って情報を伝えること<br />
<strong>3.Long term immersion</strong><br />
　長時間没入させること<br />
<strong>4.Privacy</strong><br />
　ユーザーのプライバシーを侵害すること<br />
<strong>5.Causing involuntary suffering or serous harm</strong><br />
　ユーザーにトラウマなど、実害を与えること<br />
<strong>6.Improper distance</strong><br />
　コンテンツとの距離が近すぎること(没入しすぎること)&nbsp;<br />
<strong>7.Accessibility to fully immersive VR experience&nbsp;</strong><br />
　究極的に高いVR体験へのアクセスのしやすさ</p>

<p>一歩間違えればユーザーに悪影響を与えかねない、というのはVRに限った話ではありません。そこで大事になるのは、「そのコンテンツにより、本当に世の中を良くしているのか？」という問いなのではないかというお話でした。</p>

<p>ディスカッションでは主にプライバシーの問題と過度な没入について活発に議論をしました。特に印象的だったのは、VRにおける自己同一性（アイデンティティ）をどう尊重するのか、という命題でした。<br />
ユーザーの普段のアイデンティティとデジタルなアイデンティティは、コンテキストや文化的背景、本人の希望や理想を踏まえて、取捨選択できるように設計する必要があるのではないかという意見がありました。それを踏まえると、ユーザーがVRのアバターをどのように設定できるのかはとても重要です。同席していたFacebookの方は、Facebook spacesでは、ユーザーはアバターのジェンダーはあえて選べないようにしたとおっしゃっていました。<br />
日本においては、いわゆるVtuberやカワイイアバターなど、アニメや漫画表現から発展したアバター文化が主流のように見受けられます。一方で、同席していたアメリカとスペインからいらしていた方は、欧米ではリアルアバターを好む傾向にあるとおっしゃっていて、文化の違いをお互いに認識しました。</p>

<p>&nbsp;</p>

<h4>SHS: The First IEEE VR Workshop on Superhuman Sports</h4>

<p>超人スポーツのスポーツワークショップでは東京大学教授の稲見昌彦先生の基調講演がありました。</p>

<div data-oembed-url="https://twitter.com/drinami">
<div>
<div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 56.25%;"><iframe allowfullscreen="" src="//if-cdn.com/SVG93cN?app=1" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" tabindex="-1"></iframe></div>
</div>
<script async="" charset="utf-8" src="//if-cdn.com/embed.js"></script></div>

<p><cite><a href="https://twitter.com/drinami" target="_blank">twitter.com</a></cite></p>

<p>基調講演では超人スポーツ協会の活動や研究について紹介がありました。</p>

<p><a href="https://superhuman-sports.org/games/" target="_blank">超人スポーツゲームズ | GAMES | 超人スポーツ協会</a></p>

<p><cite><a href="https://superhuman-sports.org/games/" target="_blank">superhuman-sports.org</a></cite></p>

<p>超人スポーツとは、</p>

<blockquote>
<p>人間の身体能力を補綴・拡張する人間拡張工学に基づき、人の身体能力を超える力を身につけ「人を超える」、あるいは年齢や障碍などの身体差により生じる「人と人のバリアを超える」。このような超人 (Superhuman) 同士がテクノロジーを自在に乗りこなし、競い合う「人機一体」の新たなスポーツを創造します。</p>
</blockquote>

<p>&nbsp;とあるように、以下の3つ</p>

<blockquote>
<p>(1) rely on technology for human augmentation to enhance a<br />
human ability,<br />
(2) involve physical fitness and skills and<br />
(3) are played for fun, competition or health reasons.</p>
</blockquote>

<p>①人間の能力を拡張・補助するために技術に依り<br />
②身体運動やスキルと関わり<br />
③娯楽や競技、健康維持のために行われる</p>

<p>物を指します。</p>

<p>超人スポーツは</p>

<blockquote>
<p>(1)Enhancing players physical abilities (using exoskeletons for<br />
example)<br />
(2)Augment the vision of the player with technology to mix<br />
reality with a virtual world.</p>
</blockquote>

<p>①プレイヤーの身体機能を拡張（人工外骨格など）<br />
②プレイヤーの視覚を、現実とヴァーチャルを混ぜる技術を用いて拡張する<br />
ことによって実現します。</p>

<p>さまざまな<a href="https://superhuman-sports.org/sports/" target="_blank">認定競技</a>があり、活動が行われているようです。</p>

<p>この超人スポーツを支える技術はVR技術と共通しているものが多く、特にハプティクス(触覚)デバイスについては今、さまざまな取り組みが進められているようです。</p>

<div class="youtube-embed-wrapper" style="position:relative;padding-bottom:56.25%;padding-top:30px;height:0;overflow:hidden"><iframe allowfullscreen="" frameborder="0" height="480" src="https://www.youtube-nocookie.com/embed/7Uo73W_ItUs?rel=0" style="position:absolute;top:0;left:0;width:100%;height:100%" width="640"></iframe></div>

<p><a href="https://youtu.be/7Uo73W_ItUs" target="_blank">youtu.be</a></p>

<p>空気圧で伸縮するジェル筋肉のストラップを巻き付けたスーツで、ゲーム内で敵の攻撃にあたった際のフィードバックを受けるデモを体験しました(20秒あたりから伸縮の様子が見れます)。<br />
確かに当たった衝撃は感じ取れましたが、正直&rdquo;当たった&rdquo;感覚よりも&rdquo;掴まれた&rdquo;という感覚に近く感じました。ゲームの内容をフィードバックの内容に合わせることでより没入感が高まるのではないかと思いました。<br />
超人スポーツの領域においては、身体運動をより拡張・補助するために触覚が重視されているようです。ユーザー/プレイヤーが受け取る情報は基本的には映像・音声・触覚に集約されるので、近い将来スポーツに限らず、さまざまなコンテンツやメディアにおいて映像や音声と同じくらい触覚フィードバックが重視されるようになるのではないでしょうか。</p>

<h3>ペーパーセッション</h3>

<p>ワークショップが中心だった終末が終わると、月曜日からはVRに関わる論文についての発表を行うペーパーセッションが始まりました。<br />
非常に興味深かったセッションは「Paper Session 1:360 Video 1」の「Motion Paralax for 360 RGBD video」という発表です。</p>

<p>このセッションでは、今まで3DoFでしか体験することができなかったVR動画を6DoFにする新しい方法についての研究発表がありました。</p>

<div style="text-align:center">
<figure class="image" style="display:inline-block"><img alt="" height="610" src="https://image.dmm-corp.com/2dpto0bo55nxjemjzqb9bgddo8fb" width="674" />
<figcaption>VRにおける3DoF。yaw, pitch, rollの回転情報のみ同期することができます</figcaption>
</figure>
</div>

<div style="text-align:center">
<figure class="image" style="display:inline-block"><img alt="" height="549" src="https://image.dmm-corp.com/djy4lltsic52s573kr4lxpsxbm3c" width="674" />
<figcaption>6DoFでは回転に加えて位置も取得することができます</figcaption>
</figure>
</div>

<p>研究についての詳細はこちらから確認することができます。</p>

<p><a href="http://webdiis.unizar.es/~aserrano/projects/VR-6dof" target="_blank">Motion parallax for 360&deg; RGBD video</a></p>

<p>360度のRGBの色情報に加え、Depth（深度）の情報を読み込み、２つの背景レイヤーと、近影レイヤーの3つに映像を分け、近影により生まれる背景の死角を自動的に自然に塗りつぶすことで、自然な6DoF動画を既存の撮影ワークフローを活かしたまま実現することに成功しています。<br />
ステレオ3DVRと比べ、このメソッドではVR酔いを回避しながら、より没入感を高めることができるとしています。<br />
DMMのVR動画サービスに実際に導入するには、特にデプス情報の取得と処理に課題が残るためすぐに適応は難しそうですが、将来的にはVR動画で6DoFの体験を提供することが可能になるのではないかと期待しています。</p>

<p>上記の発表はデモも提供しているため、Oculus Riftをお持ちの方はぜひ試してみてください。</p>

<p>&nbsp;</p>

<p>続いて、パトリックと同じVR labの野秋からも、注目のセッションといくつかのポスターをご紹介させていただきます。</p>

<h4>Manufacturing Application-Driven Foveated Near-Eye Displays</h4>

<div data-oembed-url="https://kaanaksit.com/">
<div>
<div style="left: 0; width: 100%; height: 140px; position: relative;"><iframe allowfullscreen="" src="//if-cdn.com/AxmmewR?app=1" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" tabindex="-1"></iframe></div>
</div>
<script async="" charset="utf-8" src="//if-cdn.com/embed.js"></script></div>

<p><cite><a href="https://kaanaksit.com/" target="_blank">kaanaksit.com</a></cite></p>

<p>発表者のKaan AkşitさんはNvidiaの研究者で、ご自身の<a href="https://kaanaksit.com/" target="_blank">ウェブサイト</a>でも刺激的な記事をいくつも書かれています。今回のセッションでは大きく見て、以下のトピックがありました。</p>

<ul>
	<li>新しいHMDを制作するフローにおけるレンズ試作フローの改善</li>
	<li>レンズ設計方法論</li>
	<li>完成した新しいNear Eye AR HMDの紹介</li>
</ul>

<p>レンズ制作フローについては3Dプリンタでレンズを成形。UV接着剤と真空生成機でパッキングし、UV回転オーブンで硬化させる制作プロセスによって、１００万～５００万ドル掛かる設備費用が１万５０００～２万ドルで実現できるとのことです。</p>

<p>レンズの設計について、Near Eye AR Displayを作る際には、レンズを使って像を結ぶためのバードバス光学系と軸外光学系という2つの一般的な光学系があります。バードバス光学系のレンズを作るためにレンズが通った時の光の深度をトレーニングデータにして、機械学習的アプローチを用いて適切なレンズ形状を設計しています。</p>

<div class="youtube-embed-wrapper" style="position:relative;padding-bottom:56.25%;padding-top:30px;height:0;overflow:hidden"><iframe allowfullscreen="" frameborder="0" height="480" src="https://www.youtube-nocookie.com/embed/dBUeB8RLYCU?rel=0" style="position:absolute;top:0;left:0;width:100%;height:100%" width="640"></iframe></div>

<p><a href="https://youtube.com/watch?v=dBUeB8RLYCU" target="_blank">Manufacturing Application-Driven Near-Eye Displays</a></p>

<p>最後にHMDのデモを見ました。プレゼン内の動画もこちらにまとまっています。</p>

<h4>Enchanting Your Noodles: GAN-based Real-time Food-to-Food Translation and Its Impact on Vision-induced Gustatory Manipulation</h4>

<div class="youtube-embed-wrapper" style="position:relative;padding-bottom:56.25%;padding-top:30px;height:0;overflow:hidden"><iframe allowfullscreen="" frameborder="0" height="480" src="https://www.youtube-nocookie.com/embed/BJaQ5IF6iEI?rel=0" style="position:absolute;top:0;left:0;width:100%;height:100%" width="640"></iframe></div>

<p><a href="https://youtube.com/watch?v=BJaQ5IF6iEI" target="_blank">Enchanting Your Noodles: GAN-based Real-time Food-to-Food Translation</a></p>

<p>こちらは、麺を食べながら麺のリアルタイムカメラ映像をGANで料理に変換することで味覚を制御しようという試みで、実際に体験させていただきました。ご飯、ラーメン、焼きそば、チャーハンなどへの変換を体験させていただき、味の薄い料理の場合は味を薄く、味の濃い料理の場合は味を濃く感じることができました。また、実際に食べたものが柚子風味の素麺だったので、焼きそばへの変換の際に柚子の酸味を焼きそばのソースの酸味と錯覚しました。個人的にはこれからが楽しみな研究です。</p>

<h4>A New Interactive Haptic Device for Getting Physical Contact Feeling of Virtual Objects</h4>

<p>こちらは、DJ機材用の位置制御ができるポテンショメータを用いてペン型のデバイスを作成し、なぞったときの立体感が高い解像感でフィードバックされる面白いデバイスでした。複数使えば浮き上がる立体物をつくり、感圧ができれば柔らかさを表現できそうで想像力をさらに掻き立てられる研究でした。</p>

<h3>&nbsp;まとめ</h3>

<p>DMMにとっても我々にとっても初めての『IEEE VR』でした。過去の開催に目を通すと、今当たり前に利用しているHMDやCGの技術が随分と昔から研究されており、アカデミックの場におけるトレンドや課題などが商業の場にサービスとして登場するには時間がかかるということが分かります。技術開発をする際に、二次情報のみに頼っていては数歩遅れてしまうということを強く認識し、学術の場で何が起きているかに注意を向けていくことが重要だと感じました。また、DMMではこれまでこのようなアカデミックな場に参加する機会は珍しく、R&amp;D組織として、今後は何らかの形でコミットできるようにしたいと考えています。</p>

<h3>採用情報</h3>

<p>VR研究室ではVRを世の中に広げるためのメンバーを募集しています！</p>

<p>ご応募お待ちしています！</p>

<div data-oembed-url="https://dmm-corp.com/recruit/">
<div>
<div style="left: 0; width: 100%; height: 0; position: relative; padding-bottom: 52.5%; padding-top: 120px;"><iframe allowfullscreen="" src="//if-cdn.com/lYoH0j6?app=1" style="top: 0; left: 0; width: 100%; height: 100%; position: absolute; border: 0;" tabindex="-1"></iframe></div>
</div>
<script async="" charset="utf-8" src="//if-cdn.com/embed.js"></script></div>

<p><a href="https://dmm-corp.com/recruit/" target="_blank">dmm-corp.com</a></p>

<p>&nbsp;</p>


DMMのVRリサーチャーがみたIEEE VR 2019 Osaka

シェア