NYY はダンス部門の協力を得て 3D ビデオ ストリーミング テクノロジーを開発

NYY はダンス部門の協力を得て 3D ビデオ ストリーミング テクノロジーを開発しています。ストリーミングに革命をもたらす可能性のある非常に有望なプロジェクト。

ニューヨーク大学は、ストリーミング ビデオ 3D イマーシブ技術ダンス教育、そしておそらく他の分野でも。からの 4 年間で 120 万ドルの助成金によって支援されています。国立科学財団、それはテクノロジーを実現しようとする問題になります点群ビデオ(PCV)ストリーミング

点群は、オブジェクトまたは環境の表面を表す 3D 空間内の点のセットです。ニューヨーク大学によると、点群の画像を動きのあるシーンにつなぎ合わせる Point-Cloud Video は 20 年にわたって開発されてきたという。ただし、このテクノロジーは依然としてデータ集約型であり、アプリケーション実用的であり、現在のデバイスの能力を超える帯域幅が必要です。

NYU Engineering のブログ投稿によると、研究者らは「帯域幅の消費と遅延を削減し、効率を高めて VCP をより簡単にストリーミングできるようにする」ことで、これらの障害を克服したいと考えています。プロジェクトリーダーである電気工学およびコンピューターサイエンスの教授である Yong Liu 氏は、最新のイノベーションによってこれが可能になると確信しています。 「いくつかの主要なテクノロジーの最近の進歩により、人間、生き物、現実世界の物体のホログラムをインターネット上でテレポートするというパズルの完成に近づいています」と彼は書いています。

の作成者チャットGPT、OpenAI は昨年、以下を可能にするモデルを発表しました。3D 点群を作成するプロンプトテキストから。ただし、このプロジェクトでどの生成 AI ツールが使用されているかは明らかではありません。

ストリーミングに革命をもたらす可能性のある非常に有望なプロジェクト

チームは次の方法でテクノロジーをテストしますティッシュ芸術学校ニューヨーク大学とマーク モリス ダンス グループのダンス センター。これら 2 つの施設のダンサーがボリュームのあるキャプチャ ステージで踊ります。その後、チームは自分たちの動きをライブおよびオンデマンドでブロードキャストし、経験豊富なダンサーから直接学びたい将来のダンサーに教育コンテンツを提供すると同時に、エンジニアが PCV テクノロジーをテストして改善できるようにします。

研究者らは、この研究がストリーミングコンテンツへの扉を開くことを期待している。仮想現実そしてより高度な複合現実。 「この取り組みの成功は、拡張現実、仮想現実、複合現実体験を促進する高品質で堅牢な PCV ストリーミング システムの導入に役立ち、教育、医療、レジャーなどの多くの分野で新たな機会を生み出すでしょう。」

「Point-Cloud Videoには多くの業界を変革する大きな可能性があり、NYU Tandon研究チームがこれらの進歩をできるだけ早く活用するためにダンス教育を優先していることを嬉しく思います」とNYU Tandon学部長のJelena Kovačevićは述べました。