デジタルツインへの生成AIの導入：MatterportのAIの三つの柱

生成AIは世界を席巻しています。毎日、新しい技術トレンドを活用した無数のアプリケーションが登場しており、会話型AIからテキスト画像、テキスト動画などに至るまで、研究コミュニティは理解と革新を急速に進めています。これにより、私たちの活動の未来を形作る新たな突破口が次々と生まれています。

十年以上前、Matterportは誰でも建物や空間の3Dデジタルツインを簡単に作成できるようにしました。私たちの業界初のソリューションであるCortex AIは、AIによって完全に自動化されており、毎日何千ものデジタルツインを人間の介入なしに作成しています。Matterportにとって、生成AIは現在の環境の状態を反映するだけでなく、将来的には環境がどのようになるかを反映する、デジタルツインの進化の機会を提供します。

生成AIは、不動産分野の運営効率と意思決定プロセスを劇的に向上させる可能性を秘めています。Matterportの貴重な不動産インサイトと、自動的に物件のデザイン、レイアウト、機能を向上させる能力を組み合わせることで、顧客は不動産の価値を高めるためのツールをこれまで以上に多く持つことになります。

この新しいブログシリーズでは、Matterportが建設業界に生成AIを導入する道のりを紹介します。

まず、最近公開された生成AIに関する研究を背景に、MatterportのAIアプローチについて説明します。

AIの三つの柱：再構築、理解、そして合成

AIは私たちの技術進化の一部であり、3Dキャプチャを革新する助けとなっています。

それは、建物や空間の寸法精度の高い3D環境のレプリカである「デジタルツイン」を誰でも簡単に作成できるようにした時から始まり、Property IntelligenceやProject Genesisなどのソリューションの導入とともに成長し続けています。Project Genesisは、Matterportのデジタルツインプラットフォームにおける生成AIのビジョンです。

今日、MatterportのAIアプローチは以下の三つの柱に分類できます：1) 3D空間の再構築、2) 3Dデータの理解、3) 3Dデータの合成。

3D空間の再構築：Cortex AI

すべてはデジタル3Dで空間をキャプチャし、再構築することから始まります。

Matterportは、独自のCortex AIにより動かされています。これは、コンピュータビジョン、先進的な画像処理、ディープラーニングを組み合わせたディープラーニングニューラルネットワークであり、キャプチャされた物理的空間の3D再構築を完全に自動化します。

Cortexは、キャプチャする平方フィート数、スキャン時間、生産コストの点で簡単にスケールする初の完全自動ソリューションとして、3Dキャプチャ業界において重要なマイルストーンとなりました。

これにより、最新の最先端カメラやポケットに入っているスマートフォンを使用して、誰でも簡単に場所を3Dで複製できるようになり、Matterportのデジタルツインの急速な世界的採用が進んでいます。

3Dデータの理解：Property Intelligence

10年以上の時を経て、Cortexは1200万以上のスペースをデジタル化し、38億平方フィート以上の空間を表現しています。これはニューヨーク市とロサンゼルス市を合わせた面積の約2倍に相当します。

住宅、建設現場、産業施設など、あらゆるタイプの建物環境を表現する豊富なデータを持つことで、私たちのチームは、この情報を自動的なインサイトとして顧客に提供するデータ構造を作成することに集中しました。これにより、これまでこの規模で物件に対して得られなかった洞察が得られるようになりました。

たとえば、人が家に入ってソファ、コーヒーテーブル、テレビを見たとき、それがリビングルームであることをすぐに認識します。しかし、コンピュータがこのレベルの理解を持つためには、膨大なデータを使って各平方センチメートル、色、物理空間の意味を学習する必要があります。

MatterportのProperty Intelligenceは、スキャンされたスペースの平方フィート数や天井の高さを自動的に計算したり、見た物体に基づいて共通の部屋やエリアを特定したりするなど、物件データの収集と報告方法を根本的に変えています。

しかし、キャプチャされたデータはこれを超えて、照明、換気、配管などの情報も特定します。

構築環境のデータ化は、次の10年間にわたる物件インサイトの進歩の基盤を築き、購入者、売却者、エージェント、デザイナー、建築家、物件管理者など、あらゆる種類の物件関係者がスペースの価値を最大化できるようにします。

3Dデータの合成：生成AIをMatterportに導入

世界最大の空間データライブラリを持つMatterportは、膨大な物件データを整理し、ラベル付けし、理解しています。次の進化は、生成AIを使用してMatterportのデジタルツインの変更と拡張を可能にすることです。

3Dデジタルツインは、既存の状態を正確に再現することに優れていますが、これまで手動で大きな努力を払わずに異なるシナリオや要件に適応する柔軟性には欠けていました。生成技術をMatterportの空間データプラットフォームに重ねることで、この障壁が取り除かれ、単一のデジタルツインからほぼ無限の可能性が広がります。

デジタルツイン内でスペースを自動的に再設計したり再構築したりするなど、動的に変更を簡単に行う能力は、顧客にとって大きな価値を生み出します。

これは、住宅所有者、デザイナー、物件管理者が自動化された仮想インテリアデザインとステージングで物理的な空間を再構築するのを支援したり、建築家や施設管理者がより効率的で持続可能でアクセス可能な建物を作成するのを簡単にしたりします。

本日発表されたMatterportのVision & Learningチームによる研究では、Matterportツインに実装された生成AIの最新の進歩を示し、最新のオープンソース研究と最先端技術（Stable Diffusionなど）を利用してデジタルツインのパノラマ画像から家具や物体を削除する新しいアプローチを提案しました。

Matterport、デフラーニングの新しいアプローチを紹介

人気のあるディープラーニング、テキスト画像モデルであるStable Diffusionの進歩は、過去1年間で急速に進み、生成ベースの視覚技術の新たな機会を解放しました。

Stable Diffusionで使用される一般的な技術の一つにインペインティングがあります。Dall-Eのような生成AIモデルで人気があるインペインティングは、既存の視覚的手がかりを分析して画像内の欠けている部分や損傷した部分をインテリジェントに埋める技術です。写真の境界を広げたり、有名なアーティストのスタイルで再構築したりすることができます。

Matterportのモデルにインペインティングを適用する可能性を認識したMatterportの機械学習チームは、オープンソースツールと最新の研究を活用してMatterportモデルを自動的にデフラーニングする新しいソリューションを探求し始めました。

今後の展望

3Dでの問題解決は非常に複雑であり、最新技術で何が達成できるかの初期段階にあります。

生成AIの取り組みが進むにつれて、解決している問題や実装したソリューションについて、コミュニティに定期的に更新を提供します。デジタルツインプラットフォームに生成AIの強化をもたらす未来に向けた取り組みについての研究論文を読み、今後のブログのインサイトにご注目ください。これにより、顧客が時間を節約し、費用を節約し、生産性を向上させる新たな機会を解放するのに役立ちます。