地上レーザースキャン、生成AI、混合現実の統合によるデジタル遺産再構築

サマリー

この再現可能なプロトコルは、デジタル遺産再構築のワークフローを示しています。地上レーザースキャンによるサイトの形状捕捉、生成AIによるアーカイブ資料からの失われた文化的要素の再構築、そして合成された要素を 現場で可視化する混合現実を統合しています。

要約

発展途上地域での急速な都市化は、建築遺産にとって二重の危機を引き起こしています。すなわち、構造物の物理的な劣化と、文化的記憶の無形の消散です。写真や手動調査など静的な記録に主に依存する従来の保存手法は、これらの歴史的遺跡の複雑な空間的・時間的側面を捉えるにはますます不十分になっています。本研究は、厳密なアーカイブと動的な公共関与の間のギャップを埋めるために設計された新しい組み合わせ的手法フレームワークを導入します。私たちは、3つの異なる技術を組み合わせたワークフローを詳述します。地上レーザースキャン(TLS)は、建物の具体的な幾何学的特徴をミリ単位の精度で捉える技術、アーカイブ資料に基づき、失われた文化的要素(特に伝統的な寺院祭りの構造物)を歴史的に知覺した視覚的表現を生成する条件付き生成人工知能(CGAI);そしてホログラフィックヘッドセットを通じた拡張現実(AR)を用いて、これらの層を統合した混合現実(MR)体験に重ね合わせています。このプロトコルは、データ収集戦略やポイントクラウド処理からAI駆動のモデル生成および最終展開までの全パイプラインを記述しています。このアプローチにより、高精度な空間データと解釈的な文化的可視化を巧みに重ね合わせた動的なデジタルシミュラクラムが生まれ、都市遺産のデジタル保存と拡張展示のための技術的かつ拡張可能なワークフローを提供します。

概要

建築遺産の保存は、都市計画と文化の^{持続可能性に関する}現代の議論において重要な必須事項を構成^{しています。}都市が急速な近代化とデジタル化を進める中で、開発と保全の間の緊張は^{ますます激し}くなります。この現象は特に中国の中原平原で顕著に現れます。ここは文明の揺りかごでありながら、都市拡大の容赦ない圧力に直面し^{ています。}文化遺産の保護は単なる物理的な遺物の維持にとどまりません。歴史的文脈の保護、文化的意義の伝達、そして遺産地⁶の真正性の保存を含みます。遺産保存は単なる受動的なアーカイブ行為ではなく、文化再生のための積極的な戦略であり、国や地域のアイデンティティを形成しつつ、将来の世代が祖先の^{精神的世界と}継続的なつながりを維持できるようにします。さらに、これらの遺跡の効果的な保存は、グローバル経済と動的に連携する多次元的な文化生態系を育み、^{国際舞台8}における地域のイメージを高めています。

遺産保存の重要性は認識されているにもかかわらず、現在の研究や資金はしばしば少林寺や洛陽・開封9の歴史的中心地のような著名で記念的な場所を優先^{している。}これにより、鄭州の城隍廟のような地域的に重要だが世界的にはあまり目立たないランドマークは、周縁化¹⁰の段階に置かれています。明代に建てられた城隍廟は、図1に示されるように、鄭州における保存状態の良い宗教建築の唯一の例を示しています。歴史的に、ここは単なる宗教的聖域としてだけでなく、社会的、経済的、民俗的活動の活気ある拠点として機能していました。特にテンプルフェア¹¹が有名です。これらの祭りは神殿の生命線であり、犠牲、商業、娯楽を一体化した文化表現として融合させ^ました。しかし、現代の商業主義や都市の再区画化の進出により、これらの伝統的なフェアは中止され、保全のジレンマが生じています。神殿の物理的な骨格は残っていますが、ノイズや視覚的な活気、社会的交流といった目に見えない精神はほとんど消え去っています。この場所の喪失(空間と社会的機能の両方)は、有形構造と無形の大気の両方を回復できる保全手法の緊急性を強調しています(^13,14)。したがって、本研究で詳述されるプロトコルは、この特定の二分法を持つ遺産地に明確に適用・設計されています。すなわち、物理的な建築構造物は構造的に保たれているものの、関連する一時的な文化的文脈や無形の遺物が失われた場所です。

図1。鄭州城隍廟の写真で、入口ファサードの現状を示しています。この図の拡大版はこちらをクリックしてご覧ください。

文化遺産保存におけるデジタル技術の導入は、このジレンマに対する変革的な解決策を提供します。保存の原理は、物質の^存在論の年代的価値を維持することを求めます。手測定や2D写真などの従来のアナログ手法は、古代建築の複雑な幾何学を包括的に記録できず、失われた儚い場面を復元する力が乏しいことが多いです。その結果、この分野は「デジタルツインニング」へとシフトしています。これは航空宇宙工学に由来する概念で、物理的な存在のライフサイクル¹⁵にわたる仮想レプリカを作成するものです。遺産の文脈において、デジタルツインは診断、予測、相互作用を支援する正確で変えられないアーカイブとして機能^します。

地上レーザー走査(TLS)は、これらのデジタルツインの幾何学層を構築する基盤技術として登場しました。TLSはLiDAR(光検出・測距)を活用し、1秒間に数百万のデータポイントを捕捉し、建物のすべての亀裂、傾斜、テクスチャをミリ単位^の精度で記録する高密度点雲を作成します。この技術は非接触型であり、壊れやすい構造物に理想的であり、トータルステーション測量と比べて非常に効率的です。最近の応用では、複雑なシナリオにおけるTLSの有効性が示されています。Marsellaら¹⁸は、バチカンのサン・ピエトロ大聖堂の構造的安全性をTLSを用いて、肉眼では見えない微細な変形を特定しました。同様に、BarontiniらはTLSデータを統合して予防保存を行う歴史的建造情報モデリング(HBIM)^{フレームワークを開発しました}。TLSが壁のひび割れ、基礎沈下、床のたわみなどの技術的状態を診断できる能力は、物理的修復介入の科学的根拠を提供します^20,21。

しかし、TLSは現存する物理的現実を記録することに優れているものの、消え去った歴史的現実を復元することはできません。点雲は正確ですが、静的で歴史的な文脈を欠いています。寺院祭りの賑やかな雰囲気など、欠けていた歴史的場面を再構築するために、本研究は新興分野である条件付き生成人工知能(CGAI)に目を向けます。従来の手動3Dモデリングは手間がかかり、モデラーの主観的解釈に大きく依存しますが、CGAI(例:Stable Diffusionや騰訊慧源3D)は、テキスト記述に基づく視覚的コンテンツを生成するためにディープラーニングアルゴリズムを活用^{しています。}歴史的な建築様式や質感の膨大なデータセットを分析することで、CGAIはアーカイブテキストや視覚データに基づき、ランタン、バナー、仮設の屋台など、もっともらしい歴史的要素を統合または再構築できます。これは、単に存在するものを記録するだけでなく、歴史的に存在したものをシミュレートし、データ駆動型の論理を用いて物理的なアーカイブの空白を埋めるパラダイムシフト^{を示しています。}

最後の課題は、このデジタル模倣品の普及にあります。サーバーに保存されたデジタルツインは、一般にアクセスできなければ社会的価値は限定的です。拡張現実(AR)と混合現実(MR)技術は物理世界と仮想世界を橋渡しし、デジタルツインを^{物理的なサイト}に重ね合わせることを可能にします。バーチャルリアリティ(VR)が完全に合成的な環境でユーザーを隔離するのに対し、ARは物理的な遺産地とのつながりを維持しつつ、デジタル情報で強化します。FologramのようなプラットフォームやMicrosoft HoloLens 2のようなデバイスは、高精度な3Dモデルを現実世界の座標系に投影し、訪問者と復元された歴史²⁵との間に直接対話を可能にします。この没入型アプローチは訪問者の関与と理解を大幅に高め、受動的な視聴を能動的な探求へと変えることが示^{されています。}

現在の文献ではデジタル保存技術を単独で扱うことが多いですが、本記事で提案された統合プロトコルは独自の方法論的新規性を提供します。まず、標準的なTLSドキュメントワークフローが高精度ながら文化的に無菌な幾何学的アーカイブを生成するのに対し、私たちの手法は動的な意味的文脈を導入します。第二に、フォトグラメトリーに基づく復元は現存する物理的表面のテクスチャー化に優れていますが、物理的な遺構を欠く完全に失われた文化的遺物を再生することは構造的に不可能です。最後に、手作業で作られた汎用3DアセットやVRでユーザーを隔離することが多い既存のAR遺産ビジュアライゼーションシステムとは異なり、このワークフローはCGAIを活用し、ミリメートル精度のTLSデータに直接根ざしたサイト特有かつ歴史的なビジュアライゼーションを生成しています。これは厳密で再現可能なプロトコルを詳細に示すことで重要なギャップを埋めます。概念的な曖昧さを解消し、明確な方法論的根拠を確立するために、このワークフローのコア要素を明確に定義します。ドキュメントドジオメトリとは、既存の物理的構造を高度に精密かつ静的な3D空間的レプリカとして再現することを指します。ここでは、この否定しがたい経験的現実を非接触的な精度で捉えるためにTLSが必要です。これに対し、AI生成の解釈的再構築は、アーカイブテキストから派生した失われた文化的遺物(例:祭りの装飾)の視覚的表現を指します。CGAIは絶対的な物理的真理ではなく、確率的で歴史的に根ざした解釈を統合するため、この段階で必要です。最後に、MRは現地での可視化に必要であり、現実世界の記録された物理的幾何学に解釈的な文化層をシームレスに重ね合わせる体験的な媒体として機能します。これらの定義された概念に基づいてアプローチを構築することで、この組み合わせ的ワークフローは、中央平原における都市文化遺産のデジタル化のための技術的ルートを提供するだけでなく、デジタル時代における「保存」の定義に関する新たな理論モデルも提示します。物質の保存を超えて記憶の再生へと進むことを目指しています^。28歳。

プロトコル

1. 歴史的データ収集と現場分析

1. 包括的なアーカイブレビューを実施してプロジェクトを開始しましょう。対象遺産地(この場合は鄭州城隍廟)に関連する歴史記録、写真、建築図面、テキスト説明を地元の文書館、寺院管理事務所、関連する文化遺産局から取得してください。
2. 寺院祭りの装飾、仮設の屋台、旗、特定の照明配置(例:「赤いランタン」「龍舞」)など、失われた一時的な要素の記述を特定するために、テキストデータを分析してください。
3. 日中に予備的な現地調査を行い、遺跡の地形を理解し、現在の建築保存状態を記録します (図2)。複合施設の配置を記録し、中心軸、メインホール、鐘楼とドラム塔の位置、そしてレーザー走査の視線を遮る可能性のある古木や狭い通路などの障害物を記録してください。

図2。予備調査中に撮影された神殿中庭の現在の様子。この図の拡大版はこちらをクリックしてご覧ください。

4. 詳細なスキャンステーション戦略や展開計画を策定しましょう。地上レーザースキャナー(TLS)の特定の座標位置を特定し、すべての構造物を360°カバーできるようにします。最低12局を計画し、サイトの複雑さに応じて18局に拡張する柔軟性があります。
5. 歩行者によるデータノイズを最小限に抑えるため、非公開時間(通常は早朝07:00〜08:30または午後遅く17:00〜18:30)にサイトにアクセスするための必要な管理者権限を取得してください。

2. 地上レーザー走査(TLS)取得

1. 高精度位相シフト地球レーザースキャナーを展開。スキャン期間中、バッテリーの充電量が十分であること、そしてSDストレージカードの容量が十分かどうかを確認してください。
2. スキャナー三脚を最初に決めたステーション地点(メインホール/ゾーンAから始めて)に設置してください。石畳の上で安定するように三脚の脚を調整してください。
3. 内蔵のバブルレベルやデバイスインターフェースのデジタル傾斜計を使ってスキャナーの水平を調整できます。点雲データの垂直性を保証するために傾斜角を0.5°未満に保ちます。
4. オンボードのタッチスクリーンインターフェースを通じてスキャンパラメータを設定できます:
   1. 解像度を1/4または1/5(時間制約によります)に設定し、10 mで約6 mmの点間隔を確保します。
   2. ノイズを減らすために品質を3倍か4倍に設定してください。
   3. カラーキャプチャ(統合カメラ)を有効にして、赤・緑・青(RGB)テクスチャをジオメトリに重ね合わせます。
   4. スキャン範囲は0.6mから120mまで、測距精度は±2mmにする必要があります。
5. 照明条件を確認するために、小さな区画(例:ベルタワー)のパイロットスキャンを実行してください。屋外での露出オーバーや影のある軒の露出不足についてはプレビューで確認してください。
6. スキャンシーケンスを進めてください。各ステーションごとにスキャンをトリガーし、影やデータに現れる(ゴースティング)を避けるためにスキャナーの視野から退避します。
7. スキャナーを次のステーションに移動し、前のステーションと30〜40%以上の重複を保ちます。この重複は、後のクラウド間登録プロセスにおいて非常に重要です。
8. 各ステーションで外部のデジタル一眼レフ(DSLR)カメラを使って高解像度のリファレンス写真を撮影し、スキャナーの内蔵カメラを補完し、特に細かい彫刻やカリグラフィーのプレートに用いられます。

3. 点雲のデータ処理

1. SDカードから高性能なワークステーションに、処理ソフトウェアを動かす生のスキャンデータ(.fls形式)を転送します。
2. 生スキャンをソフトウェアプロジェクトワークスペースにインポートします。
3. 生データに前処理フィルターを適用する:ス トレイポイントフィルター を使ってほこりや飛ぶ昆虫を除去します。
4. ダークスキャンポイントフィルターを使って、反射率の高いまたは吸収性の高い表面から誤ったデータを除去します。
5. 自動登録を実行してください。ソフトウェアが幾何学的特徴認識やGPSデータに基づいてスキャンをアライメントできるようにします。
6. 登録報告書を確認してください。平均張力誤差(対応する点間の平均距離)が4mm未満であることを確認しましょう。エラーが閾値を超えた場合は手動登録を行います。建物の角や柱など、3つの異なる共通点を2回重ねてスキャンし、位置合わせを強制します。
7. ムービングオブジェクトフィルターを適用して、スキャン中にシーンを通過した歩行者や鳥などの一時的なノイズを自動的に検出・除去します。
8. カラー バランシング (マルチ露光調整)を行い、明るい空と暗い寺院の内部の明るさを均等にします。
9. プロジェクトポイントクラウドを作成し、最終モデルを構造化化としてエクスポートします。E57またはOBJファイル。ファイルサイズが管理可能であることを確認しましょう(例:ファイルが10GBを超える場合は5mmのグリッド間隔にダウンサンプリングしてください)。

4. 条件付き生成AI(CGAI)モデリング

1. ステップ1.2の分析に基づいて復元すべき具体的な歴史的要素(例:伝統的な寺院祭りの屋台、提灯)を特定します。
2. 選定されたCGAIプラットフォームを活用しましょう。
3. アーカイブ資料(例:鄭県年報)で見られる意味記述や歴史的記録を直接視覚的なパラメータに翻訳し、正確なテキストプロンプトを構築します。例えば、入力:「伝統的な中国明代の赤灯、光る、軒先から吊るされている、高ディテール」や「木製市場の屋台、古代様式、布製の旗、3Dテクスチャ」などです。
4. 生成プロセスを実行してください。通常、各歴史的要素に対して20〜30回の反復をまとめて作成し、文体的な変異や構造的可能性を十分に確保します。
5. 最終的なMR可視化に統合する前に、遺産史家やドメイン専門家による正式な検証パネルを招集してください。AIバッチを現存する映像アーカイブや確立された歴史的合意と照合し、歴史的に妥当な出力を選びます。
6. 時代錯誤的な特徴や構造的不可能な結果は破棄してください。専門家パネルの明確なフィードバックに基づいてテキストプロンプトを反復し、モデルの歴史的正確性を洗練させてください。

5. 統合とデジタルツインの構築

1. 3Dモデリング環境を開きます。
2. 処理済みのTLSポイントクラウド()をインポートします。OBJ)を3Dモデリングソフトウェアに置き換えました。
3. CGAIで生成されたアセットをインポートします。
4. CGAI資産をポイントクラウド環境内で手動で整列・配置します。ランタンは軒下に置き、歴史的なレイアウト分析に従って中庭空間に屋台を配置します。
5. ソフトウェアのモデリングツールを使って、メッシュの交差やポイントクラウドとAIモデル間のスケールの不一致をきれいにしましょう。
6. 結合モデルにテクスチャを施してください。スキャナーのハイダイナミックレンジ(HDR)画像をポイントクラウドメッシュに適用し、AIアセットに適切なマテリアル特性(粗さ、金属量)があることを確認します。
7. 完全に統合されたデジタルツインモデルを.としてエクスポートします。GLTF(グラフィックス言語伝送フォーマット)ファイル。このフォーマットはウェブやARアプリケーションに最適化されています。

6. 拡張現実(AR)展開

1. ワークステーションに3Dモデリングソフト用のMRデプロイメントプラグインをインストールしてください。
2. Mixed Realityヘッドセットにコンパニオンアプリをインストールしてください。
3. ワークステーションとMRヘッドセットの両方を同じローカル5GHz Wi-Fiネットワークに接続することで、低遅延のデータ伝送を確保します。
4. モデリングソフトでMRプラグインを起動してセッションQRコードを生成します。
5. MRヘッドセットを装着し、コンパニオンアプリを起動してください。QRコードをスキャンしてセッションを同期してください。
6. 展開前に現場の環境状況を評価してください。MR可視化セッションは、正午の太陽からの強い赤外線干渉を避けるために厳密に早朝または午後遅くにスケジュールしてください。これによりヘッドセットの空間トラッキング能力が大幅に低下し、モデルのドリフトが生じます。
7. 現地でのモデルアライメントを実施し、空間的登録戦略を策定します:
   1. 実際の安定したアンカーポイント、例えばメインの香炉の石の台座に物理的な追跡マーカー(例:ArUcoマーカーやQRコード)を設置します。私たちは、直射日光による赤外線干渉に対抗するため、純粋な空間環境マッピングよりもマーカーベースのトラッキングを明確に推奨し、厳しい日中の照明下でのモデルの安定性を確保し、自然の空間的アンカーが機能しなくなった場合の強力なバックアップとして機能します。
   2. ヘッドセットの光学センサーを利用してマーカーを検出し、仮想モデルを正しい座標系に自動ロックします。手動の手のジェスチャーで、デジタルポイントクラウドが物理構造と完全に重なるまでは軽微な回転微調整のみを行います。
8. モデルの位置をロックしてください。
9. サイトを歩いて登録の安定性を確認してください。アライメント精度の閾値を厳格に維持し、アクティブユーザーの動き時に最大2〜5cmの視覚ドリフトを許容し、没入感を保つこと。

結果

2024年11月に実施された地上レーザースキャンキャンペーンでは、18のスキャンステーションを活用し、メインホール、エントランスプラザ、アプスゾーンの包括的なカバーを実現しました。 表1に詳述されているように、スキャンパラメータは厳密に校正されており、特に解像度1/4、品質設定4倍を用いて、10メートル距離で約6.1mmの点距離を得ています。この特定の較正は、高いデータ密度と現地取得効率のバランスを取るために不可欠でした。その結果、ポイントクラウド処理ソフトウェアでの生データ処理において、自動登録プロセスと異なるアーキテクチャ的特徴を用いた手作業による精緻化により、平均点張力誤差は正確に3.5mmに達しました(表1)。この定量的結果は、選択したスキャンパラメータを確立された成功基準に直接検証します。建築遺産の文書作成において、ポイントクラウド登録誤差の許容閾値は通常<5.0mmと定義されています。平均誤差3.5mmを達成したことは、構造の変形、材料の質感、複雑な木材接合(例えばドゥゴンブラケット)が、正...

ディスカッション

本研究は、建築遺産のデジタル・ルネサンスにおける組み合わせ的方法論的枠組みを成功裏に示しています。地上レーザースキャン(TLS)、条件生成AI(CGAI)、拡張現実(AR)を統合することで、従来の静的保存の限界を超えるワークフローを確立しました。これは方法論的枠組み( 図8)にまとめられています。

図8。文化遺産再生のための混合現実およびデジタルツインのワークフローの概略的枠組み。こ...

材料

この記事で使用された材料の一覧

名前	会社	カタログ番号	コメント
一眼レフカメラ	高解像度リファレンス写真	該当なし
FARO フォーカス3D S120	地上レーザースキャナー(TLS)	FAROテクノロジーズ
ファロ・シーン 2019	ポイントクラウドデータ処理ソフトウェア	FAROテクノロジーズ
フログラム	MR開発プラグインおよびヘッドセットアプリケーション	フログラム
高性能ワークステーション	データ処理とレンダリング	該当なし
マイクロソフト HoloLens 2	混合現実(MR)ヘッドセット	マイクロソフト
ライノ8	3Dモデリング環境	ロバート・マクニール&アソシエイト
SDストレージカード	生スキャンデータストレージ	該当なし
安定拡散	条件生成AI(CGAI)モデル	安定性AI
騰訊匯遠3D	条件生成AI(CGAI)プラットフォーム	テンセント