このプロトコルは、マーカーレスモーションキャプチャとモーション特徴ベースの視覚マッピングを用いて、動作に基づく無形文化遺産のコミュニケーションを支援するために、具現化された太極拳の動きを動的な視覚デザインに捉え、分析、翻訳するための再現可能なワークフローを説明しています。
このコンテンツを表示するには、JoVEへの購読が必要です。 または、無料トライアルをお申し込みください。
方法論記事
このプロトコルは、マーカーレスモーションキャプチャとモーション特徴ベースの視覚マッピングを用いて、動作に基づく無形文化遺産のコミュニケーションを支援するために、具現化された太極拳の動きを動的な視覚デザインに捉え、分析、翻訳するための再現可能なワークフローを説明しています。
このプロトコルは、具現化された太極拳の動きを動的な視覚デザインに翻訳し、動きに基づく無形文化遺産のコミュニケーションを支援するための再現可能なワークフローを説明しています。動きを基盤とした文化的実践として、太極拳は身体のリズム、軌跡、体重移動、バランスを通じて知識を伝えます。これらは従来の静的または映像ベースのメディアでは伝えにくい要素です。このプロトコルはマーカーレスモーションキャプチャ、モーションフィーチャー抽出、ルールベースの視覚マッピングを統合し、動きの特徴を動的な視覚表現に変換します。8つの代表的な太極拳型がマーカーレスモーションキャプチャーで記録されました。MediaPipe Poseで身体のキーポイントを抽出し、軌道の曲率、動きの滑らかさ、リズムの安定性などの動きの特徴を導き出しました。これらの特徴は、モーション機能に配慮した視覚翻訳フレームワークを通じて動的な視覚変数に体系的にマッピングされました。このアプローチの効果を評価するために、180名の参加者を対象とした対照実験で、静的グラフィックス、従来型動画、モーションデータ駆動型の動的視覚デザインという3つのコミュニケーション条件を比較しました。成果指標には、知識獲得、運動認識、身体化された理解、文化保存と共有に関連する行動意図が含まれていました。264の有効な動作シーケンスの分析により、太極拳の各型で動きの特徴プロファイルに大きな変異があることが明らかになりました。動的視覚デザイン条件は、知識獲得、動き意味認識、身体理解において静的グラフィックや従来のビデオ条件を大きく上回りました(いずれも p < 0.001)。構造モデリングはさらに、知覚されたデザインの品質が主に身体化された理解、美的関与、感情的共鳴を通じて保存や意図の共有に影響を与えることを示しました。このプロトコルは、身体化された動きの知識を動的な視覚的形態に変換し、動きに基づく無形文化遺産の伝達と解釈のための体系的な方法を提供します。
太極拳、または太極拳は、身体の協調、円運動、バランスコントロール、内的調整を統合した伝統的な中国の動きの実践です。2020年にユネスコの人類無形文化遺産代表リストに登録されており、その文化的意義は静的な物質的遺物ではなく、生きた身体的なパフォーマンスに大きく依存しています。この認識は、デジタル遺産コミュニケーションにおける方法論的課題を提示します。すなわち、動きに基づく遺産を静的なシンボルやテキスト的説明、表面的な視覚モチーフに還元することなく翻訳する方法です。
従来のデジタルコミュニケーションは、静止テキスト、静止画、または標準的なビデオ録画に頼っています。これらの形式は外的な姿勢や形式の時系列を記録できますが、体重移動、リズムの制御、動きのつながりといった内的な身体的論理を伝えることができず、実践が文化的に意味を持つようになるのです。最近の動き解析の進歩により、センサーベースまたはマーカーレスのモーションキャプチャ手法を用いて、身体と関節の座標や運動学的パターンを正確に定量化できるようになりました2,3。しかし、これらの技術は動き認識やトレーニング介入において優れているものの、視覚文化コミュニケーションの可能性はまだ十分に探求されていません。同様に、デジタル遺産プロジェクトはますます没入型メディアやデータ駆動型の可視化を採用していますが、多くは構造的な文化的解釈よりもプレゼンテーションの質を重視しています。
身体認知はこのギャップを埋めるための重要な視点を提供します。この観点から、文化的理解は単に視覚表面を観察するのではなく、身体知覚、感覚運動シミュレーション、知覚と行動の結合によって形作られます。視覚芸術や認知科学の研究はさらに、抽象が動きの構造的関係を保持することで、通常は見えない物理的特性を知覚可能にできることを示唆しています。インタラクティブな視覚コミュニケーション研究は、視覚的な魅力とユーザー体験が公共の関与や保存の意図に影響を与えることを強調しています。しかし、遺産プロジェクトにおける没入型メディアはしばしば美的魅力を優先し、注目を集めることはあっても、根底にある文化構造を伝えられていません。さらに、動きを動的なビジュアルに抽象化することは、デザインの論理が元の実践から切り離されると、認識される本物らしさを弱めるリスクがあります。したがって、具現化された知識を知覚可能な形に変換するには、純粋に直感的なグラフィックスタイリングではなく、経験的な動きデータに基づく厳密でルールに基づく設計ロジックが必要です。
動きデータと文化的解釈のギャップを埋めるために、本記事では具現化された太極拳の知識を動的な視覚デザインに翻訳するための再現可能なプロトコルを提示します。この中核的な科学的目的は、太極拳の動きから抽出された運動学的特徴が、身体化された文化的意味の一般理解を高める解釈可能なデザイン変数として機能するかどうかを明らかにすることです。したがって、本研究はモーション機能に配慮した翻訳ワークフロー、動きの特徴と動的視覚変数間のルールベースのマッピング、静的グラフィックス、従来型ビデオ、モーションデータ駆動型動的視覚デザインを比較した実証的評価を提供します。
このデータ駆動型アプローチは、代替手法に比べて明確な利点を提供します。従来のビデオ録画が文字通りの表現のみを提供する一方で、文化的基盤のない純粋な装飾的なアニメーションとは異なり、この方法は抽出された運動学的特徴(例:軌道の曲率、滑らかさ、リズムの安定性、バランスシフト振幅)を動的視覚変数(例:円形フローライン、アニメーションのリズム、視覚重力)に直接マッピングします。このアプローチは、トビアス・グレムラーのモーションキャプチャを基盤とした カンフー・モーション・ビジュアライゼーションを含む、以前のメディアアートの動き可視化の探求に関連していますが、特徴から視覚へのマッピングのルールを明確に定義し、そのコミュニケーション効果を管理されたユーザー研究を通じて評価する点で異なります。その結果、運動の経験的構造を保ちつつ、その根底にある論理を視覚的に理解しやすくしています。
最後に、このプロトコルは特に、運動に基づく無形文化遺産のデジタル化と伝達を目指すデジタル人文学研究者、インタラクションデザイナー、遺産実践者に適しています。この枠組みは、動作楽譜を専門的な解釈と保存のために記録するための厳密な記譜システムであるLabanotationとは異なります。これに対し、現在のプロトコルは測定された動きのメカニクスを動的な視覚形式に変換し、公共の解釈、文化伝承、遺産保存を支援することを目的としています。アクセスしやすいビデオベースのマーカーレスモーションキャプチャシステムと標準的なデータ処理ワークフローを組み合わせることで、研究者はこのフレームワークを太極拳だけでなく他の身体化された実践にも適応させ、モーションインフォームドデザインが文化的コミュニケーション成果にどのように影響するかを体系的に評価できます。
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。
人間参加者を含むすべての方法は機関のガイドラインに従って実施され、桂林電子技術大学デザイン・創造学部人間研究保護倫理委員会(承認番号2600AL0621)によって承認されました。データ収集前に、すべての太極拳参加者および利用者評価参加者から書面によるインフォームドコンセントが取得されました。参加者には、参加は任意であり、匿名化されたデータは研究および出版目的で使用されることが伝えられました。
1. 学習環境と機器準備

図1。具現化された太極拳の動きを動的な視覚的コミュニケーションに翻訳するワークフロー。 (A) 太極拳の動き選択、動画ベースのモーションキャプチャ、モーションフィーチャー抽出、ルールベースの視覚翻訳、ユーザー評価からなる5段階の学習ワークフロー。(B)研究で分析された8つの選ばれた太極拳型。(C) 同期ビデオ取得、ポーズ推定、軌道処理、動作サイクル正規化、特徴抽出を含むモーションデータ処理パイプライン。(D) 実験的コミュニケーション条件:静的グラフィック、従来型ビデオ、モーションデータ駆動型動的視覚デザイン。(E) 知覚されたコミュニケーションデザインの質、身体化された理解、美的関与、感情的共鳴、共有意図、保存意図を結びつける概念的枠組み。 この図の拡大版はこちらをクリックしてご覧ください。
表1:本研究を支持する文献に基づく方法論的連鎖。 この表は、本プロトコルで実装されている動作解析ワークフロー、視覚翻訳フレームワーク、ユーザビリティ評価、認知負荷評価に用いられる主要な参考文献、研究領域、データ取得手法、分析手法、方法論的貢献をまとめています。

図2。ビデオベースのモーションキャプチャおよびモーションフィーチャー抽出手法。 (A) 3m×3mの撮影範囲内で、前方および側面カメラを同期させたモーションキャプチャセットアップ。(B) 前方および側面からの抽出された身体ランドマークを示すマーカーなしポーズ推定出力。(C) ランドマーク抽出、欠損フレームスクリーニング、軌道平滑化、時間正規化を含むデータ前処理ワークフロー。(D) 上肢、胴体、胴体の重要なポイントから導出された代表的な再構築された運動軌跡。(E) 各運動シーケンスから抽出される運動特徴(持続時間、平均速度、ピーク速度、軌道曲率、滑らかさ指数、対称指数、バランスシフト振幅、リズム安定性など)。(F) 視覚翻訳に使用されるエクスポートされたモーションフィーチャーデータセット。 この図の拡大版はこちらをクリックしてご覧ください。
2. 太極拳の選定とパフォーマーの採用
表2:太極拳の動きの特徴とそれに対応する視覚的翻訳ルール。 この表は、8つの選定された太極拳型において、身体化された動きの特徴、文化的または身体的な意味、抽出された動作指標、ルールベースの視覚的翻訳マッピングを要約しています。挙げられたモーションインジケーターは、モーションフィーチャー駆動型コミュニケーションデザインフレームワークで使用される動的視覚変数の生成に役立ちました。
3. モーションキャプチャ手法
4. モーションデータ前処理
と
。ここでxc とyc は体中心座標、Ws はパフォーマー固有の肩幅を表します。同じ正規化手順を上肢、胴体、胴体の軌道にも適用します。5. モーションフィーチャー抽出と視覚翻訳




図3。太極拳の動きのルールベースの翻訳は、動的な視覚変数に変換されます。 (A) 抽出された動き特徴を対応する視覚変数に結びつける視覚的翻訳行列。(B) 軌道曲率を円形流線および粒子軌道に翻訳する例。(C) リズム安定性をアニメーションのタイミングやパルセイションパターンに変換する例。(D) バランスシフト振幅を視覚中心の動きと重み付き構図への翻訳例。(E) 滑らかさと対称性を勾配連続性と組成バランスに変換する例。(F) 抽出した動き特徴から生成される代表的な動的視覚プロトタイプ。 この図の拡大版はこちらをクリックしてご覧ください。
6. プロトタイプ開発およびユーザー評価のセットアップ
| 可変 | 静的グラフィックグループ (n = 58) | コンベンショナル・ビデオ・グループ (n = 60) | ダイナミックビジュアルデザイングループ (n = 62) | 統計検定 | p値 |
| 年齢(年) | 23.4 ± 3.8 | 23.7 ± 4.1 | 24.0 ± 3.9 | 一方差ANOVA | 0.71 |
| 女性、n(%) | 33 (56.9) | 35 (58.3) | 37 (59.7) | カイ二乗検定 | 0.95 |
| デザイン背景、n(%) | 19 (32.8) | 21 (35.0) | 22 (35.5) | カイ二乗検定 | 0.94 |
| 以前の太極拳の習熟度(1–7) | 2.8 ± 1.3 | 2.9 ± 1.4 | 3.0 ± 1.3 | 一方差ANOVA | 0.68 |
| 過去の無形文化遺産露出(1–7) | 3.1 ± 1.4 | 3.2 ± 1.5 | 3.3 ± 1.4 | 一方差ANOVA | 0.74 |
| 事前テスト文化知識スコア(0–20) | 6.7 ± 2.4 | 6.9 ± 2.6 | 6.8 ± 2.5 | 一方差ANOVA | 0.91 |
| 正常または矯正された視力、n(%) | 58 (100.0) | 60 (100.0) | 62 (100.0) | フィッシャーの厳密検定 | 1 |
| プロの太極拳指導者背景、n(%) | 0 (0.0) | 0 (0.0) | 0 (0.0) | 該当しません | — |
表3:参加者の特徴および実験群の割り当て。 静的グラフィック、従来のビデオ、動的な視覚デザイン条件に割り当てられた参加者に対して、基礎的な人口統計的特徴、過去の太極拳の習熟度、過去の無形文化遺産への接触、事前テストの文化知識スコアが含まれます。データは平均±標準偏差またはn(%)として示されます。グループ間のベースライン同等性を評価するために統計比較が行われました。
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。
選ばれた太極拳の動きの動きの特徴
合計288の太極拳の動きのシークエンスが、8つの選ばれた太極拳型にわたり12人の演奏者から記録されました。不完全な実行、過剰なキーポイント推定、カメラの遮蔽、不安定なランドマーク追跡、またはパフォーマンスの中断があるシーケンスを除外した後、264の有効なシーケンスを特徴抽出のために保持しました。有効な配列の数は、各移動タイプごとに31から34の範囲でした(表4)。
表4:選ばれた8つの太極拳型の動き特徴。 有効な運動シーケンスの記述統計で、運動時間、軌道曲率、滑らかさ指数、対称性指数、リズム安定性、視覚的翻訳スコアが含まれます。軌道曲率は上肢の運動経路の円形を定量化します。滑らかさ...
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。
本研究は、体化された太極拳の知識を動的な視覚デザインに翻訳するための、動作特性に配慮した堅牢なプロトコルを提示・評価します。この研究の中心的な目的は、経験的に抽出された運動学的特徴を解釈可能な視覚変数に変換し、具現化された文化的意味の伝達を向上させるかどうかを明らかにすることでした。これらの発見は、運動に基づく無形文化遺産のコミュニケーションには、表面的な視覚的美化以上のものが必要であることを示しています。身体のリズム、バランス、円形、体重移動を体系的に文化的に解釈可能な視覚形態に変換することで、このプロトコルは静的グラフィックや従来のビデオフォーマットと比較して知識獲得、動き意味認識、身体理解、使いやすさ、行動関与を向上させました。
この手法を成功裏に再現するための重要なステップは、モーションキャプチャおよび前処理パイプラインの厳格な標準化にあります。フレーム間のジッターやキーポイント損失のトラブルシューティングには、手動カメラの露出と録画段階での均一で反射しない照明の厳格な制御が必要です。さらに、シーケンスの時...
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。
著者たちは競合する利害関係はなく、開示すべきこともないと宣言しています。
著者らは、本研究の実施に必要な機関的支援とデジタルメディア実験施設を提供してくださったマカオ市立大学イノベーションデザイン学部および桂林電子技術大学デザイン・クリエイティビティ学部に感謝の意を表します。特に、太極拳講師、ビジュアルコミュニケーションデザインの専門家、そしてモーションキャプチャーとユーザー評価実験にボランティアとして参加してくださったすべての参加者に感謝申し上げます。この研究は、公共、商業、非営利分野のいかなる資金提供機関からも具体的な助成金を受けていません。
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。
| 名前 | 会社 | カタログ番号 | コメント |
|---|---|---|---|
| Adobe After Effects | Adobe Inc. | Adobe After Effects 2024 (v24.6) | 最終プロトタイプの合成に必要なモーショングラフィックスとビジュアルエフェクトソフトウェア。 |
| Computer Workstation | Dell Technologies | Precision 3660 Tower; Intel Core i7-12700 CPU; NVIDIA GeForce RTX 3060 GPU; 32 GB RAM; 1 TB SSD | モーションデータ処理、特徴抽出、可視化生成、統計分析に使用されるワークステーション。 |
| Dell 24-inch Monitor | Dell Technologies | P2422H | 制御されたユーザー評価実験に使用されるディスプレイモニター(1920 × 1080ピクセル、60 Hz)。 |
| Digital Video Camera | Sony Corporation | ILCE-7M4 | モーションキャプチャに使用される同期フロントビューおよびサイドビューカメラ(1920 × 1080ピクセル、30フレーム/秒)。 |
| MediaPipe Pose | Google LLC | MediaPipe 0.10.14 | 33ランドマークの全身ポーズモデルを使用するマーカーレスポーズ推定パイプライン(model_complexity = 1、min_detection_confidence = 0.50、min_tracking_confidence = 0.50)。 |
| NumPy | NumPy Developers | NumPy 1.26.4 | 座標処理とモーション特徴計算に使用される数値計算ライブラリ。 |
| OpenCV | OpenCV Team | OpenCV 4.9.0 | ビデオ処理、フレーム抽出、前処理に使用されるコンピュータビジョンライブラリ。 |
| Operating System | Microsoft | Windows 11 Pro 23H2, 64-bit | モーションデータ処理と可視化生成に使用されるオペレーティングシステム。 |
| Pandas | Pandas Development Team | Pandas 2.2.2 | 構造化データ処理とCSVエクスポートに使用されるデータ管理ライブラリ。 |
| Python | Python Software Foundation | Version 3.11 | データ処理パイプラインに使用されるプログラミング言語環境。 |
| Randomization Software | Microsoft Corporation | Microsoft Excel for Microsoft 365, Version 2405 | 参加者の割り当てのためのコンピュータベースのブロック乱数化シーケンスを生成するために使用。 |
| SciPy | SciPy Developers | SciPy 1.13.1 | バターワースフィルタリングとモーション信号分析に使用される信号処理ライブラリ。 |
| Statistical Analysis Software | IBM Corp. | IBM SPSS Statistics 29.0 | 信頼性分析、仮説検定、仲介分析、および構造方程式モデリングに使用。 |
| Survey Administration Platform | Qualtrics LLC | Qualtrics XM web platform (accessed May 2026) | 質問票を管理し、参加者の回答を電子的に収集するために使用するプラットフォーム。 |
| TouchDesigner | Derivative | TouchDesigner 2023.11880 | モーション特徴駆動のダイナミック可視化を生成するために使用されるビジュアル開発プラットフォーム。 |
| Tripod | Manfrotto | MK055XPRO3 | モーションキャプチャ中にカメラを安定させるために使用する三脚。 |
| Video Synchronization Software | Custom Python/OpenCV workflow | OpenCV 4.9.0 | 視覚的なクラップイベントを使用して前処理中にフロントビューとサイドビューの録画を同期するために使用。 |
アクセスが制限されています。このコンテンツを表示するにはログインするか、トライアルを開始してください。