【フォトグラメトリ】建築デジタルアーカイブ第2回「PC環境編/3DF Zephyr編」

2019年06月11日 2019年07月10日

銭洗弁天VRを制作しました龍 lilea （藤原龍）です。

前回記事では「撮影編」について書かせていただきました。
今回はフォトグラメトリ処理についてまとめた「PC環境編 / 3DF Zephyr編」になります。

※ここで使用している3DF ZephyrはLite版(処理枚数上限500枚)ですが一部の検証にはAerial版(処理枚数制限なし)の体験版も利用しています

※VRは↓こちらから体験いただけます

連載各回のテーマ

【フォトグラメトリ】建築デジタルアーカイブ第1回「撮影編」

【フォトグラメトリ】建築デジタルアーカイブ第2回「PC環境編/3DF Zephyr編」

【フォトグラメトリ】建築デジタルアーカイブ第3回「後処理編」

【フォトグラメトリ】建築デジタルアーカイブ第4回「VR化編」

PC環境編

PC環境編では「広域」フォトグラメトリを行う上での推奨スペックとおすすめツールについてまとめました。

PCスペック

CPU/GPU：
フォトグラメトリは写真を処理することからGPU性能が重要ですがCPUの役割が特に大きく、演算能力が高い程効率的に処理できます。GPUの性能が高くともCPU性能が低いとGPUの性能を発揮出来ない（ボトルネックが起きる）ため注意が必要です。またGPUがCUDA未対応なものですと3DF Zephyrの処理速度は大きく低下してしまいます。

メモリ：
膨大な数の写真を扱うためメモリは多い程安定した処理が行なえます。広域フォトグラメトリの場合は32GBでも不足することがあるので64GBあると安心です。また大幅なメモリ不足はクラッシュの原因にもなるので気をつけましょう。特に3DF Zephyrの複数起動はクラッシュの危険性が高まります。一見複数起動で問題無いように処理が進んでいても、完了のタイミングでクラッシュします。

ドライブ：
ドライブはSSDの使用をおすすめします。広域フォトグラメトリでは、対象エリアの広さにもよりますが3DF Zephyrのプロジェクトファイルが20GB近くなる事もある為、読み書きの早いSSDの方がストレスなく作業出来ます。処理時にはデータの書き込みが頻繁に行われるので3DF Zephyrのキャッシュ保存先もSSDのドライブ内に指定しておくのが好ましいです。またドライブが圧迫されるとフォトグラメトリ処理にも影響が出てくるので十分な空きがある状態で作業しましょう。

※今回使用したプロジェクトファイルの一部

※キャッシュの保存場所はここから設定できます

3DF Zephyr編

ここから3DF Zephyrについてまとめていきます。

なおここで解説するのは主に「広域」フォトグラメトリに関してのTipsです。
3DF Zephyrの基本操作についてはこちらの記事がとてもわかりやすく解説されていますので参考にしてみてください。

動画利用のメリット・デメリット

3DF Zephyrの特徴として動画からフォトグラメトリが可能という点があります。
手軽な半面、いくつかデメリットがあります。

写真に比べて解像度が低いので、テクスチャの品質が下がる
歩きながら撮る事でブレが発生しやすい為、テクスチャの品質が下がる

特に後者による品質低下は大きいので、FPSを高めに設定しブレを極力抑え、カメラを振る際は出来るだけゆっくり動かすようにしましょう。

※写真から生成したモデル　くっきりとシャープ

※動画から生成したしたモデル　映像のブレがそのままテクスチャ化されてしまっている

	動画	写真
手軽さ	◯	△
テクスチャの品質	△	◯

しかし動画を使うメリットもあります。
銭洗弁天VRでは9割写真から生成していますが、初めのトンネル内部のみは動画を利用しています。

トンネルという空間は「同じ様な景色が続く」「暗い」というフォトグラメトリに不利な条件となっているため、画像を高密度・大量に用意する必要があります。この時写真で撮影していこうと思うと、数センチ前に進み撮影し、また数センチ前へ進み撮影、その繰り返しとなり膨大な時間が必要になります。しかし動画であればカメラを構えたまま歩くだけで済みます。広角レンズであればカメラを左右や上下に振る必要もありません。

高密度に大量な画像を用意する必要があるシーンでは動画撮影を利用するのも有効な方法です。

余談ですが―
この動画処理の仕組みは「動画を指定FPSで静止画切り出ししその画像を元にフォトグラメトリする」というものです。ですので他の映像編集ソフトで静止画切り出しした場合でも同様の結果が得られます。

一括処理と分割処理の比較

銭洗弁天VRでは以下の2つの方法で生成を試みました。

3600枚全てを「一括処理」
500枚以下に抑えた12パーツに分けての「分割処理」

※3600枚一括処理は検証用にAerial版の体験版を使用したものです
※公開しているVRは所有しているLite版で分割処理して生成したものです

各処理方法では以下のような相違点がありました。

	一括処理	分割処理
1.総合的な処理時間	△長め	◯短め
2.モデルを統合する手間	◯なし	△あり
3.点群生成密度	△低い	◯高い

1.総合的な処理時間

「分割処理にかかる時間 x 分割数 < 一括処理にかかる時間」という結果となりました。
分割して処理した方が一括で処理するより早く全モデルの生成が完了します。

参考までに3600枚「一括処理」の場合は各工程の時間は以下の通りです。

写真位置算出…2日12時間

高密度点群生成…1日19時間

メッシュ生成…1日17時間

スペックや規模にもよりますが広域フォトグラメトリの場合は処理に1週間は見ておくと良いでしょう。

参考まで―
銭洗弁天VRの制作期間は初めの撮影から公開まででちょうど2ヶ月でした（初の試みであったためトライアンドエラーの時間がその多くを占めていますが）

2.統合する手間

「分割処理」の場合はDCCツールで統合する手間が発生します。
「一括処理」の方が総合的な時間がかかると前述しましたが、PC任せで済む分手を動かす時間は「一括処理」の方が少なく済みます。

3.点群生成密度

「一括処理」の場合は広範囲を一度に生成するため、高密度点群生成時に密度が低くなってしまいます。その結果「分割処理」に比べてディテールが失われてしまいます。

※「分割処理」モデル

※「一括処理」モデル

一括処理の方は十分な点群が生成されていない為大きくディテールが損なわれています。

点群生成数を上げればモデル精度も高まりますが、プリセットにある[高精細]を使った場合でも不足します。カスタムで更に点群上限数を上げる事が可能ですが、極めて膨大な時間がかかります（今回は体験版の期間内に検証が終わらなかったため断念しました）

結局どちらがいいの？

高密度点群生成時のプリセット[高精細]で十分な点群が生成される規模の場合→「一括処理」
十分な点群が生成されない場合→「分割処理」
※そもそも高価なPro版やAerial版を所有していない場合は分割処理一択となりますが

一括生成バージョン銭洗弁天VR

公開した銭洗弁天VRは「分割処理」したものですが、「一括処理」したものもこちらにアップしてあります。実際に比較されたい方は参考にしてみてください。

テクスチャサイズと解像度

VR化を想定している場合Unityの場合は扱えるテクスチャのサイズは8kまでという点に注意しましょう。3DF Zephyrでそれ以上のサイズを生成していても8kサイズに落ちたものになります。

また「一括処理」の場合、そのままですと境内全域で8kテクスチャ1枚という状況になり低品質なぼやけた世界になってしまいます。
これを避けるためには、メッシュ化まで出来た時点でそのメッシュを分割します。こうする事で各メッシュに8kのテクスチャが貼られるので高い解像度を維持できます。多く分割するほど高解像度になります。分割すると言っても座標は合っているので統合の手間はさほどかかりません。
※メッシュを4分割した後、テクスチャ付メッシュ化した例

ポリゴンリダクション

VR化を想定している場合出来るだけポリゴン数を削減し軽量化する必要があります。
これを行うには3DF Zephyrを使う方法とDCCツールを使う方法とありますが、ハイポリのまま書き出ししDCCツールのみで大幅な削減を行うとUVが破綻してしまう恐れがあります。
3DF Zephyrの段階で先に削減しておくのが好ましいです。

※メッシュを右クリック＞フィルター＞間引き