
MatCapの概要や仕組みを理解する話
こんにちは!見障子ゆきです。
今回は3D表現が楽しくなるMatCapについての解説記事です。

こんな感じで、ぱっと見では複雑な表現を手軽に再現できます。
処理負荷も軽い方なので、疑似的なライティングや質感表現、特殊な演出として用いられる事もあるとかないとか。
早速やっていきましょう!
■最初に
MatCapを使うには、対応したShaderが必要になります。
(例:VRM用のMToonシェーダー等)
また、ShaderによってMatCapの反映の仕方に差がある場合があります。
(通常合成/加算合成、など)

今回はMatcapの概要や、MatCap用テクスチャの自作、MatCapの仕組みなどについて記載します。
なるべく汎用的に、MatCapの概念を理解することを想定しています。
特定のShaderの話や、具体的な計算式みたいな話は出てこないので、予めご容赦ください。
■MatCapでどんな見た目が出来るのか
MatCapはテクスチャの描き込みによって多彩な表現ができます。



この記事の冒頭のGifみたいに、つるつる・テカテカした表現はMatCapの得意とする傾向にあります。
逆に淡めに薄く、ほんのり使っても面白いと思います。
テクスチャが許す限り、表現は自由です。

■早速自作してみる
テクスチャの中心から、球の範囲に表現したい陰影を自由に塗ります。
以上!!!!

試しに ↑ のMatCapを用いると、↓ こんな感じになります。

また ↓ のような、Materialの球状サンプルをキャプチャして使う、ということもできます。
(むしろこれが本来の想定な気もする)

確認の際は、多少凹凸のあるモデルで確認すると確認しやすいのでお勧めです。
■MatCapとは?
MatCapは「Material Capture」という、キャプチャ画像を張り付けることでキャプチャ画像を映し込んだような表現ができる手法です。
仮に、こんな感じの草原の絵をMatCapテクスチャに用いると、


まるで鏡に映り込んだような見え方をします。
(※1:本来このような使い方はあまりされません)
このようにただテクスチャを張り付けている訳ではなく、見る人(=カメラ)の位置・角度によって見え方が変わるという性質があります。
<※1:余談>
鏡のような表現に近しい技術として「環境マッピング」があるため、
背景の反射表現を行いたい場合はそちらをお勧めします。
(MatCapでは半球分しかテクスチャで指定が出来ないため)
・環境マッピング=背景の反射を疑似的に表現する
・MatCap=マテリアルの質感を疑似的に再現する
MatCapは、まじめに計算すると重くなる複雑なマテリアルを、手軽に疑似再現するのに向いています。

スフィアサンプル部分をキャプチャしてMatcapに使えば
近しい表現が軽量で出来るのが強み。
MatCapは質感表現に向いた手法です。
キャプチャ画像以外にも手描きのテクスチャを用いたり、MatCapの効果をカラーテクスチャに加算合成したり、といった工夫を加えて使われることも多いです。
百聞は一見に如かず!ということで、実例紹介です。
「網目っぽいAlbedoテクスチャ」+「光沢感のある手描きMatCap」を加えてみるとこんな感じになります。


↑ まるで、全体が薄いガラスで覆われたかのようなつるつる具合に。
またShader側の工夫として、MatCapの効果をマスキング(部分的に適応)出来るようにするのも面白いです。
(※マスク対応しているShaderでのみ)

マスクを掛けた場合は先ほどと違って薄いガラスっぽさは無く、
網目自体が金属っぽくテカテカしてるように見えますね。マイクっぽい。
質感表現の幅がグッと上がります。
テクスチャを変えたら、鎖帷子とかデカール・箔押しとかも手軽に表現できそうですね。
網目をもっと細かくして、光沢を抑えたMatCapテクスチャを使えば、セーターとか滑らかで上質な布とかも手軽に表現できるかも。
こういった、複雑なマテリアルでなくても多彩な表現が出来ちゃうのがMatCapの楽しい所ですね!
■MatCapの特徴
MatCapは特にこんな特徴があります。
・比較的、計算負荷が軽い
・単体ではライティングを計算していない
・カメラの動きに応じて見た目が変化する
・映り込みのような表現がしやすい
・擬似的なライティング効果を出せる
・テクスチャ次第で多様な質感表現が出来る
(画像の試行錯誤をしやすい)
反射のような見た目を作りやすいですが、実際にはライティング計算・反射計算を行っていない点には要注意です。
■MatCapの仕組み
MatCapの仕組みの解説です。ご興味あればどうぞ!
MatCapはカメラから見た被写体の法線を基に、MatCapテクスチャのどこのpixelの色を読み取るか決定します。
イメージで伝えるなら、
MatCapテクスチャに「矢印つきの半球」を見立てて、オブジェクトの法線と同じ位置のピクセルの色を表示する、という具合です。
何を言っているのかさっぱりですよね。自分でもそう思います。
ので、イメージ図を用意しました。


(上記のGifの例であれば、「外側過ぎない黄色」を描画することになります)
そのため、オブジェクトとライトが動いていなくても、
どこから見るか(=カメラの位置)によって見え方が変わる、という性質が生まれます。
MatCapでの色決定の仕組みはこれだけです。
そのため、MatCap単体ではライティング計算は一切行われていません。
同じく、反射計算も行われていません。
擬似的な照明・反射効果というのはこの事です。
・MatCapってもしかして
仕組みだけ見るとオブジェクトの法線とテクスチャだけで決まるため、
一種のShaderマジックな側面は否定できませんが、
・テクスチャによる自由度の高さ
・表現幅に対しての計算量が軽コスト
(通常のテクスチャマッピング + 法線のビュー変換が入る程度)
という圧倒的な実用性・表現力の高さが強烈です。
3D凌明期の、いわゆるメタルマ○オとかもこの表現かな?
(実際のShaderコードを見た訳では無いです)
この処理を思いついた方は天才なんじゃなかろうか。
■最後に
最近のハイスペックな環境だとリアルに計算された美麗な表現も多いのですが、こういった一種の力業的な表現も大好きです。
自分が比較的ロースペック環境の開発が多かったりとか、トゥーン表現が好きだったりとかもあるんでしょうけど、工夫次第で好きな表現を選べる、っていうのが最高ですね!
ちなみに今回の記事は、次回に続く記事の前触れでもあります。
とある表現に挑戦した研究があるのですが、その仕組みの解説にMatCapが避けて通れなかったので、今回記事を切り分けて作成しました。
そちらの記事も近いうちに公開予定なので、気が向いたら見てみて頂けると嬉しいです!
#MatCap
#3DCG
#Material
#Shader
#解説