法线纹理贴图计算(切线空间世界空间)

news2024/9/22 11:30:00

效率:

在切线空间中计算,效率更高,因为可以在顶点着色器中就完成对光照、视角方向的矩
阵变换,计算量相对较小。( 矩阵变换在顶点着色器中计算)

在世界空间中计算,效率较低,由于需要对法线贴图进行采样,所以变换过程必须在片
元着色器中实现,我们需要在片元着色器中对法线进行矩阵变换。( 矩阵变换在片元着色器中计算)

全局效果

在切线空间中计算,对全局效果的表现可能会不够准确,在处理一些列如镜面反射、环境映射效果时表现效果可能不够准确

在世界空间中计算,对全局效果的表现更准确,可以更容易的应用于全局效果的计算

在选择使用哪种计算方式时主要考虑,若没有全局效果要求,我们优先使用在切线空间下进行光照计算,因为它效率较高;反之,我们选择在世界空间下计算

1、在切线空间下计算法线贴图

在切线空间下进行光照计算,需要把光照方向、视角方向变换到切线空间下参与计算
关键点:计算模型空间到切线空间的变换矩阵,变换矩阵为子空间(切线空间)到父空间(模型空间)的逆矩阵。

由于我们主要用变换矩阵来进行矢量的变换而非点的变换,因此可以变为3x3矩阵,而x、y、z轴分别为切线空间中顶点的切线、副切线、法线。已知切线、法线(从模型数据中可以获取),副切线为切线、法线的叉乘结果,而3个轴为相互垂直的单位向量,因此可以推出变换矩阵是正交矩阵,其逆矩阵就是其转置矩阵,即是模型空间到切线空间的变换矩阵。

用到的内置函数:
得到模型空间光的方向:ObjSpaceLightDir(模型空间顶点坐标)
得到模型空间视角方向:ObjSpaceViewDir(模型空间顶点坐标)
得到光方向和视角方向相对于模型空间的数据表达后,再与模型空间到切线空间的变换矩阵进行运算,即可将他们转换到切线空间下参与后续计算

  • 属性相关:漫反射颜色,单张纹理,法线纹理,凹凸程度,高光反射颜色,光泽度
  • 结构体相关

    顶点着色器中传入:可以使用 UnityCG.cginc 中的 appdata_full,其中包含了我们需要的顶点、法线、切线、纹理坐标相关数据

    片元着色器中传入:自定义一个结构体,其中包含 裁剪空间下坐标、uv坐标、光的方向、视角的方向

  • 顶点着色器回调函数中
  1. 顶点坐标模型转裁剪
  2. 单张纹理和法线纹理 UV坐标缩放偏移计算
  3. 副切线计算:用模型空间中的法线和切线进行叉乘 再乘以切线中的w(确定副切线方向)
  4. 构建模型空间到切线空间的变换矩阵
  5. 将光照方向和视角方向转换到模型空间(利用ObjSpaceLightDir和ObjSpaceViewDir内置函数)
  6. 将光照方向和视角方向转换到切线空间(利用变换矩阵进行乘法运算)
  • 片元着色器回调函数中
  1. 取出法线贴图中的法线信息(利用纹理采样函数tex2D)
  2. 利用内置的UnpackNormal函数对法线信息进行逆运算以及可能的解压
  3. 用得到的切线空间的法线数据 乘以 BumpScale 来控制凹凸程度
  4. 得到单张纹理颜色和漫反射颜色的叠加颜色
  5. 用切线空间下的 光方向、视角方向、法线方向 进行Blinn Phong光照模型计算
Shader "ShaderProj/2/NormalTex_TagentSpace"
{
    Properties
    {
       _MainColor("_MainColor", Color) = (1,1,1,1)
       _MainTex("_MainTex", 2D) = ""{}
       _BumpMap("_BumpMap", 2D) = ""{}
       _BumpScale("_BumpScale", Range(0, 1)) = 1
       _SpecularColor("_SpecularColor", Color) = (1,1,1,1)
       _SpecularNum("_SpecularNum", Range(0, 20)) = 18
    }
    SubShader
    {
        Tags { "LightMode"="ForwardBase" }
        LOD 100
        
        Pass
        {
            CGPROGRAM
            #pragma vertex vert
            #pragma fragment frag
            #include "UnityCG.cginc"
            #include "Lighting.cginc"

            fixed4 _MainColor;
            sampler2D _MainTex;
            float4 _MainTex_ST;
            sampler2D _BumpMap;
            float4 _BumpMap_ST;
            float _BumpScale;
            fixed4 _SpecularColor;
            float _SpecularNum;

            struct v2f
            {
                float4 pos:SV_POSITION;
                float4 uv:TEXCOORD0;
                float3 lightDir:TEXCOORD1;
                float3 viewDir:TEXCOORD2;
            };

            v2f vert (appdata_full v)
            {
                v2f data;
                data.pos = UnityObjectToClipPos(v.vertex);
                data.uv.xy = TRANSFORM_TEX(v.texcoord, _MainTex);
                data.uv.zw = TRANSFORM_TEX(v.texcoord, _BumpMap);

                // 副切线, w 是方向
                float3 binormal = cross(normalize(v.tangent), normalize(v.normal)) * v.tangent.w; 
                float3x3 transMatrix = float3x3(v.tangent.xyz,
                                              binormal,
                                              v.normal);
                data.lightDir = mul(transMatrix, ObjSpaceLightDir(v.vertex));
                data.viewDir = mul(transMatrix, ObjSpaceViewDir(v.vertex));
                
                return data;
            }

            fixed4 frag (v2f i) : SV_Target
            {
                // 取出法线纹理贴图当中的数据
                float4 packedNormal = tex2D(_BumpMap, i.uv.zw);
                // 将我们取出来的法线数据进行逆运算并且可能会进行解压缩的运算,最终得到切线空间下的法线数据
                float3 tangentNormal = UnpackNormal(packedNormal);
                // 乘以凹凸程度的系数
                tangentNormal *= _BumpScale;

                fixed3 albedo = tex2D(_MainTex, i.uv.xy) * _MainColor.rgb;
                fixed3 lambertColor = _LightColor0 * albedo * max(0, dot(tangentNormal, normalize(i.lightDir)));

                float3 halfAngle = normalize(i.viewDir + i.lightDir);
                fixed3 specularColor = _LightColor0.rgb * _SpecularColor.rgb * pow(max(0, dot(tangentNormal, halfAngle)), _SpecularNum);
                fixed3 color = UNITY_LIGHTMODEL_AMBIENT.rgb * albedo + lambertColor + specularColor;

                return fixed4(color, 1);
            }
            ENDCG
        }
    }
}

2、在世界空间下计算法线贴图

世界空间下进行光照计算,需要把法线方向变换到世界空间下参与计算
关键点:计算切线空间到世界空间的变换矩阵,变换矩阵为子空间到父空间的变换
由于我们主要用变换矩阵来进行矢量的变换而非点的变换,因此可以变为3x3矩阵
而x、y、z轴分别为切线空间中顶点的切线、副切线、法线,我们只需要得到3个轴相对于世界空间的向量表达,即可得到该变换矩阵

法线从模型空间到世界空间:UnityObjectToWorldNormal(模型空间法线数据)
切线从模型空间到世界空间: UnityObjectToWorldDir(模型空间切线数据)
世界空间的副切线:用上面计算的结果叉乘即可
由这三个向量组成最终的切线空间到世界的空间的变换矩阵即可

Shader "ShaderProj/2/NormalTex_WorldSpace"
{
    Properties
    {
        _MainTex ("Texture", 2D) = "white" {}
        _MainColor ("MainColor", Color) = (1,1,1,1)
        _BumpMap ("BumpMap", 2D) = ""{}
        _BumpScale ("BumpScale", Range(0, 1)) = 1
        _SpecularColor ("SpecularColor", Color) = (1,1,1,1)
        _SpecularNum ("SpcecularNum", Range(0, 20)) = 18
    }
    SubShader
    {
        Tags { "LightMode"="ForwardBase" }
        LOD 100

        Pass
        {
            CGPROGRAM
            #pragma vertex vert
            #pragma fragment frag
            #include "UnityCG.cginc"
            #include "Lighting.cginc"

            sampler2D _MainTex;
            float4 _MainTex_ST;
            sampler2D _BumpMap;
            float4 _BumpMap_ST;
            float _BumpScale;
            fixed3 _MainColor;
            fixed3 _SpecularColor;
            float _SpecularNum;

            struct v2f
            {
                float4 pos:SV_POSITION;
                float4 uv:TEXCOORD0;
                float3 worldPos:TEXCOORD1;
                float3x3 transMat:TEXCOORD2;
            };

            v2f vert (appdata_full v)
            {
                v2f data;

                data.pos = UnityObjectToClipPos(v.vertex);
                data.worldPos = mul(unity_ObjectToWorld, v.vertex);
                data.uv.xy = TRANSFORM_TEX(v.texcoord, _MainTex);
                data.uv.zw = TRANSFORM_TEX(v.texcoord, _BumpMap);

                float3 worldNormal = UnityObjectToWorldNormal(v.normal);
                float3 worldTagent = UnityObjectToWorldDir(v.tangent);
                // 注意不要搞反叉乘的顺序!!!
                float3 worldBinormal = cross(normalize(worldTagent),  normalize(worldNormal)) * v.tangent.w;
                // 切线空间到世界空间的转换矩阵
                data.transMat = float3x3(worldTagent.x, worldBinormal.x, worldNormal.x,
                                         worldTagent.y, worldBinormal.y, worldNormal.y,
                                         worldTagent.z, worldBinormal.z, worldNormal.z);

                return data;
            }

            fixed4 frag (v2f i) : SV_Target
            {
                fixed3 lightDir = normalize(UnityWorldSpaceLightDir(i.worldPos));
                fixed3 viewDir = normalize(UnityWorldSpaceViewDir(i.worldPos));

                float4 packedNormal = tex2D(_BumpMap, i.uv.zw);
                float3 tagentNormal = UnpackNormal(packedNormal);
                tagentNormal *= _BumpScale;
                float3 worldNormal = mul(i.transMat, tagentNormal);
                
                fixed3 albedo = tex2D(_MainTex, i.uv.xy) * _MainColor;
                fixed3 lambertColor = _LightColor0 * albedo * max(0, dot(worldNormal, lightDir));
                
                float3 halfAngle = normalize(lightDir + viewDir);
                fixed3 specularColor = _LightColor0 * _SpecularColor * pow(max(0, dot(worldNormal, halfAngle)), _SpecularNum);
                fixed3 color = UNITY_LIGHTMODEL_AMBIENT * albedo + lambertColor + specularColor;

                return fixed4(color, 1);
            }
            ENDCG
        }
    }
}

3、其他

  • 模型空间下的切线数据

模型数据中的切线数据为float4类型的,其中的w表示副切线的方向
用法线和切线叉乘得到的副切线方向可能有两个,用切线数据中的w与之相乘确定副切线方向

  • Unity当中的法线纹理类型

当我们把纹理类型设置为Normal map(法线贴图)时,我们可以使用Unity提供的内置函数
UnpackNormal来得到正确的法线方向。该函数内部不仅可以进行法线分量 = 像素分量 * 2 – 1
的逆运算,还会进行解压运算(Unity会根据不同平台对法线纹理进行压缩)

  • 法线纹理属性法线纹理属性命名一般为_BumpMap (凸块贴图),还会声明一个名为_BumpScale (凸块缩放) 的float属性,它主要用于控制凹凸程度,为0时,表示没有法线效果,法线的影响会被消除;为1时,表示使用法线贴图中的原始法线信息,没有缩放
  • 如果使用的凹凸纹理不是法线纹理,而是高度纹理,我们需要进行如下设置

图片类型设置为Normal map(法线贴图),勾选 Create from Gryscale(从灰度创建)
这样我们就可以把高度纹理当成切线空间下的法线纹理处理了,多出的Bumpiness(颠簸值)控制凹凸程度,Filtering(过滤模式)决定计算凹凸程度的算法:
Sharp:滤波生成法线
Smooth:平滑的生成法线

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2043329.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【区块链+金融服务】区块链在仓储融资的创新应用 | FISCO BCOS应用案例

释放数据要素价值,FISCO BCOS 2024 应用案例征集 在仓储融资业务中,对质押物的有效监管至关重要,但仓储融资一般涉及到监管方、仓储方和金融机构等多套系统, 金融机构的系统与仓储系统不直连,难以实时获取质押物库存情…

【YOLOv5/v7改进系列】替换Neck为Gold-Yolo特征融合网络

一、导言 Gold-YOLO是一种高效的物体检测模型,它通过一种新的机制——Gather-and-Distribute(GD)机制来增强多尺度特征融合的能力,从而在保证实时性能的同时提高了检测精度。下面是对Gold-YOLO的主要特点和创新点的概述&#xff…

谈一谈TVM编译工程师的修炼手册

首先提一下TVM TVM 被称为编译器,是因为它在深度学习模型的优化和执行过程中执行了类似传统编译器的许多工作。与传统编译器将高级语言代码(如 C)编译为机器代码类似,TVM 将深度学习模型表示(如 ONNX)转化…

深度相机,通过2d检测得到目标坐标系的3d检测框

算法流程图如下 1. 输入同步: 订阅三个主题: 深度图像 (depth_image)。相机信息 (depth_info)。2D目标检测 (detections)。 使用 message_filters.ApproximateTimeSynchronizer 来同步这些输入,以确保处理的消息是对应的。 2. 计算2D边界…

GET新知识-如何通过Ubuntu和Windows进行文件交互

知识记录篇改求助篇了呜呜呜~~~ ,到最后一步passwd咋样都无法链接了。 1.通过下载open SSH进行交互 输入Linux命令: sudo apt install openssh-server 然后就会出现这个,输入Y确认,即可安装成功 2.在Windows上也安装open SSH,具体…

CAN总线详解-理论知识部分

目录 CAN总线简介 CAN总线硬件电路 CAN电平标准 CAN收发器 ​编辑 CAN物理层特性 CAN总线帧格式 数据帧 数据帧格式 数据帧发展历史 遥控帧 错误帧 过载帧 帧间隔 位填充 波形实例 CAN总线接收方数据采样 接收方数据采样遇到的问题 位时序 硬同步 再同步 波…

月销量不足1000的新能源车,都是什么人在买?

近日,盐城经济技术开发区人民法院决定受理高合汽车母公司华人运通(江苏)技术有限公司预重整申请。 由此,高合汽车正式破产重整。无独有偶,恒大汽车附属公司广东恒大新能源汽车和智能汽车也被申请破产重整。 高合和恒…

使用API有效率地管理Dynadot域名,对拍卖的域名进行出价

前言 Dynadot是通过ICANN认证的域名注册商,自2002年成立以来,服务于全球108个国家和地区的客户,为数以万计的客户提供简洁,优惠,安全的域名注册以及管理服务。 Dynadot平台操作教程索引(包括域名邮箱&…

python实现每天定时发送邮件

文章目录 步骤 1: 安装所需的库步骤 2: 编写发送电子邮件的 Python 脚本步骤 3: 配置电子邮件发送服务步骤 4: 运行脚本进一步扩展 要编写一个用于自动发送每日电子邮件报告的 Python 脚本,并配置它在每天的特定时间发送电子邮件,使用 smtplib 和 emai…

高可用集群keepalived的应用以及部署

1.高可用集群 1.1.集群类型 LB:Load Balance 负载均衡 LVS/haproxy/nginx(http/upstream,stream/upstream) HA : High Point of Failure 高可用集群 数据库、Redis SPoF:single point Of failure 解决单点故障 HPC:…

数据库管理-第228期 Oracle全球分布式数据库-初探(20240812)

数据库管理228期 2024-08-12 数据库管理-第228期 Oracle全球分布式数据库-初探(20240812)1 概念2 关于全球分布式数据库3 分布式分区4 Oracle全球分布式数据库的优势总结 数据库管理-第228期 Oracle全球分布式数据库-初探(20240812&#xff0…

如何在Shopify开发中高度还原Figma设计稿

### 一、理解设计意图:设计与开发的有效沟通#### 1. 早期沟通的重要性在开发工作开始之前,开发人员应与设计师进行详细的沟通,确保对设计意图有深刻理解。关键点包括:- **色彩和字体**:了解设计师对品牌色彩和字体的选…

从0开始搭建vue + flask 旅游景点数据分析系统(十一):登录、注册页面、未登录拦截、注销逻辑

这一期已经到了系列教程的尾声了,下面来搭建登录、注册页面,处理登录拦截和注销的逻辑 1 建表 先把数据库表用户相关的数据库表建立一下: CREATE TABLE tb_user (id int NOT NULL AUTO_INCREMENT COMMENT id,realname varchar(255) CHARAC…

燃气综合管理解决方案:构建安全可靠的燃气供应网络

无论是繁华的都市中心还是宁静的郊区,地下深处都隐藏着错综复杂的燃气管道网络,这些管网为千家万户输送着生活必需的能源。尽管这些管道由高强度和耐腐蚀材料制成,但长期暴露于自然环境中仍会逐渐老化和磨损。一旦发生破损或因人为错误导致管…

eNSP 华为单臂路由实现VLAN间通信

华为单臂路由实现VLAN间通信 SW&#xff1a; <Huawei>sys <Huawei>system-view [Huawei]sysname SW [SW]VLAN batch 10 20 //批量划分VLAN [SW]int g0/0/1 [SW-GigabitEthernet0/0/1]port link-type trunk [SW-GigabitEthernet0/0/1]port trunk allow-pa…

LabVIEW光纤水听器闭环系统

开发了一种利用LabVIEW软件开发的干涉型光纤水听器闭环工作点控制系统。该系统通过调节光源频率和非平衡干涉仪的光程差&#xff0c;实现了工作点的精确控制&#xff0c;从而提高系统的稳定性和检测精度&#xff0c;避免了使用压电陶瓷&#xff0c;使操作更加简便。 项目背景 …

安卓平板电脑定制方案_MTK联发科智能终端方案开发

基于联发科MT8788八核2.0GHz处理器的平板电脑方案&#xff0c;这款平板电脑不仅支持4G和Wi-Fi 5高速网络&#xff0c;还搭载了Android12.0系统&#xff0c;可带来流畅的多任务处理和广泛兼容性。其6GB运行内存和128GB内置存储&#xff0c;再加上支持TF卡扩展&#xff0c;确保了…

【微信小程序】WXS脚本

概述 1. 什么是 wxs WXS&#xff08;WeiXin Script&#xff09;是小程序独有的一套脚本语言&#xff0c;结合 WXML&#xff0c;可以构建出页面的结构。 2. wxs 的应用场景 3. wxs 和 JavaScript 的关系* 基础语法 1. 内嵌 wxs 脚本 2. 定义外联的 wxs 脚本 3. 使用外联的 w…

【Qt菜鸟笔记】QLCDNumber控件

1.QLCDNumber控件简介&#xff08;Qt6.5.3版&#xff09; QLCDNumber控件显示带有类似 LCD 数字的数字。它可以显示十进制、十六进制、八进制或二进制数。 头文件引入#include<QLCDNumber>CMake配置:find_package(Qt6 REQUIRED COMPONENTS Widgets) target_link_librar…

ffmpeg的基础命令

文章目录 ffmpeg/ffplay/ffprobe区别ffmpeg 的作用ffplay的作用ffprobe的作用 ffmpeg使用概述功能概述转码过程简单使用FFMPEG -i常用的 -i例子 ff***工具之间共享的选项ffmpeg主要选项ffmpeg提取音视频数据ffmpeg命令修改原有的视频格式ffmpeg命令裁剪和合并视频拼接视频的方式…