Unity 使用 Protobuf(Pb2)二进制数据全流程工具详解

news2025/3/25 20:48:50

前言

在Unity游戏开发中,高效、快速、安全地读取配置数据是一项重要需求。本文介绍一种完整的解决方案——使用Protobuf二进制格式(Pb2)存储和读取游戏数据,并详细分享实现全流程的Unity工具。

一、技术流程概览

实现Unity读取Pb2二进制数据的流程如下:

  1. Excel设计数据表
  2. Excel转Proto文件
  3. Proto文件转C#类
  4. Excel数据序列化为Pb2二进制文件
  5. Unity中加载Pb2数据文件

二、具体实现步骤

1. Excel设计数据表

数据表应遵循特定的格式规范:

  • 第一行:字段注释
  • 第二行:字段名(英文变量名)
  • 第三行:字段数据类型(例如int32、string)
  • 第四行及以下:数据内容

2. Excel转Proto文件

使用自定义编辑器工具自动将Excel表转换为.proto文件。

关键代码ProtoGenerator.cs

private void GenerateProtoFile()
        {
            FileInfo fileInfo = new FileInfo(excelFilePath);
            if (!fileInfo.Exists)
            {
                Debug.LogError("Excel 文件不存在: " + excelFilePath);
                return;
            }

            // 确保输出目录存在
            if (!Directory.Exists(outputFolder))
            {
                Directory.CreateDirectory(outputFolder);
            }

            // 定义 .proto 文件头部信息
            string protoContent = "syntax = \"proto3\";\n";
            protoContent += "package GameDataProto;\n\n";

            using (ExcelPackage package = new ExcelPackage(fileInfo))
            {
                // 遍历所有工作表,每个工作表生成一个 message
                foreach (ExcelWorksheet worksheet in package.Workbook.Worksheets)
                {
                    string messageName = worksheet.Name;
                    protoContent += $"message {messageName} {{\n";

                    // 假定第一行为注释,第二行为变量名,第三行为类型
                    int colCount = worksheet.Dimension.Columns;
                    int fieldIndex = 1;
                    for (int col = 1; col <= colCount; col++)
                    {
                        object commentObj = worksheet.Cells[1, col].Value;
                        object variableNameObj = worksheet.Cells[2, col].Value;
                        object typeObj = worksheet.Cells[3, col].Value;

                        if (variableNameObj == null || typeObj == null)
                            continue;

                        string comment = commentObj != null ? commentObj.ToString().Trim() : "";
                        string variableName = variableNameObj.ToString().Trim();
                        string type = typeObj.ToString().Trim();

                        if (!string.IsNullOrEmpty(comment))
                        {
                            protoContent += $"    // {comment}\n";
                        }

                        protoContent += $"    {type} {variableName} = {fieldIndex};\n";
                        fieldIndex++;
                    }

                    protoContent += "}\n\n";
                }
            }

            string protoFilePath = Path.Combine(outputFolder, "GameDataProto.proto");
            Editor.EditorHelper.WriteAllText(protoFilePath, protoContent);
            Debug.Log($"生成 .proto 文件: {protoFilePath}");
        }
  • 通过Unity Editor菜单打开窗口,选择Excel文件与输出目录,自动生成.proto文件。
3. Proto文件转C#类

根据生成的.proto文件,自动生成对应的C#数据类。

关键代码ProtoToCSharpGenerator.cs

  • 自动解析proto协议,生成继承自DataInfo的数据类与继承自BaseGameData的容器类GameData
[ProtoBuf.ProtoContract]
    public class DataInfo
    {
        [ProtoBuf.ProtoIgnore]
        public int id;
    }

    public class BaseGameData
    {
        /// <summary>
        /// 使用反射将加载到的表格数据存储到当前 GameData 实例中。
        /// 例如,加载到的 List<CharacterInfo> 会赋值给属性名为 CharacterInfo 的属性,
        /// 要求属性类型必须为 List<T>,T 与传入数据类型一致。
        /// </summary>
        /// <typeparam name="T">表格数据的元素类型</typeparam>
        /// <param name="tableData">加载到的表格数据列表</param>
        public void SetTableData<T>(List<T> tableData)
        {
            // 查找当前实例中类型为 List<T> 的公共属性
            var property = this.GetType().GetProperties(BindingFlags.Public | BindingFlags.Instance)
                .FirstOrDefault(p => p.PropertyType == typeof(List<T>));
            if (property != null)
            {
                property.SetValue(this, tableData);
                Debug.Log($"成功将 {typeof(T).Name} 数据加载到 {this.GetType().Name} 中。");
            }
            else
            {
                Debug.LogError($"在 {this.GetType().Name} 中未找到类型为 List<{typeof(T).Name}> 的属性。");
            }
        }
        
        public T GetDataByID<T>(int id) where T : DataInfo
        {
            var containerType = GetType();
            // 改为搜索公共字段,而非属性
            var field = containerType.GetFields(BindingFlags.Public | BindingFlags.Instance)
                .FirstOrDefault(f => f.FieldType == typeof(List<T>));
            if (field != null)
            {
                var list = field.GetValue(this) as List<T>;
                if (list != null)
                {
                    return list.FirstOrDefault(item => item.id == id);
                }
            }

            return default(T);
        }

    }
 // 固定使用的命名空间
            string packageName = "Reacool.Core.DataTable";
            List<string> messageNames = new List<string>();

            string[] lines = Reacool.Editor.EditorHelper.ReadAllLines(protoFilePath);
            bool isMessage = false;
            bool isEnum = false;
            StringBuilder sb = new StringBuilder();

            // 文件头注释和 using 声明
            sb.AppendLine("// 通过 .proto 文件自动生成的 C# 文件,请勿手动修改");
            sb.AppendLine("using System.Collections.Generic;");
            sb.AppendLine();

            // 开始生成代码,强制命名空间为 Reacool.Core.DataTable
            sb.AppendLine($"namespace {packageName}");
            sb.AppendLine("{");

            // 解析 .proto 文件内容
            for (int i = 0; i < lines.Length; i++)
            {
                string line = lines[i].Trim();

                // 忽略 package 声明(固定命名空间)
                if (line.StartsWith("package"))
                {
                    continue;
                }
                else if (line.StartsWith("//"))
                {
                    sb.AppendLine("    " + line);
                }
                else if (line.StartsWith("message"))
                {
                    isMessage = true;
                    var match = Regex.Match(line, @"message\s+(\w+)");
                    if (match.Success)
                    {
                        string messageName = match.Groups[1].Value;
                        if (!messageNames.Contains(messageName))
                            messageNames.Add(messageName);

                        // 表格类继承 DataInfo
                        sb.AppendLine("    [ProtoBuf.ProtoContract]");
                        sb.AppendLine($"    public class {messageName} : DataInfo");
                        sb.AppendLine("    {");
                        
                        // 在每个 message 里,自动插入 idProxy 属性,替代基类 id 做序列化
                        sb.AppendLine("        [ProtoBuf.ProtoMember(1)]");
                        sb.AppendLine("        public int idProxy");
                        sb.AppendLine("        {");
                        sb.AppendLine("            get => base.id;");
                        sb.AppendLine("            set => base.id = value;");
                        sb.AppendLine("        }");
                    }
                }
                else if (line.StartsWith("enum"))
                {
                    isEnum = true;
                    var match = Regex.Match(line, @"enum\s+(\w+)");
                    if (match.Success)
                    {
                        string enumName = match.Groups[1].Value;
                        sb.AppendLine("    public enum " + enumName);
                        sb.AppendLine("    {");
                    }
                }
                else if (line.StartsWith("}"))
                {
                    if (isMessage || isEnum)
                    {
                        sb.AppendLine("    }");
                        isMessage = false;
                        isEnum = false;
                    }
                }
                else if (string.IsNullOrEmpty(line))
                {
                    sb.AppendLine();
                }
                else if (isMessage)
                {
                    // 解析 message 内字段,如 "repeated type name = id;"
                    var fieldMatch = Regex.Match(line, @"(repeated\s+)?(\w+)\s+(\w+)\s*=\s*(\d+);");
                    if (fieldMatch.Success)
                    {
                        bool isArray = !string.IsNullOrEmpty(fieldMatch.Groups[1].Value);
                        string fieldType = fieldMatch.Groups[2].Value;
                        string fieldName = fieldMatch.Groups[3].Value;
                        int fieldId = int.Parse(fieldMatch.Groups[4].Value);

                        // 跳过 id 属性,因为我们已经用 idProxy 代替
                        if (fieldName.Equals("id", System.StringComparison.OrdinalIgnoreCase))
                        {
                            continue;
                        }

                        // 简单转换 Protobuf 基本类型为 C# 类型
                        if (fieldType == "int32") fieldType = "int";
                        else if (fieldType == "int64") fieldType = "long";

                        sb.AppendLine($"        [ProtoBuf.ProtoMember({fieldId})]");
                        sb.AppendLine($"        public {fieldType}{(isArray ? "[]" : "")} {fieldName};");
                    }
                }
                else if (isEnum)
                {
                    sb.AppendLine("        " + line.Replace(';', ','));
                }
4. Excel数据序列化为Pb2二进制文件

使用工具将Excel表中数据自动序列化为Protobuf二进制格式。

关键代码ProtobufBytesGenerator.cs

  • 自动读取Excel文件,解析工作表,并序列化为Pb2格式,存储成.bytes文件。
FileInfo excelFile = new FileInfo(excelFilePath);
                using (ExcelPackage package = new ExcelPackage(excelFile))
                {
                    // 通过反射获取 GameData 类型的所有公共实例字段
                    Type gameDataType = typeof(T);
                    FieldInfo[] fields = gameDataType.GetFields(BindingFlags.Public | BindingFlags.Instance);
                    foreach (FieldInfo field in fields)
                    {
                        // 仅处理 List<T> 类型的字段
                        if (field.FieldType.IsGenericType &&
                            field.FieldType.GetGenericTypeDefinition() == typeof(List<>))
                        {
                            Type elementType = field.FieldType.GetGenericArguments()[0];
                            // 约定工作表名称与元素类型名称相同(如 CharacterInfo、AudioInfo 等)
                            string sheetName = elementType.Name;
                            var worksheet = package.Workbook.Worksheets[sheetName];
                            if (worksheet == null)
                            {
                                Debug.LogWarning("未找到工作表:" + sheetName + ",跳过。");
                                continue;
                            }

                            // 调用通用解析方法 ParseSheet<T> 将工作表数据转为 List<T>
                            MethodInfo method = typeof(BinaryGenerator)
                                .GetMethod("ParseSheet", BindingFlags.NonPublic | BindingFlags.Static);
                            MethodInfo genericMethod = method.MakeGenericMethod(elementType);
                            object listObj = genericMethod.Invoke(null, new object[] { worksheet });

                            // 输出文件路径:以工作表名称命名的二进制文件(例如 CharacterInfo.bytes)
                            string outputFilePath = Path.Combine(outputFolder, sheetName + ".bytes");
                            using (FileStream fs = new FileStream(outputFilePath, FileMode.Create))
                            {
                                Serializer.Serialize(fs, listObj);
                            }

                            Debug.Log("生成二进制文件成功:" + outputFilePath);
                        }
                    }
                }
5. Unity中加载Pb2数据文件

通过DataTableManager读取Pb2二进制文件并反序列化。

关键代码DataTableManager.csBaseGameData.cs

  • 使用泛型反射动态加载二进制数据,存入BaseGameData对象中,统一管理。
 /// <summary>
        /// 保存二进制数据
        /// </summary>
        /// <param name="fileData"></param>
        /// <typeparam name="T"></typeparam>
        public void ProcessByteData<T,T2>(byte[] fileData)where T : DataInfo where T2 : BaseGameData
        {
            if (fileData == null || fileData.Length == 0)
            {
                Debug.LogError("传入的数据为空!");
                return;
            }

            // 根据类型名称生成对应的字段名:例如 "CharacterInfo" -> "characterInfos"
            string typeName = typeof(T).Name;
            string fieldName = char.ToLowerInvariant(typeName[0]) + typeName.Substring(1) + "s";

            // 利用反射获取全局 GameData 实例中对应的公共字段
            var field = typeof(T2).GetField(fieldName, System.Reflection.BindingFlags.Public | System.Reflection.BindingFlags.Instance);
            if (field == null)
            {
                Debug.LogWarning($"GameData 中未找到对应字段:{fieldName}");
                return;
            }

            // 检查该字段是否已经有数据加载,若有数据,则跳过加载
            var existingData = field.GetValue(this.GameData) as System.Collections.IList;
            if (existingData != null && existingData.Count > 0)
            {
                Debug.Log($"{typeName} 数据已加载,跳过加载。");
                return;
            }

            // 反序列化传入的 bytes 数据
            List<T> listObj = null;
            try
            {
                using (var ms = new System.IO.MemoryStream(fileData))
                {
                    listObj = ProtoBuf.Serializer.Deserialize<List<T>>(ms);
                }
            }
            catch (System.Exception ex)
            {
                Debug.LogError($"解析 {typeName} 数据失败:{ex.Message}");
                return;
            }

            // 将解析后的数据存入 GameData 中对应的字段
            field.SetValue(this.GameData, listObj);
            Debug.Log($"成功加载 {typeName} 数据到 GameData.{fieldName}");
        }

三、关键代码解析

  • Excel转二进制数据:使用EPPlus解析Excel文件,序列化数据为二进制格式。
  • 数据反序列化:利用Protobuf库,将二进制数据反序列化为C#对象。
  • 反射自动加载:利用C#反射特性,自动匹配数据字段和数据类型,简化数据加载过程。

四、总结

本文提供了一整套基于Unity引擎的Protobuf(Pb2)数据管理流程,从Excel设计、数据转换、代码生成到数据加载,自动化程度高且扩展性强。通过本文分享的工具与方法,开发者可以高效地实现Unity项目的数据管理。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2321529.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

基于QT(C++)实现绘图程序

绘图程序 1 核心算法 1.1 图元生成 1.1.1 直线 画直线的算法采用了课上讲到的 Bresenhan 算法&#xff0c;采用整数增量运算&#xff0c;精确而有效的光栅设备生成算法。 基本思想是&#xff1a;当直线斜率的绝对值小于 1 时&#xff0c;从左端点开始作为起点&#…

深入剖析ReLU激活函数:特性、优势与梯度消失问题的解决之道,以及Leaky ReLU 和 Parametric ReLU

深入剖析ReLU激活函数&#xff1a;特性、优势与梯度消失问题的解决之道 在深度学习领域&#xff0c;激活函数的选择直接影响神经网络的训练效果和性能。整流线性单元&#xff08;Rectified Linear Unit&#xff0c;简称ReLU&#xff09;因其简单性、高效性以及对梯度消失问题的…

服务注册/服务发现-Eureka

目录 1.引言&#xff1a;如果一个父项目中有多个子项目&#xff0c;但是这些子项目如何如何相互调用彼此的业务呢&#xff1f; 2.什么是注册中心 3.CAP理论 4.EureKa 5.服务注册 6.服务发现 7.负载均衡 1.引言&#xff1a;如果一个父项目中有多个子项目&#xff0c;但是…

计算机网络——数据链路层的功能

目录 物理链路 逻辑链路 封装成帧&#xff08;组帧&#xff09; 帧定界 透明传输 SDU 差错控制 可靠传输 流量控制 介质访问控制 主机需要实现第一层到第五层的功能&#xff0c;而路由器这种节点只需要实现第一层到第三层的这些功能 假设左边用户需要给右边用户发送…

第60天:Web攻防-XSS跨站文件类型功能逻辑SVGPDFSWFPMessageLocalStorage

#知识点 1、Web攻防-XSS跨站-文件类型-html&pdf&swf&svg 2、Web攻防-XSS跨站-功能逻辑-postMessage&localStorage 术语&#xff1a;上传xss->其实就是将有恶意js代码的各类文件&#xff08;swf,pdf,svg,html.xml等&#xff09;上传->访问该文件->让浏…

C/C++都有哪些开源的Web框架?

CppCMS CppCMS是一个采用C语言开发的高性能Web框架&#xff0c;通过模版元编程方式实现了在编译期检查RESTful路由系统&#xff0c;支持传统的MVC模式和多种语言混合开发模式。 CppCMS最厉害的功能是WebSocket&#xff0c;10万连接在内存中长期保存占用的大小不超过600MB&…

RISC-V AIA学习2---IMSIC

我在学习文档这章时&#xff0c;对技术术语不太理解&#xff0c;所以用比较恰当的比喻来让自己更好的理解。 比较通俗的理解&#xff1a; 将 RISC-V 系统比作一个工厂&#xff1a; hart → 工厂的一条独立生产线IMSIC → 每条生产线配备的「订单接收员」MSI 中断 → 客户通过…

2024年MathorCup数学建模B题甲骨文智能识别中原始拓片单字自动分割与识别研究解题全过程文档加程序

2024年第十四届MathorCup高校数学建模挑战赛 B题 甲骨文智能识别中原始拓片单字自动分割与识别研究 原题再现&#xff1a; 甲骨文是我国目前已知的最早成熟的文字系统&#xff0c;它是一种刻在龟甲或兽骨上的古老文字。甲骨文具有极其重要的研究价值&#xff0c;不仅对中国文…

Python----计算机视觉处理(Opencv:霍夫变换)

一、霍夫变换 霍夫变换是图像处理中的一种技术&#xff0c;主要用于检测图像中的直线、圆或其他形状。其基本思想就是将图像空间中的点映射到参数空间中&#xff0c;通过在参数空间中寻找累计最大值来实现对特定形状的检测。 二、 霍夫直线变换 那么对于一个二值化后的图形来说…

多语言生成语言模型的少样本学习

摘要 大规模生成语言模型&#xff0c;如GPT-3&#xff0c;是极具竞争力的少样本学习模型。尽管这些模型能够共同表示多种语言&#xff0c;但其训练数据以英语为主&#xff0c;这可能限制了它们的跨语言泛化能力。在本研究中&#xff0c;我们在一个涵盖多种语言的语料库上训练了…

QT开发(4)--各种方式实现HelloWorld

目录 1. 编辑框实现 2. 按钮实现 前面已经写过通过标签实现的了&#xff0c;所以这里就不写了&#xff0c;通过这两个例子&#xff0c;其他的也是同理 1. 编辑框实现 编辑框分为单行编辑框&#xff08;QLineEdit&#xff09;双行编辑框&#xff08;QTextEdit&#xff09;&am…

Flutter 输入组件 Radio 详解

1. 引言 在 Flutter 中&#xff0c;Radio 是用于单选的按钮组件&#xff0c;适用于需要用户在多个选项中选择一个的场景&#xff0c;如表单、设置选项等。Radio 通过 value 和 groupValue 进行状态管理&#xff0c;并结合 onChanged 监听选中状态的变化。本文将介绍 Radio 的基…

3.23学习总结

完成了组合Ⅲ&#xff0c;和电话号码的字母组合两道算法题&#xff0c;都是和回溯有关的&#xff0c;很类似。 学习了static的关键字和继承有关知识

力扣刷题-热题100题-第23题(c++、python)

206. 反转链表 - 力扣&#xff08;LeetCode&#xff09;https://leetcode.cn/problems/reverse-linked-list/solutions/551596/fan-zhuan-lian-biao-by-leetcode-solution-d1k2/?envTypestudy-plan-v2&envIdtop-100-liked 常规法 记录前一个指针&#xff0c;当前指针&am…

vue3 项目的最新eslint9 + prettier 配置

注意&#xff1a;eslint目前升级到9版本了 在 ESLint v9 中&#xff0c;配置文件已经从 .eslintrc 迁移到了 eslint.config.js 配置的方式和之前的方式不太一样了&#xff01;&#xff01;&#xff01;&#xff01; 详见自己的语雀文档&#xff1a;5、新版eslint9prettier 配…

SAP GUI Script for C# SAP脚本开发快速指南与默认主题问题

SAP GUI Script for C# 快速指南 SAP 脚本的快速使用与设置. 解决使用SAP脚本执行后,默认打开的SAP是经典主题的问题 1. 解决默认主题问题 如果您使用的是SAP GUI 740&#xff0c;并遇到无法打开对话框的问题&#xff0c;请先将主题设置为经典主题&#xff08;Classic Theme…

FFmpeg + ‌Qt‌ 简单视频播放器代码

一个基于 ‌FFmpeg 4.x‌ 和 ‌Qt‌ 的简单视频播放器代码示例&#xff0c;实现视频解码和渲染到 Qt 窗口的功能。 1&#xff09;ffmpeg库界面&#xff0c;视频解码支持软解和硬解方式。 2&#xff09;QImage/QPixmap显示视频图片。 ‌1. Qt 项目配置&#xff08;.pro 文件&…

Unity跨平台构建快速回顾

知识点来源&#xff1a;人间自有韬哥在&#xff0c;豆包 目录 一、发布应用程序1. 修改发布必备设置1.1 打开设置面板1.2 修改公司名、游戏项目名、版本号和默认图标1.3 修改 Package Name 和 Minimum API Level 2. 发布应用程序2.1 配置 Build Settings2.2 选择发布选项2.3 构…

【嵌入式学习2】内存管理

## C语言编译过程 预处理&#xff1a;宏定义展开、头文件展开、条件编译&#xff0c;这里并不会检查语法&#xff0c;将#include #define这些头文件内容插入到源码中 gcc -E main.c -o main.i 编译&#xff1a;检查语法&#xff0c;将预处理后文件编译生成汇编文件&#xff…

TDengine又新增一可视化工具 Perspective

概述 Perspective 是一款开源且强大的数据可视化库&#xff0c;由 Prospective.co 开发&#xff0c;运用 WebAssembly 和 Web Workers 技术&#xff0c;在 Web 应用中实现交互式实时数据分析&#xff0c;能在浏览器端提供高性能可视化能力。借助它&#xff0c;开发者可构建实时…