性能、安全和稳定，袋鼠云数据服务平台 DataAPI 为企业 API 保驾护航

news2024/11/22 11:38:38

通过 API 对外提供数据服务是大部分企业中比较常见的数据应用方式，对于 API 平台管理者、开发者和调用者来说，API 的调用性能、安全性和稳定性是在平台选型时最需要考虑的三个因素。

袋鼠云API开发及管理平台【数栈-数据服务 DataAPI】通过多种手段标准化管控服务，可完成从 API 创建、发布、申请/审批、调用的全生命周期管控，至今已经服务于300+客户。本文将为大家分享 DataAPI 是如何实现这三方面保障的。

DataAPI 的调用性能

在数据库和网络状况良好的情况下，DataAPI 目前的 API 调用性能在 5k QPS 时单次调用耗时最小可在 30-80ms 内。近期平台不仅从多个后端调用链路环节做了优化，也在产品层支持了一系列的功能，通过性能可观测、可配置等方式进行了全面的性能提升。

调用结果缓存

API 支持开启数据缓存，可选择用 HBase/Redis 存储缓存结果，在缓存失效策略上，DataAPI 采用 LFU（最不经常使用页置换算法），根据数据更新频率可自定义缓存清理周期与时间。

file

针对源数据更新频率不高，且存在多次相同输入参数重复查询的情况，开启缓存可缩短调用链路，显著降低调用耗时。

服务编排

复杂查询逻辑的实现可用带 Java/Python 函数的服务编排代替 SQL 来完成，以提升查询效率。

file

入参格式校验

对于一些有明显格式规则的输入参数，例如手机号、身份证号等，入参内容如果不满足相应格式要求则会导致一定无法正确返回结果。

因此我们可以为高并发 API 的这些参数配置正则校验规则，在数据库执行查询语句前由 Gateway 先进行内容校验，若不满足格式要求则直接返回查询失败，减少无效查询。

file

调用链路耗时分析

创建 API 的测试调用环节，可通过调用分析查看 API 调用过程所经过的环节、执行内容，以及每条执行内容的耗时瀑布图，用户可直观地看到性能损耗的关键点，以便快速调整。

例如 Server 端的数据解密、行级权限等校验耗时整体明显增加时，可能是 Server 资源到了瓶颈，可进一步排查 Server 端的负载；数据源查询耗时增加则可能是当前数据源查询并发变高。

file

DataAPI 的安全性

安全层面，DataAPI 从开发及调用两个层面进行了全方位的保障。

开发安全

● 服务分组

重要 API 在发生逻辑变更时，可以通过服务分组来测试新逻辑的可靠性，通过类似 AB测试的方式将可控比例范围内的流量导向新逻辑，出现问题时立即调整分流比例切换回原逻辑，能够在用户无感知的情况下最大程度降低对业务侧的影响。

file

● 角色权限管理

平台内置多个固定角色，区分了 API 查看、开发、申请调用权限、管理等功能的场景，能满足90%的用户需求。另外管理员可根据企业内部权限管控要求调整固定角色权限点或者新增自定义角色，灵活把控用户权限配置。

file

● 测试/生产项目隔离

对于 API 开发投产安全性要求一般的场景，流程一般是 API 创建-提交网关测试-发布，发布后可直接生产调用。如果企业内部对开发和生产环境进行了严格隔离，也可在开发环境完成开发测试后，通过绑定项目一键发布或导出导入式发布复制到生产环境。这种方式进一步规范了生产 API 的变更流程，减少了误操作发生率。

file

调用安全

● 调用申请审批

DataAPI 租户层的 API 市场汇集了各个项目发布的 API，实现 API 一定范围内的共享时也对 API 调用做了权限管控，用户在申请 API 调用权限时可控制其调用次数、周期及字段粒度的输出参数访问。对于某用户已经获得审批通过的 API，管理员也可在到期前进行权限回收。权限申请与审批操作方便、管理粒度细、灵活度高。

file