Databend 开源周报第 120 期

news2024/9/22 23:27:47

Databend 是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.cn 。

What's On In Databend

探索 Databend 本周新进展，遇到更贴近你心意的 Databend 。

使用自定义 CONNECTION 管理存储访问

Databend 现已提供对 CONNECTION 的初步支持，以保存由外部存储服务生成的身份凭据和访问管理实体，提供方便且一致的访问控制体验。

下面的示例展示了如何使用 CONNECTION 保存 S3 对象存储的访问凭据，并且用于 Stage 创建。

CREATE CONNECTION my_conn storage_type = 's3' access_key_id ='minioadmin' secret_access_key ='minioadmin' endpoint_url='${STORAGE_S3_ENDPOINT_URL}';
CREATE STAGE my_stage url= 's3://testbucket/admin/tempdata/' connection = (connection_name='my_conn');

如果您想了解更多信息，欢迎联系 Databend 团队，或查看下面列出的资源。

PR #13709 | feat: use self-defined connection.
PR #13714 | feat: mask connection values in CreateConnection and AttachTable.

Code Corner

一起来探索 Databend 和周边生态中的代码片段或项目。

opensrv v0.5.0 发布

本周 opensrv 发布 v0.5.0 ，主要是对上游依赖的更新，以解决安全审计问题。本版本也根据 clippy 提示对代码质量进行了进一步改善。

如果你计划为数据库项目提供 MySQL 或者 ClickHouse 服务端协议支持，可以尝试体验 opensrv 。

opensrv v0.5.0

Highlights

以下是一些值得注意的事件，也许您可以找到感兴趣的内容。

新增 @> 和 <@ JSON 运算符。
使用 Async Transform Pipeline 计算 UDF 调用。
支持 Lateral JOIN 。
RBAC 支持 secondary role 。
databend.rs 现在在单独 repo 中进行维护，欢迎关注 GitHub - datafuselabs/databend-docs: Databend Documentation: https://databend.rs/

What's Up Next

我们始终对前沿技术和创新理念持开放态度，欢迎您加入社区，为 Databend 注入活力。

为 VACCUUM TABLE 模拟运行支持总结

VACUUM TABLE 命令通过从表中永久删除历史数据文件来释放存储空间，有助于优化系统性能。

Databend 为 VACUUM TABLE 提供了 dry run 选项，可以在实际执行命令之前预览即将删除的文件。

现在我们计划为 dry run 选项增加总结能力，帮助用户预先了解即将释放的数据大小。

Issue #13674 | feat: vacuum table dry run summary

如果你对这个主题感兴趣，可以尝试解决其中的部分问题或者参与讨论和 PR review 。或者，你可以点击 Feature: Support to add random seed on random engine · Issue #11863 · datafuselabs/databend · GitHub 来挑选一个随机问题，祝好运！