Databend 开源周报第 136 期
Databend Labs3月 18, 2024
英文版移步:https://www.databend.com/blog/2024-03-18-databend-weekly
Databend 是一款现代云数仓。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.cn 。
What's On In Databend
探索 Databend 本周新进展,遇到更贴近你心意的 Databend。
理解 Databend 中的任务与通知
Databend 现已支持完备的任务与通知机制。
任务会根据计划或基于 DAG 的任务图执行指定的 SQL 语句。利用通知集成,可以向外部消息服务发送通知。
CREATE TASK IF NOT EXISTS mytask
WAREHOUSE = 'mywh'
SCHEDULE = 30 SECOND
ERROR_INTEGRATION = 'myerror'
AS
BEGIN
BEGIN;
INSERT INTO mytable(ts) VALUES(CURRENT_TIMESTAMP);
DELETE FROM mytable WHERE ts < DATEADD(MINUTE, -5, CURRENT_TIMESTAMP());
COMMIT;
END;
上面的例子定义了一个名为
mytask
mywh
myerror
任务与通知相关机制在 Databend Cloud 开箱即用,如 果您想了解更多信息,欢迎联系 Databend 团队,或查看下面列出的资源。
Code Corner
一起来探索 Databend 和周边生态中的代码片段或项目。
Databend vs. Snowflake:数据摄入基准测试
近期,Databend 与 Snowflake 进行了数据摄入基准测试,涵盖性能和成本等方面,主要包含以下四项基本测试:
- TPC-H SF100 数据集加载,面向大规模数据,约 6 亿行。
- ClickBench Hits 数据集加载,面向大宽表数据,约 1 亿行。
- 1 秒新鲜度:在 1 秒的新鲜度限制下,比较平台的数据摄取能力。
- 5 秒新鲜度:在 5 秒的新鲜度限制下,比较平台的数据摄取能力。
数据集加载对比
数据新鲜度对比
欢迎感兴趣的小伙伴阅读下面的文档,了解 Databend Cloud 的低成本、高性能数据摄入。
Highlights
以下是一些值得注意的事件,也许您可以找到感兴趣的内容。
- CROSS JOIN 支持外溢。
- 聚合哈希表支持外溢。
- 支持刷新倒排索引。
- 为时间日期相关函数添加更多函数别名,以支持更多数据分析工具。
What's Up Next
我们始终对前沿技术和创新理念持开放态度,欢迎您加入社区,为 Databend 注入活力。
支持 TOP K 语法
Databend 计划支持
SELECT TOP
下面的
SELECT TOP
select TOP 4 c1 from testable ORDER BY c1;
等效于下面的
SELECT ... LIMIT
select c1 from testable order by c1 limit 4;
这是一个 good first issue(新手友好问题),旨在引导对 Rust 和 Databend 感兴趣的同学参与。
Issue #14972 | Feature: top k syntax support
如果你对这个主题感兴趣,可以尝试解决其中的部分问题或者参与讨论和 PR review。或者,你可以点击 https://link.databend.com/i-m-feeling-lucky 来挑选一个随机问题,祝好运!
New Contributors
一起认识社区中的新伙伴,Databend 因你们而变得更加美好。
- @suimenno3002 实现了对直方图聚合函数的支持,#14839 。
Changelog
前往查看 Databend 每日构建的变更日志,以了解开发的最新动态。
地址:https://github.com/databendlabs/databend/releases
订阅我们的新闻简报
及时了解功能发布、产品规划、支持服务和云服务的最新信息!