博客

共 85 篇
技术分享
Apache Doris + Iceberg 快速搭建指南|Lakehouse 使用手册(三)
Apache Doris 持续加深与数据湖的融合,已演进出一套成熟的湖仓一体解决方案。我们将通过一系列文章介绍 Apache Doris 与各类主流数据湖格式及存储系统的湖仓一体架构搭建指南,包括 Hudi、Paimon、Iceberg、OSS、Delta Lake、Kudu、BigQuery 等。
SelectDB 技术团队 · 2024/08/02
技术分享
Apache Doris + Paimon 快速搭建指南|Lakehouse 使用手册(二)
为便于用户快速入门,我们将通过系列文章介绍 Apache Doris 与各类主流数据湖格式及存储系统的湖仓一体架构搭建指南,包括 Hudi、Iceberg、Paimon、OSS、Delta Lake、Kudu、BigQuery 等。本文我们将再续前言,为大家介绍 Lakehouse 使用手册(二)之 Apache Doris + Apache Paimon 搭建指南。
SelectDB 技术团队 · 2024/07/24
技术分享
Apache Doris + Hudi 快速搭建指南|Lakehouse 使用手册(一)
在过去多个版本中,Apache Doris 持续加深与数据湖的融合,已演进出一套成熟的湖仓一体解决方案。为便于用户快速入门,我们将通过系列文章介绍 Apache Doris 与各类主流数据湖格式及存储系统的湖仓一体架构搭建指南,包括 Hudi、Iceberg、Paimon、OSS、Delta Lake、Kudu、BigQuery 等,欢迎持续关注。
SelectDB 技术团队 · 2024/07/10
技术分享
Apache Doris 全新分区策略 Auto Partition 应用场景与功能详解
为了处理庞大的数据集,分布式数据库引入了类似分区和分桶策略以加强了数据管理的灵活性。在 Apache Doris 2.1 版本引入了 自动分区(Auto Partition)来拓展分区功能,相比于动态分区,保证流程自动化的前提下极大提升了分区使用的自由度。
飞轮科技 数据库研发专家 赵长乐 · 2024/06/13
技术分享
从 Volcano 火山模型到 Pipeline 执行模型,Apache Doris 执行模型的迭代
Apache Doris 的全新 PipelineX 执行模型改造完成后,在高负载情况下集群假死以及资源抢占的问题得以彻底解决、CPU 利用率得到大幅提升。其并发执行模式与调度模式的优化使得 Apache Doris 执行引擎取得了显著的收益和进步,在真实生产环境中帮助用户进一步提升执行效率!
SelectDB 技术团队 · 2024/05/16
技术分享
Apache Doris 基于 Workload Group 的负载隔离能力解读
Apache Doris 自 2.0 版本起推出基于 Workload Group 的管理方案,实现了 CPU 资源的软限,为用户提供较高的资源利用率。在新发布的 2.1 版本基于 Linux 内核提供的 CGroup 技术,进一步地实现了对 CPU 资源的硬限,为用户提供更好的查询稳定性。
SelectDB 技术团队 · 2024/04/24
技术分享
手把手教你实现 OceanBase 数据到 Apache Doris 的便捷迁移|实用指南
在 Apache Doris 社区,有众多用户选择基于 OceanBase 与 Apache Doris 以构建强大的数据处理与分析链路,本文将详细介绍如何便捷高效将数据从 OceanBase 迁移/同步至 Apache Doris 。
SelectDB 技术团队 · 2024/04/19
技术分享
更高效准确的数据库内部任务调度实践,Apache Doris 内置 Job Scheduler 的实现与应用
Apache Doris 在 2.1 版本中引入了 Job Scheduler 功能,实现了自主任务调度能力,调度的精准度可达到秒级。该功能的推出不仅保障了数据导入的完整性和一致性,更让用户能够灵活、便捷调整调度策略。
SelectDB 技术团队 · 2024/04/08
技术分享
Apache Doris 支持 Arrow Flight SQL 协议,数据传输效率实现百倍飞跃
在 Apache Doris 2.1 版本中,我们基于 Arrow Flight SQL 构建了高速数据传输链路,它支持主流语言通过 SQL 从 Doris 高速读取大规模数据,极大提升了其他系统与 Apache Doris 间数据传输效率。
SelectDB 技术团队 · 2024/03/26
技术分享
Apache Doris 兼容 Presto、Trino、ClickHouse、Hive 等近十种 SQL 方言,助力业务平滑迁移
Doris Convertor 是一款专用 Doris SQL 转化器,让多种 SQL 方言无缝切换至 Doris,实现业务平滑迁移
SelectDB 技术团队 · 2024/03/21