doris

饭桶也得吃饭

部署Apache Doris官方文档：https://doris.apache.org/zh-CN/installing/compilation.html

SelectDB技术团队

科大讯飞：成本降低 60%，性能提升 10 倍，从 ES Loki 到 Apache Doris 可观测性存储底座升级导读：科大讯飞星际日志中心经历了从 Elasticsearch 到 Loki，再到 Apache Doris 的可观测性存储分析底座升级，支持可观测三大支柱 Log Trace Metrics 的存储与分析，有效解决 Elasticsearch 成本高、Loki 查询慢的问题。Doris 能够在降低成本的同时提高查询效率，实现了查询性能提升 10 倍、存储空间缩减至 Elasticsearch 1/6。此外，Doris 提供的半结构化数据类型 VARIANT 能高效存储可扩展的 JSON 数据，具备很高的

SelectDB技术团队

Apache Doris 3.0 里程碑版本｜存算分离架构升级、湖仓一体再进化亲爱的社区小伙伴们，我们很高兴地向大家宣布，在近期我们迎来了 Apache Doris 3.0 版本的正式发布，欢迎大家下载使用体验！

SelectDB技术团队

Apache Doris 2.0.15 版本发布亲爱的社区小伙伴们，Apache Doris 2.0.15 版本已于 2024 年 9 月 30 日正式与大家见面，该版本提交了 157 个改进项以及问题修复，进一步提升了系统的性能及稳定性，欢迎大家下载体验。

墨家巨子@俏如来

五.海量数据实时分析-FlinkCDC+DorisConnector实现数据的全量增量同步前面四篇文字都在学习Doris的理论知识，也是比较枯燥，当然Doris的理论知识还很多，我们后面慢慢学，本篇文章我们尝试使用SpringBoot来整合Doris完成基本的CRUD。

SelectDB技术团队

快手：从 Clickhouse 到 Apache Doris，实现湖仓分离向湖仓一体架构升级导读：快手 OLAP 系统为内外多个场景提供数据服务，每天承载近 10 亿的查询请求。原有湖仓分离架构，由离线数据湖和实时数仓组成，面临存储冗余、资源抢占、治理复杂、查询调优难等问题。通过引入 Apache Doris 湖仓一体能力，替换了 Clickhouse ，升级为湖仓一体架构，并结合 Doris 的物化视图改写能力和自动物化服务，实现高性能的数据查询以及灵活的数据治理。

Doris使用手册以及与Mysql差异整理目录数据类型Doris数据类型数值类型日期类型字符串类型半结构类型聚合类型IP 类型MySQL 到 Doris 类型映射

Apache Doris 实践官方使用指南：https://doris.incubator.apache.org/zh-CN/docs/install/source-install/compilation-with-docker/

SelectDB技术团队

Apache Doris 2.1.6 版本正式发布亲爱的社区小伙伴们，Apache Doris 2.1.6 版本已于 2024 年 9 月 10 日正式发布。2.1.6 版本在 Lakehouse、异步物化视图、半结构化数据管理持续升级改进，同时在查询优化器、执行引擎、存储管理、数据导入与导出以及权限管理等方面完成了若干修复。欢迎大家下载使用。

SelectDB技术团队

Apache Doris Flink Connector 24.0.0 版本正式发布亲爱的社区伙伴们，Apache Doris Flink Connector 24.0.0 版本已于 2024 年 9 月 5 日正式发布。该版本新增了对 Flink 1.20 的支持，并支持通过 Arrow Flight SQL 高速读取 Doris 中数据。此外，整库同步所依赖的 FlinkCDC，也需升级至 3.1.x 版本，以便更好的应用。

墨家巨子@俏如来

三.海量数据实时分析-FlinkCDC实现Mysql数据同步到Doris参考：https://nightlies.apache.org/flink/flink-cdc-docs-release-3.0/zh/docs/get-started/quickstart/mysql-to-doris/

SelectDB技术团队

兼容Trino Connector，扩展Apache Doris数据源接入能力｜Lakehouse 使用手册（四）Apache Doris 内置支持包括 Hive、Iceberg、Hudi、Paimon、LakeSoul、JDBC 在内的多种 Catalog，并为其提供原生高性能且稳定的访问能力，以满足与数据湖的集成需求。而随着 Apache Doris 用户的增加，新的数据源连接需求也随之增加。因此，从 3.0 版本开始，Apache Doris 引入了 Trino Connector 兼容框架。

Apache Arrow简介(1) 数据访问：Apache Arrow的列式内存格式设计优化了数据的随机访问，让每次数据访问的复杂度达到了O(1)，即无论数据的规模大小，数据的访问时间都保持常数。这种设计能够更好地利用现代硬件的特性，如CPU的缓存局部性、流水线和SIMD指令集，从而进一步提升数据处理的效率。同时列式存储可以高效地执行数据密集型的计算操作，如过滤、排序和聚合等。

墨家巨子@俏如来

一.海量数据实时分析-Doris入门和安装停了一个月又开始写文章啦，因为公司数据量达到了几十亿，老板需要做实时数据分析，报表看板。这么大的数据量比较好的选择是使用Doris来做，他可以脱离hadoop生态独立使用所以大受企业喜爱，也因为如此就有了这个系列的文章，喜欢的话好评点赞。

【Apache Doris】数据均衡问题排查指南原文阅读：【巨人肩膀社区·博客·分享】【Apache Doris】数据均衡问题排查指南一、前提概要当集群处于以下几种情况时，可参考本文进行问题排查。

DORIS - 执行 git submodule update --init --recursive 的目的是什么？某个项目/模块可能会依赖于其他模块或第三方库，项目本身的代码是一个独立的完整的代码仓库，并且不应该把依赖的模块或第三方库的代码直接放到该项目代码库中，但是本地编译的时候又会用到这些依赖的第三方库。当我们在本地编译的时候，希望在本地能够实现自动的将依赖的模块或第三方库，拉取到该项目指定目录中。所以，我们可以使用：git submodule 指令。

【Apache Doris】周FAQ集锦：第 19 期欢迎查阅本周的 Apache Doris 社区 FAQ 栏目！在这个栏目中，每周将筛选社区反馈的热门问题和话题，重点回答并进行深入探讨。旨在为广大用户和开发者分享有关 Apache Doris 的常见问题。通过这个每周 FAQ 栏目，希望帮助社区小伙伴更好地了解和应用 Apache Doris，促进经验交流和技术共享。

全面介绍 Apache Doris 数据灾备恢复机制及使用示例Apache Doris 作为一款 OLAP 实时数据仓库，在越来越多的中大型企业中逐步占据着主数仓这样的重要位置，主数仓不同于 OLAP 查询引擎的场景定位，对于数据的灾备恢复机制有比较高的要求，本篇就让我们全面的介绍和示范如何利用这些特性能力构建集群数据的灾备恢复机制。

SelectDB技术团队

Apache Doris + Iceberg 快速搭建指南｜Lakehouse 使用手册（三）湖仓一体（Data Lakehouse）融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势，能够更加便捷地满足各种数据处理分析的需求。Apache Doris 持续加深与数据湖的融合，已演进出一套成熟的湖仓一体解决方案。我们将通过一系列文章介绍 Apache Doris 与各类主流数据湖格式及存储系统的湖仓一体架构搭建指南，包括 Hudi、Paimon、Iceberg、OSS、Delta Lake、Kudu、BigQuery 等。

【Apache Doris】周FAQ集锦：第 18 期欢迎查阅本周的 Apache Doris 社区 FAQ 栏目！在这个栏目中，每周将筛选社区反馈的热门问题和话题，重点回答并进行深入探讨。旨在为广大用户和开发者分享有关 Apache Doris 的常见问题。通过这个每周 FAQ 栏目，希望帮助社区小伙伴更好地了解和应用 Apache Doris，促进经验交流和技术共享。