【Apache Doris】周FAQ集锦:第 3 期

【Apache Doris】周FAQ集锦:第 3 期

欢迎查阅本周的 Apache Doris 社区 FAQ 栏目!

在这个栏目中,每周将筛选社区反馈的热门问题和话题,重点回答并进行深入探讨。旨在为广大用户和开发者分享有关 Apache Doris 的常见问题。

通过这个每周 FAQ 栏目,希望帮助社区小伙伴更好地了解和应用 Apache Doris,促进经验交流和技术共享。

SQL问题

❓Q1 查询报错:failed to send brpc batch, error=RPC call is timed out, error_text=[E1008]Reached timeout=300000ms

💡A1 如下:

  1. 网络原因,需要心跳保活解决
  2. 确认query_timeout是否为300s,是则调整query_timeout,另外可以考虑动态调整fe的max_query_retry_time
  3. 版本缺陷,可升级至最新的三位数稳定版本

❓Q2 doris的where in的内容有数量上的限制?

💡A2 默认10000,由FE 配置:expr_children_limit 参数限制 expr 树的 expr 子节点的数量,超过此限制可能会导致在持有数据库读锁时分析时间过长。

FE参数说明可以查阅FE配置项:
https://doris.apache.org/zh-CN/docs/admin-manual/config/fe-config

❓Q3 doris的分区字段只能是时间类型?

💡A3 不是,动态分区支持时间类型,List分区支持各种类型;在此基础上2.1后新出了自动分区新特性,欢迎测验。

Release 2.1,可以查阅:
https://doris.apache.org/zh-CN/docs/dev/releasenotes/release-2.1.0

数据操作问题

❓Q1 进行insert操作的超时参数是受限于query_timeout还是insert_timeout?

💡A1 2.0版本之前和查询一样都受限于query_timeout会话参数,2.0后insert受限于insert_timeout。

运维常见问题

❓Q1 为什么show frandends需要几十秒?

💡A1 正常是毫秒级响应;可能是DNS解析慢导致,一般配置下/etc/hosts重试即可。

❓Q2 日志告警:Exception happend in one session... Error happend when receiving packet

💡A2 一般是偶发,重试即可;可以基于这几种场景定位:

  1. 网络环境异常导致
  2. 上游客户端断开连接导致
  3. 上游发起的客户端自身异常关闭了连接导致
  4. cpu\mem\io等资源是否负载过高
  5. 防火墙导致:例如fe的9020端口未开白导致内部通信超时timeout
  6. 版本缺陷,可升级至最新的三位数稳定版本

❓Q3 fe出现 DiskLimitException 异常

💡A3 一般是磁盘空间不足 5G导致;df 查看 fe meta 的磁盘可用空间,确保足够的磁盘空间重启即可。

❓Q4 如果忘记了密码无法登陆 doris,怎么处理?

💡A4 可以在 FE 的 config 文件中添加 skip_localhost_auth_check 参数,并且重启FE,从而无密码在本机通过localhost登陆 doris。

具体可查阅doris权限管理:
https://doris.apache.org/zh-CN/docs/dev/admin-manual/privilege-ldap/user-privilege/

❓Q5 2.1版本fe webui报错:Unknown database

💡A5 已修复、预计下个小版合并发布,FIX PR:

https://github.com/apache/doris/pull/32157;

另外,可以考虑用可视化运维管理平台Doris Manager 和 WebUI平替。

具体可以查阅Doris论坛帖子:
https://ask.selectdb.com/questions/D1o9/she-qu-wen-ti-2-1-fe-web-ui-unknown-database-yi-chang

其它问题

❓Q Doris 2.1 版本中有哪些新特性?

💡A 如下:

  1. 复杂查询性能提升 100%,ARM 架构深度适配、性能提升 230%
  2. 新增异步物化视图,支持多表关联异步物化,实现自动查询加速
  3. 新增多 SQL 方言转换功能,如 Clickhouse、Trino、Presto、Hive 等原系统的 SQL 可无缝迁移至 Doris
  4. 新增 Arrow Flight 高速读取接口,提升数据传输效率
  5. 新增全新的 Variant 和 IP 数据类型,灵活应对半结构化数据
  6. 新增自增列、自动分区、MemTable 前移以及服务端攒批的能力,提高大规模数据实时写入效率
  7. 进一步完善 Workload Group 资源组隔离能力,提升多负载场景下的稳定性...
    Release 2.1,可以查阅:
    https://doris.apache.org/zh-CN/docs/dev/releasenotes/release-2.1.0

关于社区

Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库,以极速易用的特点被人们所熟知,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。

如果您对 Apache Doris 感兴趣,可以通过以下入口访问官方网站、社区论坛、GitHub和dev邮件组:

💡官方文档

💡社区论坛

💡GitHub

💡dev邮件组:dev@doris.apache.org

非常欢迎您在社区论坛中与其他用户分享您的使用经验和技巧,或者向dev邮件组提交反馈和意见。

相信,您的参与将帮助Apache Doris变得更加完善。

相关推荐
智能相对论3 小时前
CES深度观察丨智能清洁的四大关键词:变形、出户、体验以及生态协同
大数据·人工智能
焦耳热科技前沿4 小时前
北京科技大学/理化所ACS Nano:混合价态Cu₂Sb金属间化合物实现高效尿素电合成
大数据·人工智能·自动化·能源·材料工程
min1811234565 小时前
深度伪造内容的检测与溯源技术
大数据·网络·人工智能
武子康5 小时前
大数据-209 深度理解逻辑回归(Logistic Regression)与梯度下降优化算法
大数据·后端·机器学习
数据智研5 小时前
【数据分享】(2005–2016年)基于水资源承载力的华北地区降水与地下水要素数据
大数据·人工智能·信息可视化·数据分析
TDengine (老段)7 小时前
TDengine Python 连接器入门指南
大数据·数据库·python·物联网·时序数据库·tdengine·涛思数据
亚古数据7 小时前
亚古数据:查询斯里兰卡公司可以获取什么文件和信息?
大数据·亚古数据·斯里兰卡公司查询
WLJT1231231237 小时前
守护自然与滋养民生的绿色之路
大数据·安全
min1811234568 小时前
PC端零基础跨职能流程图制作教程
大数据·人工智能·信息可视化·架构·流程图
静听松涛1338 小时前
中文PC端多人协作泳道图制作平台
大数据·论文阅读·人工智能·搜索引擎·架构·流程图·软件工程