技术栈
odps
Luckyforever%-
5 天前
大数据
·
sql
·
阿里云
·
哈希算法
·
maxcompute
·
odps
SQL高级技巧之埋点解析
大数据时代,数据来源主要是业务系统以及用户行为日志,其中 ,用户行为日志的形式主要是埋点,埋点的形式通常是Json格式的字符串,属于半结构化数据,如何将其规范化并入仓?后续如何方便使用?这就需要数仓工作者深思熟虑。
SUGERBOOM
1 个月前
大数据
·
数据库
·
sql
·
云原生
·
spark
·
odps
MaxCompute—阿里云原生大数据计算机服务——SQL概述与服务支持
MaxCompute(原名ODPS,Oriented Data Processing Service)是阿里云提供的一款云原生大数据计算服务。它是一种基于SQL的全托管式大数据处理平台,允许用户在云端快速、简便地处理和分析海量数据。
Anna_Tong
2 个月前
大数据
·
阿里云
·
云原生
·
maxcompute
·
odps
云原生大数据计算服务 MaxCompute 是什么?
MaxCompute 是一种面向海量数据的云原生计算平台,专注于解决大规模数据存储、查询和分析问题。它以分布式架构为基础,支持多种计算模型,包括 SQL、机器学习、MapReduce 等,能够帮助用户在短时间内处理从 TB 级到 PB 级甚至 EB 级的数据。同时,MaxCompute 提供高效的资源调度和管理能力,支持企业灵活应对复杂的数据场景。
华山令狐虫
3 个月前
odps
·
dbapi
DBAPI连接阿里云 maxcompute 报错
访问以下链接寻找驱动包 https://github.com/aliyun/aliyun-odps-jdbc/releases/tag/v3.4.3
福气少侠
6 个月前
大数据
·
数据仓库
·
python
·
云计算
·
maxcompute
·
odps
阿里MAXCOMPUTE数据专辑信息读取并同步数据表
在阿里云大数据体系中,我们可以使用数据地图的数据专辑,对数据的类别等进行一个管理那么管理后的数据,我们想要落表进行相关的数据分析,如何做呢?
张彦峰ZYF
6 个月前
数据结构
·
b树
·
sql
·
mysql
·
odps
深入InnoDB核心:揭秘B+树在数据库索引中的高效应用
目录一、索引页与数据行的紧密关联(一)数据页的双向链表结构(二)记录行的单向链表结构二、未创建索引情况
Huathy-雨落江南,浮生若梦
1 年前
java
·
sql
·
odps
Odps执行SQL报错,提示Please set odps.sql.type.system.odps2=true to use it.
在执行task前,将上面的配置信息增加进hints中
涤生大数据
1 年前
大数据
·
flink
·
odps
涤生大数据实战:基于Flink+ODPS历史累计计算项目分析与优化(上)
涤生大数据实战:基于Flink+ODPS历史累计计算项目分析与优化(一)ODPS(Open Data Platform and Service)是阿里云自研的一体化大数据计算平台和数据仓库产品,在集团内部离线作为离线数据处理和存储的产品。离线计算任务节点叫做Odps节点,存储的离线表叫做Odps表;
有时有味
1 年前
大数据
·
maxcompute
·
odps
·
1024程序员节
ODPS #MaxCompute数据开发中几个常见的异常及解决方案
FAILED: ODPS-0130071:[0,0] Semantic analysis exception - physical plan generation failed: java.lang.RuntimeException: Table(x_mei,t_order_info) is full scan with all partitions, please specify partition predicates.
Xin学数据
1 年前
大数据
·
阿里云
·
odps
阿里云大数据实战记录9:MaxCompute RAM 用户与授权
先抛一个问题:作为 maxcompute 的管理员,拥有较高的权限,为什么访问不了设置了敏感列的数据? 这个问题是我最近遇到的一个难题之一。