基本概念（V4）
标签 标签分为以下几类：导入的标签：用户标签表 记录用户的一系列维度特征。导入Quick Audience时，通过为字段配置标签别名的方式给用户打标签，后续使用标签时，实质上是在使用对应的字段。自定义标签：基于已导入的各类数据，自行定义...
自定义Join（UDJ）
对于右表的每个记录，找到最近的左表记录*合并两条记录。Resolve("->string,bigint,string")public class PayUserLogMergeJoin extends UDJ { private Record outputRecord;将在数据处理阶段之前调用。用户可以实施这个方法做初始化工作。...
设置逻辑表质量规则
表行数 存储大小 主键唯一 多表记录波动率 数据唯一率 数据完整率 高级选项 说明 目前仅MaxCompute、Hive、AnalyticDB PostgreSQL资源类型的部分规则显示高级选项。仅用OpenAPI向上层应用提供更精细化的结果数据，不影响数据开发质量节点及...
设置逻辑表质量规则
表行数 存储大小 主键唯一 多表记录波动率 数据唯一率 数据完整率 高级选项 说明 目前仅MaxCompute、Hive、AnalyticDB PostgreSQL资源类型的部分规则显示高级选项。仅用OpenAPI向上层应用提供更精细化的结果数据，不影响数据开发质量节点及...
基于MaxCompute实现拉链表
本案例将使用拉链表记录电商订单从开始到当前状态（创建/支付/完成）的所有变化信息，拉链表的加载逻辑详情请参见：拉链表数据加载逻辑。任务开发：准备工作 进入数据开发页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 ...
视频个性化推荐（协同过滤）
在 rec_sln_demo_behavior_table_v1 节点编辑页面，输入如下示例代码：表定义：“用户与视频的交互日志数据”-表数据：该表记录了用户对各个视频内容的交互行为，每一行代表用户每一次视频交互记录与权重。CREATE TABLE IF NOT EXISTS rec_...
表操作篇
例如，存储消费记录表，近期产生的消费记录被访问的可能性较大，因为应用程序需要及时地对消费记录进行处理和统计，或者查询最近的消费记录。但是年代久远的消费记录被查询的可能性不大，这些数据渐渐成为冷数据，但仍然占用存储空间。其次...
MySQL分库分表同步至Hologres（方案1.0）
则需要在Hologres表中添加上三个附加字段（src_datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的主键在Hologres里构成了唯一键，保障了某条物理表记录在Hologres逻辑表里...
数据问答最佳实践
星型结构：将数据分为事实表和维度表（数量>3张）两部分，事实表记录了数据的度量值，维度表则记录度量值的维度信息。不支持的问答能力：复杂的多列查询且很难使用一条查询语句获取数据的。如：参与航天日直播活动中奖的有几个人，分别是谁...
附录：消息格式
消息总体格式 写入Kafka消息的总体格式如下所示：{"schema":{/变更的元数据信息，仅指定列名与列类型信息"dataColumn":[/变更的数据列信息，更新目标表记录内容 {"name":"id","type":"LONG"},{"name":"name","type":"STRING"},{"name":...
CREATE PUBLICATION
临时表，未记录表，外部表，物化视图和常规视图不能成为发布的一部分。将分区表添加到发布时，其所有现有分区和将来分区都被隐式视为发布的一部分。因此，即使直接在分区上执行的操作也会通过其祖先所在的发布来发布。FOR ALL TABLES 将...
系统表
kepler_partitions 用于记录表的分区信息，用法详情请参见 查看分区的统计信息。字段说明：字段 说明 schema_name 数据库名称。table_name 表名。partition_id 分区ID。row_count 记录行数。data_size 总大小。单位：Byte。index_size 索引...
SQL语句示例
SELECT 获奖记录,MAX(获奖时间)FROM 获奖记录表 WHERE 获得奖项='金奖' GROUP BY 获奖记录"值比较条件 WHERE子句支持等于、大于、小于、不等于运算符 学位为学士,审查通过人数大于20小于30的招考人数是多少 SELECT 招考人数 FROM 招考信息...
触发器函数
一个用于审计的 PL/SQL 触发器函数 这个例子触发器保证了在 emp 表上的任何插入、更新或删除一行的动作都被记录（即审计）在 emp_audit 表中。当前时间和用户名会被记录到行中，还有在其上执行的操作类型。CREATE TABLE emp(empname text ...
功能发布记录（2020~2021年）
新增 基于自建Spring Cloud Gateway或Zuul网关实现全链路灰度 历史发布记录 表 7.云原生网关 版本主题 核心功能 发布时间 云原生网关重磅功能升级，张家口开服 升级多服务多版本权重路由，请参见 路由方式概述。升级路由级别CORS跨域策略，...
查看实时元表校验记录
实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 实时元表 校验记录页面。参数 说明 筛选与搜索...
查看实时元表校验记录
实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 实时元表 校验记录页面。参数 说明 筛选与搜索...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
查看全域数据表校验记录
全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 全域数据表 校验记录页面。参数 说明 ...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
查看Dataphin数据表校验记录
Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 Dataphin数据表 校验...
Dataphin资产中表分区存在记录数，但是表分区记录数...
问题描述 Dataphin资产中表分区存在记录数，但是表分区记录数显示为空。问题原因 该分区记录数是T+1更新数据，这里的T指的是分区的创建时间。解决方案 无需解决，待T+1后看下分区记录数即可。适用于 Dataphin 公共云
RDS MySQL的单表尺寸限制
单表的有效最大表尺寸通常受限于操作系统的文件尺寸限制，而不是受MySQL内部机制的限制。由于存在部分元数据的开销，RDS MySQL单表的最大尺寸为略...表中记录数在2000万条以内。表的总大小在10 GB以内。如问题还未解决，请联系 售后技术支持。
RDS MySQL的单表尺寸限制
单表的有效最大表尺寸通常受限于操作系统的文件尺寸限制，而不是受MySQL内部机制的限制。由于存在部分元数据的开销，RDS MySQL单表的最大尺寸为略...表中记录数在2000万条以内。表的总大小在10 GB以内。如问题还未解决，请联系 售后技术支持。
隔离等级
在此模式下，Delta 表的内容可能与表历史记录中所示的操作序列不同。这是因为此模式允许某些并发写入对继续进行（例如，操作X和Y），即使历史记录显示Y是在X之后提交的，但结果是Y在X之前执行的（也就是说，它们之间可序列化）。要禁止这种...
使用阿里邮箱发信时系统退信并提示“spf check failed...
操作解析的域名 解析记录类型 优先级 解析记录值@TXT-v=spf1 include:spf.mxhichina.com -all 如果不存在此记录，或者已有记录值与表中记录值不一致，请参考表中记录进行添加或者修改。更新完成后，请重新发送邮件进行测试，确认问题已经...
修正考勤的记录能不能查询？
概述 本文介绍修正考勤的记录如何查询。详细信息 若你修正了某位员工的考勤打卡记录，修正...修正后的考勤记录从后台导出时，设备号以及打卡地址信息会消失，考勤报表【原始记录】表里还会记录该条记录由管理员修改为正常。适用于 专属钉钉
明细粒度事实层（DWD）
在您建设明细事实表时，需要选择基于现有的表进行明细层数据的开发，清楚所建表记录存储的是什么粒度的数据。明细粒度事实层（DWD）规范 通常您需要遵照的命名规范为：dwd_{业务板块/pub}_{数据域缩写}_{业务过程缩写}[_{自定义表命名标签...
明细粒度事实层（DWD）
在您建设明细事实表时，需要选择基于现有的表进行明细层数据的开发，清楚所建表记录存储的是什么粒度的数据。明细粒度事实层（DWD）规范 通常您需要遵照的命名规范为：dwd_{业务板块/pub}_{数据域缩写}_{业务过程缩写}[_{自定义表命名标签...
概述
表大小 记录已备份和未备份的表格存储表数量和大小。一周任务数 记录备份中、恢复中、完成和失败等的一周任务总数。备份库使用总量 记录备份表格存储所使用的备份库总容量。云备份按照备份库存储容量计费。更多信息，请参见 计费方式与计费...
CNAME解析常见问题
解决方案：配置CNAME过程中，解析记录冲突会出现两种情况，如下表所示。若您的域名之前已有A记录或MX记录，请确保此域名已不在线上使用的情况下按照下面解决方案进行操作，或者您可选择使用新的域名。冲突情况 解决方案 CNAME记录和A记录...
原生SDK概述
处理输入表的记录对象，加工处理成键值对集合输出到Reduce阶段，或者不经过Reduce阶段直接输出结果记录到结果表。不经过Reduce阶段而直接输出计算结果的作业，也可称之为MapOnly作业。ReducerBase 用户自定义的Reduce函数需要继承自此类。...
SDK更新日志
version:1.1.3[2020-11-19]特性：支持物品表查询和修改，查询推荐历史日志 version:1.1.2[2020-07-28]特性：支持行为表消息记录查询，支持查询消息记录统计数据。更新：修改数据源配置接口请求体格式。version:1.1.1[2020-06-30]特性：支持...
设置数据库索引
前提条件 创建数据表 添加记录 操作步骤 登录 EMAS管理控制台。查找您的项目，单击项目，进入EMAS 概览 页。在顶部导航栏，选择 平台服务。在左侧导航栏，选择 EMAS Serverless>云数据库。在 云数据库 页面，单击目标数据表，然后单击 索引...
Delta Lake 快速入门
此快速入门演示如何生成管道，以便将JSON数据读入Delta表、修改表、读取表、显示表历史记录，以及优化表。有关演示这些功能的Databricks笔记本，请参阅 入门笔记本。创建表 若要创建一个delta表，可以使用现有的Apache Spark SQL代码，也...
性能参数表
mean_tup_fetched_delta：每秒索引扫描回表记录行数。mean_tup_inserted_delta：每秒INSERT记录行数。mean_tup_updated_delta：每秒UPDATE记录行数。mean_tup_deleted_delta：每秒DELETE记录行数。db.sql.tup_returned.avg db.sql.tup_...
Cache Table
云原生数据仓库AnalyticDB MySQL版 3.0 提供了Cache表功能，用于临时...配置 Cache表 的最大行数（TEMP_TABLE_MAX_ROW_COUNT）每个Cache表允许记录的最大行数，默认值为 300000，单位为行。SET ADB_CONFIG TEMP_TABLE_MAX_ROW_COUNT=300000;
JindoTable表或分区访问热度收集
背景信息 JindoTable支持收集访问Hive表的记录，收集的数据保存在SmartData服务的Namespace中。SmartData 3.2.x版本开始支持Spark、Hive和Presto引擎，Spark和Presto的数据收集默认是打开的，如果需要关闭，请参见 关闭热度收集。Hive的...
使用空间函数查询数据方法
查看表中记录数量 accommodations 表中有记录数22248条，zipcodes 表中有记录数190条。select count(*)from accommodations;查询accommodations表中的记录数量 select count(*)from zipcode;查询zipcode表中的记录数量 查看表中内容 select...
pg_repack
对全表进行repack的实现原理如下：创建日志表，记录对原表的变更。在原表上创建触发器，将原表的 INSERT、UPDATE 和 DELETE 操作记录到日志表中。创建并导入与原表结构相同的新表。在新表中创建原表上的索引。将日志表里的变更应用到新表。...
- 产品推荐
- 这些文档可能帮助您