数据权限配置
数据权限策略可根据不同的数据等级指定不同的审批规则，能使审批人员着重于高敏感数据，对于公开的数据，可免除审批，从而降低权限审批的负担，本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
数据权限配置
数据权限策略可根据不同的数据等级指定不同的审批规则，能使审批人员着重于高敏感数据，对于公开的数据，可免除审批，从而降低权限审批的负担，本文为您介绍如何配置数据权限策略。权限说明 仅支持安全管理员对数据权限策略执行添加、编辑...
迁移说明
新版数据表类型 旧版数据集底表类型 用户标签表 用户标签数据集底表 用户行为表（表结构稍有不同）行为数据集底表 订单明细表 RFM模型底表——交易数据 订单汇总表 RFM模型底表——客户数据 统计表-AIPL模型底表（从行为数据聚合得到）您...
基本概念
本文为您介绍DataV可视分析地图文档中涉及的一些基本名词...每个数据源可以生成多个图层，每个图层都可以独立进行可视化分析和配置。地图底图 项目中的最底层瓦片地图由第三方提供，用户可以选择使用高德地图或者自定义连接其他公开地图服务。
访问CDC数据
云原生多模数据库 Lindorm 计算引擎提供Lindorm CDC（Change Data Capture）数据源，您可以通过该数据源使用Spark SQL查询Lindorm实例其他引擎变更的数据。前提条件 Lindorm实例已开通LTS（Lindorm Tunnel Service）服务，具体请参见 购买...
使用数据传输迁移数据
您可以通过数据迁移功能实时迁移其他数据源的数据至 OceanBase 数据库，以及迁移 OceanBase 数据库的数据至其他数据源。本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例，介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前，...
新建行为数据集
单击 选择数据表，在弹窗中选择数据源和数据表，单击 确认。单击 下一步。配置映射。设置行为数据集映射字段：设置用户标识、用户标识类型、行为时间、行为类型、行为次数、行为金额、行为渠道、行为对象属性、行为对象属性值等。用户标识...
离线同步常见问题
读取MaxCompute（ODPS）表数据时，如何同步多个分区数据？如何处理表列名有关键字导致同步任务失败的情况？读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
多表归并 选择为 是：DTS将在每个表中增加_dts_data_source 列来存储数据来源。具体操作，请参见 开启多表归并。选择为 否：默认选项。说明 多表归并功能基于任务级别，即不支持基于表级别执行多表归并。如果需要让部分表执行多表归并，另...
配置MySQL输入
MySQL节点支持分库分表，您可以单击 添加分库分表数据源，从下拉列表中选择相应的 数据源 和 表，添加多个数据源，同时进行同步。重要 所选表的Schema需要保持一致，否则执行会报错。单击工具栏中的 图标。常见问题 实时同步MySQL数据源的...
数据导入快速入门
三、设置用户属性 Quick Audience支持从用户标签表构建用户属性信息体系，用户属性的实际取值将来源于用户标签表，需要在配置用户标签表结构时指定将哪些标签的值作为用户属性的值，在导入用户标签表时为用户属性赋值。因此，在导入前，若...
观远BI连接MaxCompute
步骤二：选择数据表 连接到MaxCompute后选择需要用到的数据表。步骤三：数据连接及更新设置 通过配置数据更新参数，让数据按照需求更新数据，减少数据连接压力。步骤四：确认数据表信息 通过数据确认，可以确认数据以及数据存储地址。步骤...
从RDS同步到云原生数据仓库 AnalyticDB MySQL 版
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
深度解析PolarDB数据库并行查询技术
通常我们选择最大的那张表作为并行表，这样并行扫描的收益最大，当然也可以选择多个表同时做并行扫描，后面会继续讨论更复杂的情况。以查询年度消费TOP 10的用户为例：SELECT c.c_name,sum(o.o_totalprice)as s FROM customer c,orders o ...
新建事实逻辑表
若来源是多个表，请使用自定义SQL预先完成多表的关联。参数 描述 来源类型 支持 物理表、自定义SQL、逻辑表 三种来源类型。来源表类型说明：有主键来源表：有主键的逻辑表允许配置多个来源,第一个固定为主来源,逻辑表的数据总量（行数）...
从RDS同步到云原生数据仓库AnalyticDB MySQL
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
新建事实逻辑表
若来源是多个表，请使用自定义SQL预先完成多表的关联。参数 描述 来源类型 支持 物理表、自定义SQL、逻辑表 三种来源类型。来源表类型说明：有主键来源表：有主键的逻辑表允许配置多个来源,第一个固定为主来源,逻辑表的数据总量（行数）...
从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
从PolarDB MySQL版同步至云原生数据仓库AnalyticDB ...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
创建逻辑模型：汇总表
汇总表用于组织一个数据域下相同时间周期、相同维度的多个派生指标的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建汇总表。前提条件 已创建数据分层。数据分层是将相同功能作用的表挂载至统一的数据层...
从PolarDB-X同步至云原生数据仓库 AnalyticDB MySQL ...
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
视频个性化推荐（协同过滤）
2.业务意义：用户与视频的交互日志数据关联该表后可为每个用户的每一次交互（例如点赞、点击等）赋予相应的权重，通过数值量化用户不同行为帮助算法准确评估用户对视频内容的兴趣强度。INSERT OVERWRITE TABLE rec_test_etrec_behavior_...
流量诊断
复制写流量 KB 将热点分片所在表的数据从一个可用区复制至另一个可用区时使用的流量。总请求数据量 KB 热点分片所在表每秒的总请求数据量。读数据量 KB 热点分片所在表每秒的读请求数据量。写数据量 KB 热点分片所在表每秒的写请求数据量。...
风险识别管理（新版）
您可以输入单个或多个表名称，多个表名称之间使用英文逗号（,）分隔。输入表名称的说明如下：单个表名不超过30个字符，输入的表名整体不超过100字符。支持使用*通配符。例如，*name 表示识别所有名称为 name 后缀的表数据。否。不配置默认...
新建普通维度逻辑表
若来源是多个表，请使用自定义SQL预先完成多表的关联。说明 若您需要配置多个来源对象，您可单击 添加来源对象 进行新增。来源对象 选择 物理表：支持选择当前租户下所有具有读取权限的物理表（非Dataphin自动生成的物理表）、物理视图（非...
新建普通维度逻辑表
若来源是多个表，请使用自定义SQL预先完成多表的关联。说明 若您需要配置多个来源对象，您可单击 添加来源对象 进行新增。来源对象 选择 物理表：支持选择当前租户下所有具有读取权限的物理表（非Dataphin自动生成的物理表）、物理视图（非...
数据服务概述
公共数据服务资源组（按量付费）：由调用次数和执行时间的费用组成，并且每个月会为每个用户提供一定的免费额度。数据服务会对在线测试调用和实际生产调用都进行计费。公共数据服务资源组由多企业共用。详情请参见：公共数据服务资源组计费...
逻辑表和字段资产详情
同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击 确定 立即转出，建议转交后及时同步接收人。您可在 查看转交记录 页面查看...
逻辑表和字段资产详情
同时，您还可以执行如下操作：转交负责人：可转交当前表的负责人给其他用户，在 转交负责人 对话框，您可选择是否同步转交开发/生产环境表，选择 接收人 后，单击 确定 立即转出，建议转交后及时同步接收人。您可在 查看转交记录 页面查看...
技术原理
以下图为例，shop库中的orders表根据每行数据的ID属性的哈希，被分区水平切分成orders_00～orders_11共计12个分区，均匀分布在4个数据节点上。对于用户来说，通常无需关心具体的数据分布，PolarDB-X的分布式SQL层将会自动完成查询路由、...
离线同步数据质量排查
这些Task以单机或者多机的方式并发执行，每个Task读取一个数据区间内的数据，多个Task最终完成整体的数据同步业务。说明 在数据同步过程中，涉及到读插件Reader，写插件Writer。Reader插件连接具体的数据源头读取数据，并将数据放到内部...
功能更新动态（2023年）
新建公共日历 全局变量 全局变量支持选择多个代码审核人。新建全局变量 统计周期 支持根据指定的来源财务日历创建财务统计周期。新建统计周期 规范建模 支持创建无指标汇总逻辑表。业务限定支持根据不同业务日期区间配置不同的计算逻辑。...
模式
因此，如果每个用户都有单独的模式，则默认情况下他们访问自己的模式。在不受信任的用户已经登录的数据库中采用此模式后，请考虑审计名字类似于模式 pg_catalog 中的对象的公共模式。此方式是一种安全模式的使用方式，除非不受信任的用户是...
数据集成审批策略
审批人员定义：每个节点可以选择不同的审批人类型，审批人类型支持：DataWorks空间角色、DataWorks空间成员、表责任人、阿里云主账号、MaxComputeRole。说明 后续有审批任务时，DataWorks会根据上述步骤配置通知机制中配置的通知方式，给...
文档更新动态（2023年）
更新说明 新建公共日历 全局变量支持选择多个代码审核人。更新说明 新建全局变量 支持根据指定的来源财务日历创建财务统计周期。更新说明 新建统计周期 数据开发-规范建模 支持创建无指标汇总逻辑表。业务限定支持根据不同业务日期区间配置...
配置流程
创建ETL任务具体如下：任务 说明 参考文档 配置源库信息 您可以选择 输入/维表 节点的一个或多个数据类型，并需要为每个源库依次配置以下信息：说明 您可以多次选择同一类型的数据类型。配置节点信息。配置字段信息。可选：如果您选择的库...
管理健康报告
字段 说明 表集合 记录导入任务可能同时写入的所有相关表信息，表现为一个包含多个表的集合。表类型 用于区分不同类型的表，主要分为主键表和非主键表两类。非主键表包括明细表、聚合表和更新表。小文件影响得分 通过算法评估潜在小文件...
RFM模型
创建RFM模型 创建RFM模型时可选择两种分析类型：订单汇总数据：将最近N天原始数据聚合成以用户为粒度的大宽表，表中的每个用户只存在一条数据。订单汇总表样例请参见 Quick Audience数据表样例。订单汇总表数据导入操作，请参见 订单汇总。...
- 产品推荐
- 这些文档可能帮助您