推送采集数据
名称 类型 是否必选 描述 field1 xxx 是 表字段 field2 xxx 是 表字段 返回参数 参数 类型 描述 errors List 错误内容 status String status：执行结果，OK为成功，FAIL为失败，请根据返回错误码进行排查 request_id String 当前请求的 ...
编辑器代码提效
使用限制 各类型计算引擎所支持的代码提效功能不同，代码提效所支持的计算引擎和功能项详情见下表：计算引擎 表提示 表字段提示 函数提示 权限校验 数据源编码提示 离线计算引擎 支持 支持 支持 支持-实时计算引擎（Flink）支持 支持 支持 ...
编辑器代码提效
使用限制 各类型计算引擎所支持的代码提效功能不同，代码提效所支持的计算引擎和功能项详情见下表：计算引擎 表提示 表字段提示 函数提示 权限校验 数据源编码提示 离线计算引擎 支持 支持 支持 支持-实时计算引擎（Flink）支持 支持 支持 ...
Quick BI中添加的钉钉账号，用户标签管理进行数据关联...
详细信息 这个“账号ID”是 Quick BI 内部的 ID，形式上是 uuid，可以用 baseId 关联，这个 baseId 取的是...数据关联时，组织成员（Quick BI官方）选择“账号ID”，"选择表字段"选择qbi_user里的内容是钉钉unionid的字段。适用于 Quick BI
新建镜像表
镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 单击 确定。步骤三：预览镜像关系 在镜像表开发页面，页面右侧为您展示 镜像关系预览 面板。在 镜像关系预览 面板，查看实时表、离...
新建镜像表
镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 单击 确定。步骤三：预览镜像关系 在镜像表开发页面，页面右侧为您展示 镜像关系预览 面板。在 镜像关系预览 面板，查看实时表、离...
功能简介
支持对物理表字段进行排序，支持根据条件筛选。表信息查看 支持不同云计算资源的表信息查看，包括物理表基本信息、表结构和物理表DDL。当云计算资源为AnalyticDB PostgreSQL时，支持对视图进行表信息查看。临时查询 支持通过SQL语句查询...
ETL文档
d 字段名称 目标表字段 字段说明 源表 涉及源表字段 算法说明 备注 uid 用户ID 用户ID ods_log_info_d uid 抽取汇总 gender 性别 性别 ods_log_info_d gender 抽取 region 地域，根据IP获取 地域，根据IP ods_log_info_d ip 转换，将IP地址...
配置Kafka输入组件
源头表字段也可配置为上述6个字符串之外的字符串，此时将Kafka记录作为JSON字符串进行解析，将源头表字段配置的字符串作为JSON路径读取对应内容作为字段值写入对应的目标表字段。例如：{"data":{"name":"bob","age":35 } } 为Kafka记录的...
配置Kafka输入组件
源头表字段也可配置为上述6个字符串之外的字符串，此时将Kafka记录作为JSON字符串进行解析，将源头表字段配置的字符串作为JSON路径读取对应内容作为字段值写入对应的目标表字段。例如：{"data":{"name":"bob","age":35 } } 为Kafka记录的...
数据上传
参数 描述 预览数据并设置目标表字段（上传数据至已有表）需配置数据所在文件的列与目标表字段的映射关系，配置后相关数据才可被成功上传。映射方式包括 按列名映射 及 按顺序映射。映射后您也可自定义目标表的字段名称。说明 若待上传数据...
Dataphin逻辑表的物化表是根据什么规则生成和变化的
即重新创建所有物化表 v1->v2的情况：修改任意字段数据类型 新增分区字段 删除分区字段 修改分区字段名称 分区字段顺序发生变化 任意字段发生迁移（从表A->表B）问题2：目前Dataphin 是采用基于规则的方式对表字段进行拆分的。比较典型的几...
数据查询
（邀测中）支持对物理表字段进行排序，支持根据条件筛选。表信息查看 支持不同云计算资源的表信息查看，包括物理表基本信息、表结构和物理表DDL。临时查询 支持通过SQL语句查询预览不同云计算资源的数据资源，可为开发人员和数据应用人员...
功能简介
（邀测中）支持对物理表字段进行排序，支持根据条件筛选。表信息查看 支持不同云计算资源的表信息查看，包括物理表基本信息、表结构和物理表DDL。当云计算资源为AnalyticDB PostgreSQL时，支持对视图进行表信息查看。临时查询 支持通过SQL...
数据建模
新建逻辑表：支持通过可视化的形式创建逻辑表的基本信息、字段信息、关联信息，提供DDL语句新建、引用现有表字段、引用标准库字段、手动添加字段等方式快速创建逻辑表字段及字段信息功能。云计算资源扫描：支持将云计算资源的已有物理表...
脚本模式：高级SQL（Mybatis语法）示例
本文提供的高级SQL（Mybatis语法）场景示例如下：示例1：通过条件控制返回结果按照不同的表字段进行排序 示例2：通过条件控制查询不同的数据表 示例3：通过判断字段值是否为空来控制where查询条件是否保留 示例1：通过条件控制返回结果按照...
使用拆分字段
拆分字段即分库/分表字段，是在水平拆分过程中用于生成拆分规则的数据表字段。数据访问代理会根据拆分字段的值将数据表水平拆分到每个物理库实例上的物理分库/分表中。拆分原则 数据表拆分的首要原则，就是要尽可能找到数据表中的数据在...
功能简介
新建逻辑表：支持通过可视化的形式创建逻辑表的基本信息、字段信息、关联信息，提供DDL语句新建、引用现有表字段、引用标准库字段、手动添加字段等方式快速创建逻辑表字段及字段信息功能。云计算资源扫描：支持将云计算资源的已有物理表...
操作流程
新建逻辑表 手动新建逻辑表 通过可视化的形式创建逻辑表的基本信息、字段信息、关联信息，提供DDL语句新建、引用现有表字段、引用标准库字段、手动添加字段等方式快速创建逻辑表字段及字段信息功能。具体操作，请参见 手动新建逻辑表。通过...
审批中心概述
表字段权限申请与审批流程 在 审批中心 自定义审批策略后，当表字段权限申请人在 安全中心 申请权限后，后续的流程如下图所示。在安全中心申请MaxcCompute引擎表字段权限时，DataWorks会根据申请的表字段来识别需要进行哪种类型的审批流程...
功能简介
新建逻辑表：支持通过可视化的形式创建逻辑表的基本信息、字段信息、关联信息，提供DDL语句新建、引用现有表字段、引用标准库字段、手动添加字段等方式快速创建逻辑表字段及字段信息功能。云计算资源扫描：支持将云计算资源的已有物理表...
操作流程
新建逻辑表 手动新建逻辑表 通过可视化的形式创建逻辑表的基本信息、字段信息、关联信息，提供DDL语句新建、引用现有表字段、引用标准库字段、手动添加字段等方式快速创建逻辑表字段及字段信息功能。具体操作，请参见 手动新建逻辑表。通过...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
文件源管理
字段信息 勾选文件中的数据表字段，勾选后字段在合作空间中可见。单击 确定，完成文件源数据创建。查看及管理文件源数据 完成数据创建后，您可对数据执行查看列名信息、删除、变更责任人等操作。区域 描述 ① 搜索区 您可根据目录的名称...
一键同步MaxCompute数据
同步字段 需要导入的MaxCompute表字段。您可以选择导入部分或全部字段。分区配置 需要导入的分区字段。一键MaxCompute数据同步 功能仅支持导入一级分区。如果您需要导入多级分区，请在 SQL Console 中使用SQL语句实现，详情请参见 SQL ...
一键同步MaxCompute数据
同步字段 需要导入的MaxCompute表字段。您可以选择导入部分或全部字段。分区配置 需要导入的分区字段。一键MaxCompute数据同步 功能仅支持导入一级分区。如果您需要导入多级分区，请在 SQL Console 中使用SQL语句实现，详情请参见 SQL ...
使用MaxCompute控制台（离线）
说明 配置映射关系，详情请参见下文步骤2的 预览待上传数据并设置目标表字段。表 3.上传数据至新建表 参数名 描述 表名 自定义表名称。表类型 根据需要选择 非分区表 或 分区表，若选择分区表，则需指定分区字段及其取值。生命周期 指定表...
创建多表join
表A（主表）->表K join层级不超过2层，但辅表个数超过10个 不支持（独享型可扩展辅表个数）数据模型 主辅表JOIN场景 注意事项 表字段结构一致才能映射，如辅表主键为INT，那么只能映射INT类型的主表字段。离线表的join逻辑是，在索引构建的...
查看血缘关系
当目标字段被删除、名称或者属性发生变化时，您可以快速找到被引用的作业及表和字段，对关联的表字段进行相应的处理。通过节点名称搜索 查看血缘信息 当血缘关系图很复杂时，您可以通过节点名称模糊搜索，快速定位到目标节点，查看目标节点...
新建及管理质量规则模板
表达式中的${T1.total_sales} 等变量需要指定实际的表字段，并在执行时会被替换为实际的表字段，最多支持双表。跨源两表字段统计值一致性比较：统计方式：可统计字段分组个数、字段最大值、字段重复率等，详情请参见 模板类型说明。数据源...
新建及管理质量规则模板
表达式中的${T1.total_sales} 等变量需要指定实际的表字段，并在执行时会被替换为实际的表字段，最多支持双表。跨源两表字段统计值一致性比较：统计方式：可统计字段分组个数、字段最大值、字段重复率等，详情请参见 创建全域数据表质量...
添加数据映射
表字段数据可直接映射到孪生节点中。具体内容，请参见 创建和管理自定义存储表。重要 一个数据表只能关联到一个数据映射中。脚本 单击对应的 选择文件，上传.txt 格式的脚本文件、.json 格式的输出文件。脚本和输出文件编辑方法，请参见 ...
概述
数据源为数据服务中自定义存储表的数据：无需配置脚本文件和输出文件，根据表字段 iotId 和 identifier 的值直接映射 value 的值给对应孪生节点的物模型属性。重要 数据服务中自定义存储表映射到IoT孪生引擎的数据类型都是String，IoT孪生...
离线任务监控概述
字段级监控：指为逻辑表字段添加监控，在字段级监控下您可为多个逻辑表字段配置相同的监控报警规则，也可为一个逻辑表字段配置多个不同的监控报警规则。配置字段级监控，请参见 配置任务监控报警规则。任务级监控：在任务级下您可为多个...
离线任务监控概述
字段级监控：指为逻辑表字段添加监控，在字段级监控下您可为多个逻辑表字段配置相同的监控报警规则，也可为一个逻辑表字段配置多个不同的监控报警规则。配置字段级监控，请参见 配置任务监控报警规则。任务级监控：在任务级下您可为多个...
MySQL整库周期性增全量同步至MaxCompute
根据界面提示配置 周期配置、增量条件、目标表名映射自定义、目标表字段赋值、自定义高级参数 等参数，配置要点如下。周期配置：对周期同步的调度周期、重跑属性、调度资源组等进行配置。增量条件：对源端进行where字句过滤，此处只需写...
表
说明 编辑表 暂不支持删除已有表字段。单击 提交表，完成对当前内部表的编辑。删除内部表 在左侧导航栏 已登录实例 界面查询目标内部表。查询目标内部表的步骤请参见 编辑内部表 的步骤1~3。鼠标右击目标内部表，选择 删除表。单击 确认。...
- 产品推荐
- 这些文档可能帮助您