调用API
数据源类型 单次最大返回条数 查询总条数限制 是否支持分页查询 单物理表服务单元 MySQL 10000 无上限 支持 AnalyticDB for MySQL2.0 支持 ElasticSearch 支持 Microsoft SQL Server 不支持 PostgreSQL 支持 AnalyticDB for MySQL3.0 支持 ...
资产安全权限列表
Y Y Y Y Y Y Y 查看识别规则列表 Y Y Y Y Y Y Y 数据分类 新建数据分类 N N N Y N N N 编辑数据分类 N N N Y N N N 删除数据分类 N N N Y N N N 查看数据分类列表 Y Y Y Y Y Y Y 数据分级 新建数据分级 N N N Y N N N 编辑数据分级 N N N Y...
资产安全权限列表
Y Y Y Y Y Y Y 查看识别规则列表 Y Y Y Y Y Y Y 数据分类 新建数据分类 N N N Y N N N 编辑数据分类 N N N Y N N N 删除数据分类 N N N Y N N N 查看数据分类列表 Y Y Y Y Y Y Y 数据分级 新建数据分级 N N N Y N N N 编辑数据分级 N N N Y...
元表和字段资产详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
元表和字段资产详情
最高涉密等级：为您展示该数据表的字段的敏感程度，数据分级 等级从低到高为L1、L2、L3、L4（公开到绝密）及自定义的数据分级。创建时间：为您展示该数据表的创建的时间，格式为：yyyy-mm-dd hh:mm:ss。创建人：为您展示创建该数据表的用户...
治理效果
操作 操作 下为您提供查看数据趋势和健康分排行榜的入口：单击 操作 列下的 图标，查看该项目下计算和存储的 近7天 或 近30天 数据趋势：单击 存储，进入 存储 页面，将鼠标悬浮在数据趋势曲线上，查看某日的健康分和存储量。单击 计算，...
数据服务系统配置
运维监控统计数据可帮助您查看最近某段时间的API运维数据，以便您更好的调整API，合理优化资源。本文为您介绍如何自定义运维监控配置。权限说明 超级管理员支持修改系统配置。数据服务系统配置入口 在Dataphin首页，单击顶部菜单栏 服务。...
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/...
创建Oracle数据源
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin...
质量规则模板类型
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/...
成员管理、数据源、变更管控权限列表
Y Y N N N N N 启用角色 Y Y N N N N N 新建成员 Y Y N N N N N 删除成员 Y Y N N N N N 计算管理 计算地址校验 Y Y N N N N N 计算地址配置 Y Y N N N N N 智能引擎 自定义任务参数 Y Y N N N N N 变更管控 新建变更规则 N Y N N N N N ...
成员管理、数据源、变更管控权限列表
Y Y N N N N N 启用角色 Y Y N N N N N 新建成员 Y Y N N N N N 删除成员 Y Y N N N N N 计算管理 计算地址校验 Y Y N N N N N 计算地址配置 Y Y N N N N N 智能引擎 自定义任务参数 Y Y N N N N N 变更管控 新建变更规则 N Y N N N N N ...
创建Hologres数据源
新建Hologres数据源用于实现Dataphin能够读取Hologres的业务数据，及能够向Hologres写入数据。在引入Hologres的业务数据至Dataphin和将Dataphin的数据写入至Hologres的场景中，您需要先创建Hologres数据源。本文为您介绍如何新建Hologres...
创建GoldenDB数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
创建GoldenDB数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
创建PolarDB数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
编码规范
本文为您介绍智能引擎下编码规范支持的配置项以及各项配置说明。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 编码规范 页签，设置编码规范相关配置。配置项 描述 禁止即席查询中使用“select*”语法查询汇总...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
创建Oracle数据源
通过创建Oracle数据源能够实现Dataphin读取Oracle的业务数据或向Oracle写入数据。本文为您介绍如何创建Oracle数据源。背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin...
离线集成管道通道配置
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 请参见 数据集成入口，进入数据集成页面。在数据集成页面，按照下图操作...
编码规范
本文为您介绍智能引擎下编码规范支持的配置项以及各项配置说明。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 编码规范 页签，设置编码规范相关配置。配置项 描述 禁止即席查询中使用“select*”语法查询汇总...
创建ClickHouse数据源
通过创建ClickHouse数据源能够实现Dataphin读取ClickHouse的业务数据或向ClickHouse写入数据。本文为您介绍如何创建ClickHouse数据源。背景信息 如果您使用的是数据库ClickHouse，引入ClickHouse的业务数据至Dataphin中或将Dataphin数据...
个人数据中心
② 列表区 为您展示筛选后的结果列表，包含 表名、描述、资产标签、最高涉密等级、环境、来源、负责人 等数据表详细信息，同时您可以在 操作 列下对数据表执行 转交负责人、申请权限、修改资产标签 操作。转交负责人：可转交当前表的负责人...
创建Hologres数据源
新建Hologres数据源用于实现Dataphin能够读取Hologres的业务数据，及能够向Hologres写入数据。在引入Hologres的业务数据至Dataphin和将Dataphin的数据写入至Hologres的场景中，您需要先创建Hologres数据源。本文为您介绍如何新建Hologres...
数据探查全局配置
数据探查配置可开启自动探查的数据表范围，管控数据探查记录、并发运行任务数、任务探查时间及配置set参数，从而更合理的运用资源。本文为您介绍如何进行数据探查的全局配置。前提条件 需开通数据质量功能模块才可使用数据探查功能。权限 ...
个人数据中心
② 列表区 为您展示筛选后的结果列表，包含 表名、描述、资产标签、最高涉密等级、环境、来源、负责人 等数据表详细信息，同时您可以在 操作 列下对数据表执行 转交负责人、申请权限、修改资产标签 操作。转交负责人：可转交当前表的负责人...
数据探查全局配置
数据探查配置可开启自动探查的数据表范围，管控数据探查记录、并发运行任务数、任务探查时间及配置set参数，从而更合理的运用资源。本文为您介绍如何进行数据探查的全局配置。前提条件 需开通数据质量功能模块才可使用数据探查功能。使用...
创建单物理表服务单元
单物理表服务单元用于对业务数据源的单个物理表进行元数据配置。后续您可以基于该单物理表服务单元开发访问该物理表数据的API。本文为您介绍如何创建单物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作，请参见 创建服务项目...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API数据源。具体操作，请参见 创建API数据源。进行API...
创建PolarDB数据源
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
身份认证及访问控制
全局角色 全局角色用于管理Dataphin全局功能的操作权限或者某个子模块的最高权限，例如计算设置、添加成员、管理安全制度等。当前支持的全局角色有：超级管理员、系统管理员、安全管理员、质量管理员、数据源管理员等。项目角色 项目角色...
运行配置
手动任务：取当前租户下所有的手动实例（计算任务、集成、同步）、萃取模式补数据实例、标签测试运行时长的最大值+1小时。重跑次数：取当前租户下所有的周期实例、手动实例、补数据实例运行失败时，自动重跑成功次数+1次。重跑间隔：取当前...
逻辑表调度配置概述
配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。配置调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则，包括调度类型、调度周期、条件调度。调度依赖 调度依赖用于配置逻辑表任务上游依赖...
运行配置
手动任务：取当前租户下所有的手动实例（计算任务、集成、同步）、萃取模式补数据实例、标签测试运行时长的最大值+1小时。重跑次数：取当前租户下所有的周期实例、手动实例、补数据实例运行失败时，自动重跑成功次数+1次。重跑间隔：取当前...
分析平台设置
包含分析平台专用的计算源设置、临时表生命周期设置、数据结果下载及审批设置。本文将为您介绍如何进行分析平台设置。前提条件 已完成计算源创建，具体操作，请参见 计算源概述。权限说明 仅支持 超级管理员 或 系统管理员 进行设置。操作...
身份认证及访问控制
全局角色 全局角色用于管理Dataphin全局功能的操作权限或者某个子模块的最高权限，例如计算设置、添加成员、管理安全制度等。当前支持的全局角色有：超级管理员、系统管理员、安全管理员、质量管理员、数据源管理员等。项目角色 项目角色...
逻辑表调度配置概述
配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则，包括调度类型、调度周期、条件调度。调度依赖 调度依赖用于配置逻辑表任务上游依赖节点。...
创建多物理表服务单元
最大返回条数 Dataphin默认最大返回条数为1000条，支持最大限制为10000条。用于定义API查询数据时返回的条数，避免一次查询过多数据导致OLTP内存溢出。如果需要查询所有更多数据，您可以在 调用API 的SDK中修改PageSize参数值，以实现查询...
通过脚本模式创建集成任务
创建离线脚本模式后，可以通过直接编写数据同步的JSON脚本来完成数据同步开发，为数据同步开发提供了更灵活的能力和更精细化的配置管理。本文为您介绍如何创建离线脚本模式。前提条件 已完成数据源配置。您需要在配置集成任务前，配置好您...
- 产品推荐
- 这些文档可能帮助您