配置Hive输出组件
如果Hive数据源中没有数据同步的目标表，则您可以通过 一键生成目标表 功能，简单快速的生成目标表。详细的操作步骤如下：单击 一键生成目标表。Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、字段类型...
配置TDH Inceptor输出组件
如果TDH Inceptor数据源中没有数据同步的目标表，则您可以通过 一键生成目标表 的功能，简单快速的生成目标表。详细的操作步骤如下：单击 一键生成目标表。Dataphin会自动为您匹配创建目标表的代码，包括目标表名称（默认为来源表名）、...
配置AnalyticDB for PostgreSQL输出组件
如果AnalyticDB for PostgreSQL数据源中还没有数据表，您也可以执行如下步骤，简单快速的生成目标表：单击 一键生成目标表。Dataphin会自动为您匹配创建表的代码，包括目标表名称（默认为来源表名）、字段类型（字段进行了初步的转换）等...
提交节点报错：当前节点依赖的父节点输出名不存在
非周期性调度生产数据的表包括：从本地上传到DataWorks的表 维表 非DataWorks调度产出的表 手动任务产出的表 当有节点SELECT非周期性调度生成数据的表时，就会出现上述报错。解决方案 您需要手动删除包含非周期性生成数据的表相关的依赖...
管理报警联系组的排班表
当 排班方式 为 组内人员轮转排班 时，先设置 定义分组数量，然后单击 快速生成排班表，系统自动根据报警联系组内的报警联系人、班次 和 定义分组数量 快速生成值班信息。单击 确认。为目标报警联系组设置排班表后，排班表的图标变更为。...
配置AnalyticDB for PostgreSQL输出组件
如果AnalyticDB for PostgreSQL数据源中还没有数据表，您也可以执行如下步骤，简单快速的生成目标表：单击 一键生成目标表。Dataphin会自动为您匹配创建表的代码，包括目标表名称（默认为来源表名）、字段类型（字段进行了初步的转换）等...
查看并管理分析平台表
分析平台表是指您在分析平台专用计算源中用 create table 语句生成的表集合。分析平台表页面为您展示了分析平台表的基本信息及相关管理操作，方便您查看创建的分析平台表并进行管理。本文为您介绍分析平台表列表及支持的管理操作。权限说明...
查看并管理分析平台表
分析平台表是指您在分析平台专用计算源中用 create table 语句生成的表集合。分析平台表页面为您展示了分析平台表的基本信息及相关管理操作，方便您查看创建的分析平台表并进行管理。本文为您介绍分析平台表列表及支持的管理操作。权限说明...
查询与变更表结构
在 SQL Console 窗口中，左键双击表名，系统将自动生成查询表的SQL语句，再单击 执行。通过表的对象信息查看表结构 进入SQL Console。在 SQL Console 窗口中，右键单击目标表，从弹出的列表中单击 对象信息。在 创建语句 区域，即可看到...
数据集成概述
Dataphin升级了数据集成的能力，旨在为您构建简单高效、安全可靠的数据同步平台：支持通过整库迁移（快速生成批量同步任务）和一键生成目标表（同步到MaxCompute的数据无需手动建表）的方式，提高数据集成的效率，详情请参见 通过整库迁移...
生成代码精简版和完整版配置
enableSchema:false#(LikeTable)模糊表匹配(sql 过滤)likeTable 与 notLikeTable 只能配置一项 likeTable:#(LikeTable)模糊表排除(sql 过滤)likeTable 与 notLikeTable 只能配置一项 notLikeTable:#(String.)配置需要生成的表 include 与 ...
2022-03-04版本
模拟数据生成源表 模拟数据生成维表 新增模板中心，加速作业开发 提供20多种代码模版。20多个Flink SQL常见通用场景的模版，帮助您快速了解如何使用Flink SQL构建作业代码。提供MySQL到Hologres数据同步模版。帮助您快速创建Flink CDC作业...
集合返回函数
目前这个类中被使用最广泛的是级数生成函数，如系列生成函数表和下标生成函数表所述。其他更特殊的集合返回函数在本手册的其他地方描述。系列生成函数 generate_series(start integer,stop integer[,step integer])→setof integer ...
如何发布和调用JDBC数据服务
例如出参定义某个字段为Long型，但数据表中对应字段的某条记录为字符值，则在试图解析到此记录的字段值并转换为Long型时会抛出异常，导致此条记录生成失败，此时定义的业务结果字段为空，而此字段则会表达出生成记录的错误信息。...
Leading Hint
Leading Hint是一个能指定超过一个表的多表Hint，Leading Hint指导优化器先按照Leading Hint指定的部分表的顺序进行Join，然后再将Join完成的表作为最先访问的表与剩余的其他表进行Join。注意事项 目前暂未支持在嵌套SQL语句中使用Leading ...
Leading Hint
Leading Hint是一个能指定超过一个表的多表Hint，Leading Hint指导优化器先按照Leading Hint指定的部分表的顺序进行Join，然后再将Join完成的表作为最先访问的表与剩余的其他表进行Join。注意事项 目前暂未支持在嵌套SQL语句中使用Leading ...
索引顾问
执行CREATE EXTENSION index_advisor会创建index_advisor_log表、show_index_recommendations()函数和index_recommendations视图，索引顾问在该表中存储分析生成的索引编制建议，使用提供的函数和视图，可以简化对结果的检索和解释。...
新建镜像表
镜像表帮助您统一管理Flink计算任务中的实时表和离线表。本文为您介绍如何生成镜像表。背景信息 如果Flink任务的生效模式为实时和离线，则新建计算任务开发即有实时表又有离线表。Dataphin支持新建镜像表，镜像表映射了实时表和离线表。您...
新建镜像表
镜像表帮助您统一管理Flink计算任务中的实时表和离线表。本文为您介绍如何生成镜像表。背景信息 如果Flink任务的生效模式为实时和离线，则新建计算任务开发即有实时表又有离线表。Dataphin支持新建镜像表，镜像表映射了实时表和离线表。您...
查看并管理实时任务
测试方式 实时任务为FLINK测试方式包括打印日志和写测试表：选择打印日志后，测试结果写入日志，不生成测试表。选择写测试表，则测试结果不写入日志，但会生成对应测试表。重要 需要您确保物理数据库（如MySQL等）上已有该测试表，否则会...
查看并管理实时任务
测试方式 实时任务为Flink测试方式包括打印日志和写测试表：选择打印日志后，测试结果写入日志，不生成测试表。选择写测试表，则测试结果不写入日志，但会生成对应测试表。重要 需要您确保物理数据库（如MySQL等）上已有该测试表，否则会...
管理问题数据
问题数据表名生成规则：{监控数据表原表名}_dirtydata_dw_system_dqc。问题数据表所属空间：根据当前表所处环境决定。如原始表为 dev_project.table1，则问题数据表将同样保存在 dev_project 下。问题数据表责任人：数据表原表的责任人。...
逆向建模：物理表反向建模
该过程需确定表所在的工作空间、引擎实例，以及使用精准名称还是关键字匹配表名，匹配到的表后续将会被逆向生成相应模型。建模规则：确定逆向创建的模型所属的分层及命名规范。该过程您可使用检查器或自定义方式规范模型名称。统一同一分层...
DataV6.0数据集介绍
如果遇到比较复杂的多表，您可以通过创建视图的方式，生成多表联合查询，在左侧可以看到视图的结果，选择视图，查看视图中的内容。设置完成后，单击 下一步，进入 保存数据表 模块，输入数据库的名称和相关描述，单击 创建。创建成功后，...
元数据抽取
目标数据表前缀 通过元数据抽取生成跟文件一致的表名，输入目标元数据表前缀后，会在表名前添加前缀。抽取任务发现表字段更新时 当元数据抽取任务获取的表与现有表字段发现不一致时，采取：仅新增列，不会删除元数据中原有的列。更新表结构...
MaxCompute表数据
查看表详情 在查找到的表结果列表中，单击目标表名称，即可进入表详情页面查看表详细信息：功能 说明 相关文档 快捷操作 您可以在页面上方对表进行 申请权限、将表加入 数据专辑/查看专辑、收藏表、在 数据服务 页面 生成API、在 SQL查询 ...
功能特性
查看事件记录 事件订阅 NIS生成的网络异常事件提供订阅能力，帮助用户第一时间得知事件的发生与进展，实时掌握网络动态。设置NIS事件订阅 网络洞察仪 公网场景洞察 实时分析洞察仪下云网络资源与公网互访的流量运行状况，及时感知公网质量...
MySQL分库分表同步至MaxCompute
说明 目前自动建表生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标表时，将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...
创建和管理网络ACL
您可以在专有网络VPC中创建网络ACL并添加入方向和出方向规则。创建网络ACL后，您可以将网络ACL与交换机绑定，实现对交换机中的网络实例流量的访问控制。前提条件 您已经创建了专有网络VPC和交换机。具体操作，请参见 创建和管理专有网络 和...
MySQL分库分表同步至MaxCompute
说明 目前自动建表生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标表时，将自动为源端字段匹配目标端可写入的字段类型。若您需要修改...
Hotfix补丁工具报错排查步骤
生成补丁报错，提示no any patchClasses，这是因为打包apk的时候开启了instant run，造成apk内部的构造与不开启有差异，致使打补丁时对比不出新旧包的差异，导致修复不成功，要在打包apk的时候关闭instant run，新旧包都要重新生成，然后再...
表结构配置管理
空间下的 事件，若已开启存储，事件上报的数据将于上报次日同步到计算源，生成相应的用户行为表、订单明细表，表名分别为QT上报行为事件、自主上报行为事件、自主上报订单事件等，创建者显示为API同步。用户行为表包含的字段可参考 用户...
数据接入任务
原始清单：您通过“全部任务>创建任务”上传的数据表而生成的数据开发任务。衍生清单：系统通过追溯您已导入表的血缘信息而生成的数据开发任务。其中，“全部任务”模块显示上述全量数据开发任务；“我的任务”则显示需要您开发的数据任务...
用户洞察常见问题
通过从数据源读取用户ID数据表，生成受众，请参见 从数据源创建受众。在进行用户分析时，可以将分析图表中的部分图形所代表的人群创建为新的受众或者添加至已有受众，请参见 用户分析。在执行非自动化的短信营销、邮件营销、PUSH营销任务后...
生成数据库脚本
平台提供两种数据库脚本生成方式：表结构生成语句和表结构变更语句。本文为您介绍如何生成数据库脚本。操作步骤 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域，在下拉列表中单击目标项目名称后...
生成数据API
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
受众筛选概述
从数据源创建受众：从数据源读取用户ID数据表，生成受众。受众交并：利用已有受众进行交集、并集、差集计算，生成新受众。复制受众：复制已有受众，获得与原受众相同的新受众。此外的其他受众创建方式，请参见 除了受众筛选，还有哪些受众...
预置指标API
后续操作 您可以实例化预置指标表，生成更多的预置指标API。具体操作，请参见 生成预置指标数据API。您可以调用预置指标API查看实例中所有设备的运行情况。调用示例，请参见：Java SDK调用示例 Python SDK调用示例 Node.js SDK调用示例
逻辑表配置概述
对于逻辑表任务，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度...相关对象 逻辑表的相关对象，指关联维度引用了当前表的其他逻辑表、当前表引用读取的表及引用了当前表的计算/集成任务（当前表是此任务的输入表）/逻辑表。
操作流程
数据上报API：通过数据表方式生成API可以方便后续调用，减少资源操作成本。数据更新API：通过调试或调用创建的数据更新API修改数据库中的表数据。空间服务API：通过将空间数据管理中的各类型空间数据发布成行业标准的空间服务API，以便后续...
- 产品推荐
- 这些文档可能帮助您