从RDS MySQL数据库获取数据进行数据富化
说明 日志字段的值和RDS MySQL数据库表字段的值进行等值匹配时，如果RDS MySQL数据库表字段存在多个相同的值（例如RDS MySQL数据库表有多个值为 1 的 cid 字段。e_table_map函数只获取匹配到的第一行数据。e_table_map函数只支持单行匹配，...
创建文件数据源
数据字段 文件上传至数据库后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 文件字段名 为上传文件的表头名，会变成数据库表的字段备注。您可以在文件上传时，修改 文件字段名、数据库字段名称 ...
编辑器代码提效
功能 描述 权限校验 使用Select语句查询表信息时，当鼠标悬停至表名称，若当前账号无该表或表字段的查询权限，DataWorks将提示并引导您进入 安全中心 申请表的相关权限。说明 编辑器的权限校验仅是校验当前账号对生产环境的表是否有查询...
DataWorks的审计事件
ListEmrHiveDatabases 查询EMR集群下的Hive数据库列表（不分页）。ListExtensions 查询开放平台用户的扩展程序列表。ListFile 列出文件。ListFiles 查询文件列表。ListFileType 查询任务节点的类型信息。ListFileVersions 查询文件的版本...
功能发布记录（2022年）
中国香港，马来西亚（吉隆坡）、阿联酋（迪拜）所有DataWorks用户 DataWorks On EMR使用说明 DataStudio智能编辑器支持可视化插入字段和表权限校验 智能编辑器自动识别代码中查询表字段的部分，您可以把鼠标悬浮在表名上，选择需要查询的...
新建离线物理表
数据类型 选择表字段数据类型。支持类型如下：常用：string、bigint、double、datetime、timestamp、decimal。文本：varchar、char。数值：int、smaIlint、tinyint、float。时间：date。MaxCompute计算引擎支持datetime。其他：boolean、...
新建离线物理表
数据类型 选择表字段数据类型。支持类型如下：常用：string、bigint、double、datetime、timestamp、decimal。文本：varchar、char。数值：int、smaIlint、tinyint、float。时间：date。MaxCompute计算引擎支持datetime。说明 Hadoop计算...
创建多元索引
在数据表上创建一个多元索引后，您可以根据多元索引中建立索引的字段来查询数据表中的数据。一张数据表可以创建多个多元索引。最佳使用方式 请根据实际查询需求确定在一张数据表中创建多元索引的个数。例如有一张数据表有5个字段，分别为id...
Quick BI数据集“开启维值加速”是怎样加速的
如果配置了维值加速，那么“省份”信息就会默认从配置表中查询，该表中可能只有30多条数据，查询效率会显著提高（配置表需要提前在数据库中配置好）。操作步骤：进入数据集列表页，右键需要加速的数据集，点击加速缓存 勾选开启维值加速，...
申请、续期和交还表权限
查表数据：拥有表级查表数据权限可以查询表的任意字段，包括后续新增字段。同时可单独申请字段的查表数据权限，两者按照最长有效期生效。改表数据：拥有表级的改表数据权限。删除表：删除整表的权限（drop）。改表结构：修改表结构的权限，...
申请、续期和交还表权限
查表数据：拥有表级查表数据权限可以查询表的任意字段，包括后续新增字段。同时可单独申请字段的查表数据权限，两者按照最长有效期生效。改表数据：拥有表级的改表数据权限。删除表：删除整表的权限（drop）。改表结构：修改表结构的权限，...
限制账号只能访问指定表、视图、字段
授权更新或查询表中的字段 grant update(<字段名>)on table<表名>to<用户名>;授权更新表中字段 grant select(<字段名>)on table<表名>to<用户名>;授权查询表中字段 示例 授权用户test01更新表testtable的字段testid。grant update(testid)...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
管理明细及汇总表任务字段
本文为您介绍明细及汇总表（维度逻辑表、事实逻辑表、汇总逻辑表）字段支持的运维操作。字段以及批量操作 页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 明细及汇总表 任务字段管理...
空间分析
数据库自治服务DAS为RDS PostgreSQL提供空间分析功能，可以直观地查看数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间异常诊断等，能够帮助您及时发现数据库中的空间异常，避免影响数据库稳定性。...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等，本文以RDS MySQL数据库为例介绍如何使用空间分析功能。注意事项 空间分析功能最多...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间异常诊断等。注意事项 空间分析功能最多分析20000张表。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 ...
空间分析
您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数，以及数据库中某个表的空间使用情况、空间碎片、空间异常诊断等。注意事项 空间分析功能最多分析20000张表。操作步骤 登录 DAS控制台。在左侧导航栏...
元数据
背景信息 元数据（字典）是属于数据库本身的一些数据，包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
脚本模式：高级SQL（Mybatis语法）示例
1 1 排序方式 返回参数：参数名称 参数类型 示例值 col01 STRING shortname col02 STRING name 示例2：通过条件控制查询不同的数据表 示例使用动态SQL查询语句，通过 var 的不同取值控制查询不同的表，并返回 col01 字段的数据。...
数据集成侧同步任务能力说明
说明 支持的变量解释：DATASOURCE_NAME_SRC：源端数据源名称 DB_NAME_SRC：源端数据库名称 TABLE_NAME_SRC：源表名称 DATASOURCE_NAME_DEST：目标端数据源名称 DB_NAME_DEST：目标端数据库名称 TABLE_NAME_DEST：目标表名称 DB_NAME_SRC_...
配置ClickHouse输出组件
阿里云数据库ClickHouse创建数据表的操作，请参见 创建表；非阿里云数据库ClickHouse创建数据表的操作，请参见 ClickHouse官方文档。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 ...
查看及管理逻辑表下游对象
逻辑表下游对象列表展示当前逻辑表的对象名称/编码、对象类型、引用字段、数据类型/度量单位、开发状态及支持的操作。字段 描述 对象名称/编码 当前下游对象的名称及编码。对象类型 当前下游对象的对象类型。引用字段 当前下游对象所引用...
查看及管理逻辑表下游对象
逻辑表下游对象列表展示当前逻辑表的对象名称/编码、对象类型、引用字段、数据类型/度量单位、开发状态及支持的操作。字段 描述 对象名称/编码 当前下游对象的名称及编码。对象类型 当前下游对象的对象类型。引用字段 当前下游对象所引用...
Python SDK示例：Table
同时创建表时表字段的数据类型有一定的限制条件，详情如下。使用表Schema创建表 使用表Schema创建表时，您需要先创建表的Schema，然后通过Schema创建表。创建表的schema from odps.models import Schema schema=Schema.from_lists(['num','...
查看血缘关系
优势 详情 提升数据确认效率 通过溯源数据，可以全面了解数据的各个方面，包括作业涉及的产品、数据库和表情况，表字段的属性和关联关系，数据的来源、经过的处理步骤、传输路径以及最终的消费者。这样可以帮助您更好地理解数据的流向和...
配置ClickHouse输出组件
阿里云数据库ClickHouse创建数据表的操作，请参见 创建表；非阿里云数据库ClickHouse创建数据表的操作，请参见 ClickHouse官方文档。操作步骤 请参 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 ClickHouse...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置参数...
配置Hologres输出组件
使用限制 不支持写入Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。在离线单条管道脚本的开发页面，按照下图操作指引，进入 Hologres输出配置 对话框。在 Hologres输出配置 对话框，配置...
概述
本文介绍如何使用 Create Table Like Mapping 填写建表的字段信息。Create Table Like Mapping 我们通常的建表语句是要求填写好所有的字段信息的，比如在DLA里面建一个底层映射到MongoDB的表的语法是这样的：create external table person...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
步骤三：配置节点运行配置
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同，物理表名可以自定义。当选择星号（*）时，代表数据结构为...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
步骤三：配置节点运行配置
输入数据结构 输入表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同，物理表名可以自定义。当选择星号（*）时，代表数据结构为...
DataSource
instance-id","dbName":"my_db","dbTableName":"my_table","dbUser":"my","dbPassword":"my_passwd","filter":"","autoSync":true } 结构 字段 类型 描述 instanceId String 实例ID dbName String 数据库名 dbTableName String 数据库表名 ...
GetMetaTableColumn-获取表的字段信息
接口说明 仅管控模式为安全协同的数据库实例可调用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在...
数据集填报
字段配置 数据集表格转换为明细表后将进入该字段的配置面板，所有拖入的数据集的字段都会出现在面板左侧。您可以在不同字段之间切换，当您点击到一个还没有转换为填报控件的字段时，可进行一键转换。说明 转换的规则为：数值型字段转为数值...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
配置Oracle输出组件
同步其他数据源的数据至Oracle数据源的场景中，完成源数据的信息配置后，需要配置Oracle输出组件的目标数据源。本文为您介绍如何配置Oracle输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引...
- 产品推荐
- 这些文档可能帮助您