导出数据字典
通过导出数据字典功能，搭配导入功能，您可以快速实现工作组间的数据字典迁移。本文介绍如何导出数据字典。前提条件 已导入或新建完成数据字典。具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录 数据资源平台控制台。在页面...
导出数据字典
通过导出数据字典功能，搭配导入功能，您可以快速实现工作组间的数据字典迁移。本文介绍如何导出数据字典。前提条件 已导入或新建完成数据字典。具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录企业数据智能平台。在页面...
OpenAPI 门户
生成 SDK 调用示例 根据输入的 OpenAPI 请求参数，自动生成多种语言的 SDK 调用示例。命令行调用 提供网页版命令行工具，模拟 Linux 操作体验使用命令行调用 OpenAPI。使用场景 查看 OpenAPI 文档 OpenAPI 门户 提供完整的 OpenAPI 文档，...
SELECT TRANSFORM
select transform 语法允许您启动一个指定的子进程，将输入数据按照一定的格式通过标准输入至子进程，并且通过解析子进程的标准输出获取输出数据。select transform 让您无需编写UDF，便可以实现MaxCompute SQL对其他脚本语言的支持。功能...
SELECT TRANSFORM
select transform 语法允许您启动一个指定的子进程，将输入数据按照一定的格式通过标准输入至子进程，并且通过解析子进程的标准输出获取输出数据。select transform 让您无需编写UDF，即可实现MaxCompute SQL对其他脚本语言的支持。功能...
复杂类型函数
您可以在MaxCompute SQL中使用复杂类型函数处理复杂数据类型，例如ARRAY、MAP、STRUCT、JSON。本文为您提供MaxCompute SQL支持的复杂类型函数的命令格式、参数说明及示例，指导您使用复杂类型函数完成开发。MaxCompute SQL支持的复杂类型...
支持插件列表
btree_gin 1.3 1.3 提供一个为多种数据类型和所有enum类型实现B树等价行为的GIN操作符类示例。btree_gist 1.6 1.5 提供一个为多种数据类型和所有enum类型实现B树等价行为的GiST操作符类示例。citext 1.6 1.5 提供一种大小写不敏感的字符串...
Spark Load
Spark Load通过外部的Spark资源实现对导入数据的预处理，提高StarRocks大数据量的导入性能并且节省StarRocks集群的计算资源。Spark Load主要用于初次迁移、大数据量导入StarRocks的场景（数据量可到TB级别）。本文为您介绍Spark Load导入的...
支持插件列表
btree_gin 1.3 1.3 提供一个为多种数据类型和所有enum类型实现B树等价行为的GIN操作符类示例。btree_gist 1.6 1.5 提供一个为多种数据类型和所有enum类型实现B树等价行为的GiST操作符类示例。citext 1.6 1.5 提供一种大小写不敏感的字符串...
Spark Load
全局字典 适用场景 目前Doris中Bitmap列是使用类库Roaringbitmap实现的，而Roaringbitmap的输入数据类型只能是整型，因此如果要在导入流程中实现对于Bitmap列的预计算，则需要将输入数据的类型转换成整型。在Doris现有的导入流程中，全局...
表格函数
返回结果 返回映射后的字典数据 函数示例 示例1 原始日志 k1:v1 city:nj 加工规则 e_dict_map(tab_to_dict(tab_parse_csv("city,pop sh,2000 nj,800"),"city","pop"),"city","popu",)加工结果 k1:v1 city:nj popu:800 示例2 原始日志 k1:v1...
应用身份识别
通过在您的数据库服务器或与数据库服务器相连的服务器中安装具备应用身份识别功能的插件，实现将URL、用户名和客户端IP以注释方式插入到对应的SQL语句中，数据库审计可以根据注释信息对用户信息和SQL语句进行关联分析。以下是使用应用身份...
快速体验
生成数据API 通过DataWorks的 数据服务 功能，将数据表快速生成API，并发布至网关统一管理，供第三方服务使用。数据展示：Quick BI 通过Quick BI搭建面向不同业务需求的可视化大屏，可视化展示数据结果，便于进行业务数据分析。操作演示...
使用KMS密钥进行信封加密
应用程序将数据密文、数据密钥密文、KMS的密钥（即用于生成数据密钥的密钥）和加密参数（包含生成数据密钥时的加密算法以及IV）进行保存。信封解密流程 应用程序通过KMS实例SDK调用 Decrypt 接口解密数据密钥密文，得到数据密钥明文，然后...
场景：调度参数在数据集成的典型应用场景
同时，您可以结合 补数据 功能，实现将对应时间内的数据同步至目标端对应分区的功能。例如MySQL、Loghub、Kafka等。场景一：同步增量数据、场景四：同步历史数据 动态表名或文件路径 表名或文件名使用 调度参数，可实现每次同步不同表的...
导入数据字典
通过导入数据字典可以实现批量创建数据字典。本文介绍如何导入数据字典。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面...
导入数据字典
通过导入数据字典可以实现批量创建数据字典。本文介绍如何导入数据字典。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已在 资产加工 页面，请...
测试数据构建
您可以通过DMS提供的测试数据构建功能，批量生成各类随机值、地区名、虚拟IP地址等信息，有效减轻您准备测试数据的负担。准备工作 已在数据库下创建表。建表操作，请参见 创建表。本文示例中数据库为 poc_dev，表为 big_table。操作步骤 本...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
新建数据字典
数据字典管理支持创建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度的值域设置中引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。本文为您介绍如何...
数据备份
备份内容包含当前集群所有库、表、视图、数据字典和元数据结构。备份过程中会进行数据文件读取复制，影响集群的读写效率，请尽量在业务低峰期或运维时间段启动备份任务。已启动的备份任务不能中断。已开通冷热分层存储功能的集群不支持再...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
快速体验
DataWorks的数据分析功能为企业提供了全面的数据分析和服务共享能力，可便捷地连接多种数据源、支持SQL查询，并提供电子表格等多样化的数据分析工具，以满足企业日常的数据提取和分析需求。本文将通过MaxCompute引擎在SQL查询中对公共数据...
示例：开发中心应用
生成代码 BizWorks为全代码开发实现提供了代码生成功能，会根据当前应用关联的限界上下文和数据模型等生成对应的接口定义、接口实现、领域服务类、聚合根、值对象、实体类、数据对象类、数据ORM以及常用的操作，包括增、删、改、查等相关...
交叉透视表
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
01创建数据字典并物理化
数据字典帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量，创建并维护逻辑表中使用的数据字典，方便数据元引用数据字典来规范数据元的值域范围，保证关联了字段标准的表及字段可以自动设置数据质量规则，规范数据质量，本章节...
新建及管理质量规则模板
异常数据SQL：选填，定义异常数据指标的SQL统计逻辑（单个字段），填写后支持使用异常归档功能。异常数据代码示例如下：select${t1.c1} as dataphin_quality_error_data from${t1} where ds=${bizdate} and${t1.c1};说明 SQL支持多表查询及...
新建及管理质量规则模板
异常数据SQL：选填，定义异常数据指标的SQL统计逻辑（单个字段），填写后支持使用异常归档功能。异常数据代码示例如下：select${t1.c1} as dataphin_quality_error_data from${t1} where ds=${bizdate} and${t1.c1};说明 SQL支持多表查询及...
二维码
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
基本概念
数据看板 使用DataV创建出的基于数据生成的看板，即为数据看板。DataV能将数据由单一的数字转化为各种动态的可视化图表，从而实时地将数据展示给用户。如果您想快速创建一个数据看板，请参见 使用模板创建PC端看板。数据源 在使用DataV创建...
查看数据字典详情
通过查看数据字典详情信息，可以查看数据字典的编码、值编码和关联数据元等信息。本文介绍如何查看数据字典详情。前提条件 已存在数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录 数据资源平台控制台。在页面左上...
查看数据字典详情
通过查看数据字典详情信息，可以查看数据字典的编码、值编码和关联数据元等信息。本文介绍如何查看数据字典详情。前提条件 已存在数据字典，具体操作，请参见 新建数据字典 和 导入数据字典。操作步骤 登录企业数据智能平台。在页面左上角...
物模型数据解析使用示例
说明 平台会自动生成数据解析脚本的草稿，可以自行定义脚本中的函数。目前支持三种脚本语言：JavaScript（ECMAScript 5）、Python 2.7和PHP 7.2。脚本中需定义调用以下两个函数，分别用于解析上、下行物模型数据。将Alink JSON格式数据转为...
CLONE TABLE
当您需要将一张表中的数据复制到另一个表中时，可以使用MaxCompute的 clone table 功能，提高数据迁移效率。本文以具体示例为您介绍 clone table 功能的使用。功能介绍 clone table 支持高效地将源表中的数据复制到目标表中。将数据复制到...
配置列映射
配置示例 宽表和索引表的列映射采用JSON文件实现，列映射的配置示例如下，将宽表 testTable 的数据同步至索引表 democollection，宽表的 f:name 这一列映射到索引表的 f_name_s 这一列，宽表的 f:age 这一列映射到索引表的 f_age_i 这一列...
快速入门
本文以开发WordCount MapReduce作业为例，为您介绍如何通过MaxCompute Studio编写MapReduce程序及生成JAR包，并在MaxCompute客户端上运行MapReduce作业。前提条件 请确认您已满足如下条件：已安装并配置MaxCompute客户端。更多安装并配置...
通过外表导入至湖仓版
通过外表导入数据可以最大限度地利用集群资源，实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据，相较于Tunnel方式，Storage API方式可以 提高数据访问和处理的效率。本文介绍如何...
图层配置项说明
数据配置和普通图表组件一致，可配置静态数据源、API数据源和空间构建数据源内容，还可将图层数据接口作为区块数据接口，在可视化应用中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。图 2.数据...
图层配置项说明
数据配置和普通图表组件一致，可配置静态数据源、API数据源和空间构建数据源内容，还可将图层数据接口作为区块数据接口，在可视化应用中配置更丰富的数据源类型或实现与普通图表组件的数据交互，详情请参见 一键生成区块接口。图 2.数据...
- 产品推荐
- 这些文档可能帮助您