功能简介
依托企业数据智能平台，您可以设计高质量的标准化数据模型，减少重复开发工作，全面了解数据质量、数据使用情况和系统运行情况，并从业务视角更直观地使用并探索数据，更高效地从数据中获取业务价值。目前企业数据智能平台提供以下功能：...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级...自主挖掘数据的业务价值：通过画像分析、业务模型编辑器，从业务视角更直观地探索数据，更高效的从数据中获取业务价值，并不断丰富客户的标签等数据资产。
什么是数据资源平台
依托数据资源平台，可设计高质量的标准化数据模型，减少重复开发工作，用户可全面了解数据质量、数据使用情况和系统运行情况，并从业务视角更直观地使用并探索数据，更高效地从数据中获取业务价值。目前数据资源平台提供以下功能：协同 ...
数据脱敏
提取水印 如果对分发的数据添加水印，当信息泄露时，您可以从泄露的数据中提取水印标识。通过读取水印标识，可以追溯数据流转过程，精准定位泄露单位及责任人，实现数据溯源追责。对分发的数据添加水印，不会影响分发数据的正常使用。仅...
QlikView
本文介绍如何通过QlikView连接 AnalyticDB MySQL 集群并通过QlikView构建BI系统。前提条件 安装ODBC MySQL Driver，...使用QlikView 在QlikView中获取数据库数据后，您可以利用QlikView进行更多数据操作。如何使用QlikView，请参见 QlikView。
进度条
重要 百分值为（value/sum或总值），value的值从 数据 面板中获取。数据面板中的sum值内容优先级高于配置栏内的 总值。空值更新：打开开关，当数据为空或者异常时组件进度显示为0；关闭开关，数据为空或者异常时组件进度不更新进度。数据源...
进度条
重要 百分值为（value/sum或总值），value 的值从 数据 面板中获取。数据面板中的 sum 值内容优先级高于配置栏内的 总值。空值更新：打开开关，当数据为空或者异常时组件进度显示为0；关闭开关，数据为空或者异常时组件进度不更新进度。...
通用标题
标题名：标题的名称，支持从数据面板中获取内容。说明 标题名内容获取优先级是：数据>样式。只有清空 数据 面板中 value 字段内容后，才会显示 配置 面板中 标题名 的内容。文本样式 参数 说明 字体 标题文本的字体系列，默认为 微软雅黑。...
通用标题
标题名：标题的名称，支持从数据面板中获取内容。说明 标题名内容获取优先级是：数据源>样式。只有清空 数据源 面板中 value 字段内容后，才会显示 样式 面板中 标题名 的内容。文本样式 参数 说明 字体 标题文本的字体系列，默认为 微软雅...
迭代器功能说明
组件从迭代器中获取数据操作步骤如下：选中迭代器中的某个组件，打开右侧组件 数据源配置 面板。在 数据源配置 面板中，单击 数据源类型 下拉框，选择 从迭代器中获取 数据源选项。重命名迭代器 在区块编辑器图层栏，您可以双击迭代器，重...
迭代器功能说明
组件从迭代器中获取数据操作步骤如下：选中迭代器中的某个组件，打开右侧组件 数据源配置 面板。在 数据源配置 面板中，单击 数据源类型 下拉框，选择 从迭代器中获取 数据源选项。重命名迭代器 在区块编辑器图层栏，您可以双击迭代器，重...
功能简介
为了将业务人员从重复、无效的分析工作释放出来，并通过智能化的能力帮助业务管理者、运营、业务分析师等人员高效的从数据中发现规律和异常，实现知识的提取，需要提供智能、全面、精准的数据诊断和分析能力，自动洞察数据中的有效知识，...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
基本散点图
最大值 y轴的最大值，支持自定义输入，也支持系统选择 数据最大值 获取数据中的最大值。说明 y轴打开自定义数据范围后可能会导致数据点显示不全，建议关闭自定义范围。显示格式：y轴标签数值显示格式的样式，可选 默认、11（整数）、11.1...
BLOB数据类型（邀测中）
应用从InputStream对象中获取数据，进行流式处理 blob.free();使用完成后需要释放 函数说明 目前BLOB数据类型支持以下函数，可用于SQL操作。blob_sizeof：获取一行数据中指定BLOB列的大小。输入值类型为BLOB，返回值类型为INTEGER。示例...
使用Kafka客户端消费订阅数据
运行流程说明 步骤 相关目录或文件 1、使用原生的Kafka consumer从数据订阅通道中获取增量数据。subscribe_example-master/javaimpl/src/main/java/recordgenerator/2、将获取的增量数据镜像执行反序列化，并从中获取 前镜像、后镜像 和...
概述
Sink 从Channel中获取Event，并将以事务的形式Commit到外部存储中。一旦事务Commit成功，该Event会从Channel中移除。常见Sink如下：Logger Sink：用于测试。Avro Sink：转换成Avro Event，主要用于连接多个Flume Agent。HDFS Sink：写入...
概述
数据解密 在数据解密过程中，基础版Spark全密态计算引擎会从应用配置中获取用户主密钥（MEK），再从文件的元数据中提取数据密钥（DEK）。数据密钥（DEK）会使用用户主密钥（MEK）解密，若用户主密钥（MEK）由应用程序管理，则在本地解密。...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
dlf:GetRoles 获取数据权限中角色信息。dlf:CheckPermissions 数据权限校验。重要 请谨慎编辑和删除默认角色AliyunEmrEcsDefaultRole，否则会造成集群创建失败或作业运行失败。支持MetaService的数据源 目前在E-MapReduce上支持MetaService...
缓冲区管理
访问数据页时，会从该映射关系中获取数据页需要回放的所有LSN，依次回放对应的WAL日志，最终生成需要使用的数据页。数据页上的修改越多，其对应的LSN也越多，回放所需耗时也越长。为了尽量减少数据页需要回放的LSN数量，PolarDB 引入了一致...
将MySQL数据迁移到Redis
这种从源端数据库提取数据，转换格式后传入异构数据库中的方式也适用于其它异构数据库之间的数据迁移。前提条件 已创建作为源端的RDS MySQL实例且其中已存在可供迁移的表数据。已创建作为目的端的云数据库Redis版实例。已创建Linux系统的...
获取物理表
本文介绍如何在数据同步中获取物理表。前提条件 已准备好相应的数据源，具体操作，请参见 新建数据源。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。...
如何使用DataV Proxy
单击 获取数据列表，并在 获取数据列表 中选择一个数据源。如果列表中展示DataV Proxy应用中已经添加的数据源ID，说明连接成功。重要 根据浏览器的安全策略，HTTPS页面中不允许发起任何HTTP请求，而DataV Proxy是通过浏览器端访问的，所以...
获取物理表
本文介绍如何在数据同步中获取物理表。前提条件 已准备好相应的数据源，具体操作，请参见 新建数据源。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在...
数据字典
SELECT name,type,key,attribute.names,attribute.types,bytes_allocated,element_count,source FROM system.dictionaries 查询字典数据 使用dictGet语句结合函数获取数据字典中的数据。dictGet('dict_name','attr_name',id_expr)或 ...
查询机制
SELECT 使用SELECT查询数据时，需要从磁盘中读取一个数据块到内存中，然后通过内存中数据块获取返回结果。INSERT 当您使用INSERT插入一条数据时，具体过程如下：从数据文件中读取一个数据块到内存中，并将这行数据写入这个数据块，系统生成...
HikariCP 连接池连接 OceanBase 数据库示例程序
它在从连接池中获取连接之前执行，以验证与数据库的连接是否仍然有效。minimumIdle N/A 用于控制连接池中保持的最小空闲连接数量。如果空闲连接数低于这个值，并且连接池中的总连接数少于 maximumPoolSize，HikariCP 会尽力快速且高效地...
实时消费Kafka数据
当您需要将Kafka数据写入 云原生数据仓库AnalyticDB PostgreSQL版，且不希望使用其他数据集成工具时，可以通过实时数据消费功能直接消费Kafka数据，减少实时处理组件依赖，提升写入吞吐。Apache Kafka是一个容错、低延迟、分布式的发布-...
PyMySQL 连接 OceanBase 数据库示例程序
示例如下：obclient-hxxx.xxx.xxx.xxx-P3306-utest_user001-p*-Dtest 步骤四：修改 config.py 文件中的数据库连接信息 根据 步骤三：获取 OceanBase 数据库连接信息 中的信息修改项目文件 python-pymysql/config.py 中的数据库连接信息。...
通过数据同步功能同步Kafka至湖仓版（推荐）
样例数据 自动从Kafka Topic中获取的最新数据作为样例数据。说明 Kafka Topic中的数据需为JSON格式，若存在其他格式的数据，数据同步时会报错。JSON解析层级 设置JSON的嵌套解析层数，取值说明：0：不做解析。1（默认值）：解析一层。2：...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
Kafka 集群会保存 TiCDC 工具转换的 TiDB 数据库的增量日志信息，以便数据传输在执行增量数据同步时，从 Kafka 集群中获取相应数据并实时迁移数据至 OceanBase 数据库 MySQL 租户。如果您在新建 TiDB 数据源时，未绑定 Kafka 数据源，将...
专业术语
query（查询）从TSDB For InfluxDB®中获取数据的操作。可查看文档 数据探索概览、Schema探索 和 数据库管理 获得更多关于query的介绍。retention policy（保留策略，简称RP）TSDB For InfluxDB®数据结构中的一部分，描述了TSDB For ...
通过数据同步功能同步SLS至湖仓版（推荐）
最近位点（end_cursor）：自动从SLS数据中最近的时间点获取数据。自定义点位：您可以选择任意一个时间点，系统则会从SLS中第一条大于等于该时间点的数据开始消费。Job型资源组 指定任务运行的Job型资源组。增量同步所需ACU数 指定任务运行...
概述
当全量数据迁移完成后，数据传输会启动增量数据回放模块，从增量数据拉取模块中获取增量数据。增量数据经过过滤、映射和转换后，再同步至目标实例中。全量校验 在全量数据迁移完成，增量数据迁移至目标端并与源端基本追平后，数据传输会...
查看数据迁移项目的详情
当全量数据迁移完成后，数据传输会启动增量数据回放模块，从增量数据拉取模块中获取增量数据。增量数据经过过滤、映射和转换后，再同步至目标实例中。如果您在源端执行 DDL 后，造成 JDBCWriter 异常，从而造成数据迁移项目运行失败，页面...
API概览
UpdateCollectionDataMetadata 更新向量数据中的Metadata值 更新向量数据中的Metadata数据。UpsertCollectionData 上传向量数据 上传向量数据到指定的向量集中。QueryCollectionData 召回向量数据 召回向量数据。DeleteCollectionData 删除...
配置资源组与网络连通
获取数据库需要添加的白名单详情请参见：添加白名单。步骤二：添加白名单 无论上述哪种场景，如果数据源存在白名单访问控制，您都需要将资源组绑定的交换机网段或独享资源组本身EIP添加至数据源白名单中。通过内网同步，请添加独享资源组...
时空引擎版本发布记录
修复 ST_AsEWKB 函数无法转换从数据表中构建出的轨迹问题。修复 ST_BuildPyramid 函数，解决超大数据构建矢量金字塔时的内存占用问题。4.8 新特性 增强 ST_Union 函数，支持按内存使用量分批次执行，避免大数据量造成OOM。新增 ST_SetValue...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版（兼容Oracle）时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级...
时空数据库版本发布记录
本文介绍PolarDB PostgreSQL版时空数据库（Ganos）的版本更新说明。6.X 6.3 类别 说明 新增特性 Trajectory SQL 新增 ST_InsertAttr 函数，支持为轨迹增加新的属性。GeomGrid SQL 新增 ST_Degeneralize 函数，支持将低层级网格分解成高层级...
- 产品推荐
- 这些文档可能帮助您