项目 限制说明 数据类型 云数据库 Memcache 版仅支持 Key-Value 格式的数据,不支持 array、map、list 等复杂类型的数据。数据可靠性 云数据库 Memcache 版的数据存储在内存中,服务并不保证缓存数据不会丢失,有强一致性要求的数据不适合...
类型分类 数据集成配置类型 数据库数据类型 整数类 LONG BIGINT、INT、TINYINT和SMALLINT 布尔类 BOOLEAN BOOLEAN 日期时间类 DATE DATETIME、TIMESTAMP和DATE 浮点类 DOUBLE FLOAT、DOUBLE和DECIMAL 二进制类 BYTES BINARY 复杂类 STRING ...
【数据标准】模块,主要用来对数据标准进行相关操作。添加数据标准 添加数据标准的方式有两种,第一种是手动在平台中单个添加标准,第二种是通过Excel的形式批量将数据标准维护到平台中去。进入【数据标准】模块,点击‘“创建数据标准”...
添加字段:支持添加 数据字段 和 分区字段,您可以根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 信息。说明 MaxCompute引擎下支持创建不超过6级分区字段。ArgoDB、...
您可以选中需要分析的数据,单击菜单栏中的 数据探查,即可在电子表格顶部,以图形和富文本的形式,为您展示每列数据的类型、值分布的概览情况。数据探查简单模式的说明如下:针对STRING和DATE类型:以富文本的形式为您展示Top2的值及其占...
数据查询提供不同数据资源的预览,可为开发人员、数据应用人员和数据分析人员提供全面直观的数据呈现。本文介绍如何预览物理表数据。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在...
数据查询提供不同数据资源的预览,可为开发人员、数据应用人员和数据分析人员提供全面直观的数据呈现。本文介绍如何预览物理表数据。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面...
添加字段:支持添加 数据字段 和 分区字段,您可根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 信息。说明 MaxCompute引擎下支持创建不超过6级分区字段。ArgoDB、...
在调用部分接口配置或查询迁移或同步、订阅任务时,您需要配置或查询预留参数Reserve(数据类型为字符串String,传入格式为JSON)来完善或查看源或目标实例的配置信息(比如目标Kafka集群的数据存储格式、云企业网CEN的实例ID)。...
数据值 支持的数据类型,请参见 基础数据类型。单击 确定,添加一行数据。修改已有数据 支持修改 SQL表 和 HBase表 中已有的数据。单击目标行 操作 列中的 编辑。在 编辑表数据 对话框中,修改时间戳和数据值。单击 确定,保存修改后的数据...
添加字段:支持添加 数据字段 和 分区字段,您可根据业务情况编辑字段的 名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 信息。说明 MaxCompute引擎下支持创建不超过6级的分区字段。③ 字段...
消费订阅数据 根据消费客户端和数据库的类型,选择订阅数据的消费方式:使用SDK示例代码消费订阅数据 使用SDK示例代码消费PolarDB-X 1.0订阅数据 使用flink-dts-connector消费订阅数据 使用Kafka客户端消费订阅数据 结束数据订阅 释放实例...
对于异构数据库之间的结构迁移,DTS会将源库的结构定义转换为目标库支持的结构定义,例如将Oracle数据库中的NUMBER数据类型转换为MySQL数据库中的DECIMAL数据类型。全量数据迁移 在全量数据迁移阶段,DTS会将源数据库的存量数据全部迁移到...
警告 此场景属于异构数据库间的数据迁移,DTS在执行结构迁移时数据类型无法完全对应,请谨慎评估数据类型的映射关系对业务的影响,详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS将待迁移对象的存量数据全部迁移到目标库中...
数据类型:为数据接口选择一个数据类型,可选 对象、数组、任意值 和 无。删除数据接口 单击数据接口右侧的 图标,即可删除当前数据接口。新增数据接口 单击 数据接口设置 页签内的 新增数据接口,即可在下方数据接口配置区域,新增一个...
数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入目标端,实现各类业务场景,例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入目标端,实现各类业务场景,例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。数据订阅方案 说明 是否...
数据类型:为数据接口选择一个数据类型,可选 对象、数组、任意值 和 无。删除数据接口 单击数据接口右侧的 图标,即可删除当前数据接口。新增数据接口 单击 数据接口设置 页签内的 新增数据接口,即可在下方数据接口配置区域,新增一个...
EMR集群类型 元数据存储类型 数据存储类型:OSS 数据存储类型:OSS-HDFS 数据存储类型:HDFS 新版数据湖集群(DataLake)数据湖构建(DLF)RDS实例 MySQL 自定义集群(Custom)数据湖构建(DLF)RDS实例 MySQL 其他集群-数据保护伞为什么有...
数据类型:x轴标签数据的类型,可选。参数 说明 数值型 支持整数、浮点数等数值类型的数据。类目型 支持字符、字符串等类目类型的数据。时间型 时间类型的数据,需要配置数据格式。两端留白:x轴两端留空白的距离,取值范围为0~1。范围:x...
开启打标后,数据分类分级结果将直接添加到MaxCompute表对应列的Label(敏感等级标签)上,并在DataWorks数据地图表详情页面的字段信息中展示列的安全等级。详情请参见 查看表详情。说明 开启打标后,如果在数据地图中仍然看不到列级别安全...
DSC 在您完成数据源识别授权后,从您存储在OSS的海量数据中快速发现和定位敏感数据,对敏感数据分类分级并统一展示,同时追踪敏感数据的使用情况,并根据预先定义的安全策略,对数据进行保护和审计,以便您随时了解OSS数据资产的安全状态。...
分类玫瑰图支持图表外部的标签展示,支持分类型展示和多系列数据配置。样式面板 搜索配置:单击 样式 面板右上角的搜索配置项图标,可在搜索配置面板中输入您需要搜索的配置项名称,快速定位到该配置项,系统支持模糊匹配。详情请参见 搜索...
设置后,您在引用数据标准时,数据类型、字段名称会沿用定义数据标准时定义的数据类型和字段名称。在左侧的数据模型下,右键单击 表>customer,选择 跳到当前主题。在右侧的数据视图页面,右键单击 customer 主题,选择 编辑字段。在 字段...
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时,本文档为您提供了以RDS MySQL为参考的示例,以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群,...
现有解决方案中,通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储,而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高,市场需要新一代云原生且具备多模检索能力的存储系统。某著名IT咨询...
数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
源端 目标端 OB_MySQL(OceanBase 集群实例)AnalyticDB MySQL 数据类型映射 OceanBase 数据库 MySQL 租户数据类型 AnalyticDB MySQL 版 V3.0 数据类型 BIGINT BIGINT BINARY VARBINARY BIT VARBINARY BLOB VARBINARY CHAR VARCHAR DATE ...
配置敏感数据分类分级 配置敏感数据识别规则 根据数据的来源、用途,定义敏感字段类型配置敏感数据规则,识别当前工作空间中的敏感数据。命中规则内容,则认为是敏感数据。支持如下识别方式:数据内容识别:可通过内置规则、自定义模型、...
DataV数据集支持多种数据源的接入,如数据库、excel表格文件等,通过对数据的结构化存储和元数据的汇集整理,提供高效实用的数据建模能力,可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
警告 此场景属于异构数据库间的数据迁移,DTS在执行结构迁移时数据类型无法完全对应,请谨慎评估数据类型的映射关系对业务的影响,详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS会将自建Oracle数据库迁移对象的存量数据,...
专题数据:每个栅格像元的值可以是一个测量值或分类值,如污染物浓度、降雨量、土地的权属类型或植被类型等。影像数据:又称遥感影像或遥感图像(Remote Sensing Image),是通过地面遥感、航空遥感或航天遥感平台拍摄的,记录各种地物电磁...
警告 此场景属于异构数据库间的数据迁移,DTS在执行结构迁移时数据类型无法完全对应,请谨慎评估数据类型的映射关系对业务的影响,详情请参见 异构数据库间的数据类型映射关系。全量数据迁移 DTS会将自建Oracle数据库迁移对象的存量数据,...
数据类型映射关系 由于MySQL和 云原生数据仓库AnalyticDB MySQL 的数据类型并不是一一对应的,所以DTS在进行结构初始化时,会根据数据类型定义进行类型映射,详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步作业,...
类型分类 DM数据类型 整数类 INT、TINYINT、SMALLINT和BIGINT 浮点类 REAL、FLOAT、DOUBLE、NUMBER和DECIMAL 字符串类 CHAR、VARCHAR、LONGVARCHAR和TEXT 日期时间类 DATE、DATETIME、TIMESTAMP和TIME 布尔型 BIT 二进制类 BINARY、...
说明 如为增量同步任务,DTS要求源数据库的数据日志保存24小时以上,如为全量同步和增量同步任务,DTS要求源数据库的数据日志至少保留7天以上(您可在全量同步完成后将数据日志保存时间设置为24小时以上),否则DTS可能因无法获取数据日志...
数据类型映射关系 由于MySQL和 云原生数据仓库AnalyticDB MySQL 的数据类型并不是一一对应的,所以DTS在进行结构初始化时,会根据数据类型定义进行类型映射,详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步作业,...
详情请参见:配置敏感数据分类分级 分级:当前租户默认分类分级模板中的分级信息。敏感状态:包括敏感字段和非敏感字段。非敏感字段为您过滤已手动修改为非敏感字段的数据。说明 目前支持对ODPS、EMR、CDH、HOLO引擎中的敏感字段识别结果...
OceanBase 数据库 MySQL 租户和 DataHub 之间的数据类型映射 OceanBase 数据库 MySQL 租户 默认映射 DataHub 类型 BIT STRING(Base64 编码)CHAR STRING BINARY STRING(Base64 编码)VARBINARY STRING(Base64 编码)INT BIGINT TINYINT ...
本章节介绍如何通过 云数据库 SelectDB 版 提供的联邦查询技术,对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库 SelectDB 版 提供多源数据目录功能(Multi-Catalog或Catalog),...