设置资产数据源
配置数据过滤器 通过数据过滤器，您可以实现数据结构转换、筛选和一些简单的计算功能。在 设置数据源 页面中，选中 数据过滤器，启用数据过滤器功能。单击右侧的+，添加一个数据过滤器。在过滤器代码编辑框中，输入当前资产数据的过滤代码...
数据同步
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
新建同步节点并运行后上线
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
新建同步节点并运行后上线
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
产品架构
结构迁移：在迁移数据之前，DTS需要在目标数据库中重新创建数据结构。对于异构数据库之间的迁移，DTS会解析源数据库的DDL代码，将代码转换成目标数据库的语法，然后在目标数据库中重新创建结构对象。全量数据迁移：在全量数据迁移阶段，DTS...
Sqoop概述
将HDFS数据导入MySQL 创建好对应HDFS中的数据结构的MySQL表后，在集群的Master节点上执行如下命令。sqoop export-connect<dburi>/<dbname>-username<username>-password<password>-table<tablename>-export-dir参数 描述 dburi 数据库的...
云数据库Redis开发运维规范
由于编程语言的字节码随着版本可能会变化，如果存储裸对象（例如Java Object、C#对象）会导致整个软件栈升级困难，推荐使用串行化方法将Value变成可读的结构。SDK使用规范 重要程度 规范 说明★推荐使用JedisPool或者JedisCluster连接实例...
名词解释
INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的检索速度，提高查询性能。索引可以看作是表中一个或多个列的快速访问入口，可以根据某个特定的列值快速定位到想要访问的数据。宽表引擎支持多种索引，例如二级索引、...
数据建模：智能数据建模
适用场景 DataWorks智能建模可助力企业构建自身建模能力，挖掘企业的数据资产价值，例如：海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个...
我是安全管理员
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成与开发（DTS）数仓开发 数仓开发以数据库为主要计算引擎，融合数据库生态中...
数据类型
浮点类型 Float32 单精度浮点数 同C语言Float类型，单精度浮点数在机内占4个字节，用32位二进制描述。Float64 双精度浮点数 同C语言Double类型，双精度浮点数在机内占8个字节，用64位二进制描述。Decimal类型 Decimal Decimal 有符号的定点...
飞线层
数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器，可在 设置数据源 面板配置数据过滤器脚本，详情请参见 过滤器使用说明。数据响应结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 ...
我是DBA
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL、不规范SQL等，降低SQL注入风险。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成...
我是管理员
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL、不规范SQL等，降低SQL注入风险。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成...
生成测试数据
下载模拟数据 在 任务中心 的模拟数据列表中，单击操作列中的 下载 按钮下载创建的模拟数据到本地磁盘，用户可以从本地磁盘中查看导出的数据结构文件。相关文档 SQL 编辑和执行 PL 编译和调试口 结果编辑与导出 执行分析 数据库对象 分区...
层级生成器功能介绍
导出层级（开放格式）单击层级树面板下方的 导出层级（开放格式）按键，您可以导出层级数据（level.json）文件和（层级映射.json）的文件，文件内的地理字段未经压缩，具体地理字段说明请参见 下钻数据结构定义。层级树节点 在层级树面板中...
ETL工作流快速体验
GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基于GitHub Archive公开数据集，通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据，在DataStudio 数据开发 模块通过函数计算...
结构设计
支持多人协同在Web页面变更数据结构操作。注意事项 结构设计暂不支持在工单创建过程中，删除创建工单前就已经存在的表，创建工单后新建的表可以删除。执行变更到目标数据库后，元数据字典信息会自动同步。说明 您可在SQLConsole窗口输入 ...
X-Engine简介
两个Metadata Snapshot结构实际上共用了大量的数据结构，这被称为数据复用技术（Data Reuse），而Extent大小正是影响数据复用率的关键，Extent作为一个完整的被复用的物理结构，需要尽可能的小，这样与其他Extent数据交叉点会变少，但又不...
Btree-GIST
这意味着开发者不仅能够为常规数据类型比如整数和字符串创建索引，还可以为地理空间数据、全文搜索、数组和其他更复杂的数据结构创建索引。Btree-GIST便是基于此特性扩展而来。支持多种查询：GIST索引可以支持不同的查询操作，包括等于、不...
表结构发布流程化
保障数据结构的规范性 安全规则 的研发规范包含新建表、修改表字段、修改表索引等多方面的近40条规范，方便研发同学自助设计满足企业研发规范的表结构，可避免因不满足规范的结构发布上线而导致的生产故障。同时，该功能可节省运维人员因...
上传数据
说明 GeoJSON数据文件大小不可超过100MB，且不支持多层嵌套数据结构。OSS上传 在 方法二：OSS上传 下方的输入框中，输入GeoJSON数据文件的OSS链接地址，并单击对话框右下方 上传 即可上传一个GeoJSON数据文件。说明 大型文件建议选择OSS...
上传数据
说明 GeoJSON数据文件大小不可超过100MB，且不支持多层嵌套数据结构。OSS上传 在 方法二：OSS上传 下方的输入框中，输入GeoJSON数据文件的OSS链接地址，并单击对话框右下方 上传 即可上传一个GeoJSON数据文件。说明 大型文件建议选择OSS...
数据源配置常见问题
保留CSV的首行作为表头，并且每一个列的列名，需要和相应图表中要求的数据结构的字段名保持一致。目前，数据库通过阿里云经典网络内网连接支持哪些机房？目前支持 华东1、华东2、华北2 三个机房。DataV能否连接在ECS或其他机器上部署的数据...
数据源配置常见问题
保留CSV的首行作为表头，并且每一个列的列名，需要和相应图表中要求的数据结构的字段名保持一致。目前，数据库通过阿里云经典网络内网连接支持哪些机房？目前支持 华东1、华东2、华北2 三个机房。DataV能否连接在ECS或其他机器上部署的数据...
功能特性
什么是数据校验 订正 元数据订正 当校验出数据结构不一致时，可以根据校验结果进行订正。结构订正 查看数据校验详情 全量数据订正 当校验出全量数据不一致时，可以根据校验结果并下载订正SQL进行订正。查看数据校验详情 增量数据订正 当...
概述
PolarDB-X 全面拥抱向量化，针对列存的TableScan读取，采用列式chunk的数据结构，后续中间的算子计算也全面继承chunk的内存列式结构，基于全链路的向量化提升查询性能。同时针对行存的TableScan也会动态转化为列式chunk，基于统一的数据...
区域热力层
数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器，可在 设置数据源 面板配置数据过滤器脚本，详情请参见 过滤器使用说明。数据响应结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 ...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
PolarDB PostgreSQL版间的迁移
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版 集群间的迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版 数据库集群，详情请参见 创建PolarDB PostgreSQL版数据库集群。已将源和目标 PolarDB ...
从PolarDB MySQL版同步至PolarDB-X
准备工作 由于 PolarDB MySQL版 同步至 PolarDB-X 暂不支持 结构初始化，所以您需要根据源 PolarDB MySQL版 集群中待同步对象的数据结构，在目标实例中创建相应的数据库和数据表，详情请参见 创建数据库 和 SQL基本操作。说明 结构初始化：...
概述
数据建模的必要性 海量数据的标准化管理 企业业务越庞大数据结构就越复杂，企业数据量会随着企业业务的快速发展而迅速增长，如何结构化有序地管理和存储数据是每个企业都将面临的一个挑战。业务数据互联互通，打破信息壁垒 公司内部各业务...
从RDS MySQL同步至PolarDB-X
准备工作 由于RDS MySQL同步至 PolarDB-X 暂不支持 结构初始化，所以您需要根据源RDS MySQL实例中待同步对象的数据结构，在目标实例中创建相应的数据库和数据表，详情请参见 创建数据库 和 SQL基本操作。说明 结构初始化：将源库中待同步...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的迁移。背景信息 PolarDB PostgreSQL版（兼容Oracle）作为一款企业级关系型数据库管理系统，具有广泛的应用和强大的社区支持。每个...
从Amazon RDS for PostgreSQL增量迁移至阿里云
说明 不支持迁移使用C语言编写的FUNCTION。全量数据迁移 将迁移对象的存量数据全部迁移到阿里云RDS PostgreSQL数据库中。增量数据迁移 DTS在全量数据迁移的基础上，将迁移对象的增量更新迁移到阿里云RDS PostgreSQL数据库中。通过增量数据...
2022年
2022-11-01 全部地域 计算抵扣包和存储抵扣包 2022-10 功能名称 功能描述 发布时间 发布地域 相关文档 支持数据结构由 project.table 升级为 project.schema.table，方便与三层结构数据的数据源对接。MaxCompute项目（Project）作为基本...
从Amazon Aurora PostgreSQL迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon Aurora PostgreSQL的数据迁移至阿里云（如RDS PostgreSQL和 PolarDB PostgreSQL版）。本文以Amazon Aurora PostgreSQL迁移至 RDS PostgreSQL 为例，为您介绍操作...
持久内存型性能白皮书
command_group 测试的数据结构，本案例中，依次测试下述数据结构：String Hash List Set Zset fieldcount 字段或元素个数，本案例中，String数据结构配置为1，其他数据结构配置为10。fieldlength 值长度，根据测试需求配置。threads YCSB...
持久内存型性能白皮书
command_group 测试的数据结构，本案例中，依次测试下述数据结构：String Hash List Set Zset fieldcount 字段或元素个数，本案例中，String数据结构配置为1，其他数据结构配置为10。fieldlength 值长度，根据测试需求配置。threads YCSB...
- 产品推荐
- 这些文档可能帮助您