权限管理与规范化数据开发
在本案例中，您需要准备至少5个RAM用户，并对其赋予如下几种角色：授权步骤请参考 用户授权与管理，其中：数据团队主管被赋予“空间管理员”权限。数据开发人员被赋予“开发角色”权限。数据建模人员被赋予“模型设计师角色”权限。运维...
基本概念
栅格数据（Raster Data）是将地理空间分割成有规律的网格，每一个网格称为一个单元（像元或像素），并在各单元上赋予相应的属性值来表示实体的一种数据形式。栅格数据通常有两种类型的栅格数据：专题数据和影像数据。专题数据：每个栅格像...
FineReport
连接AnalyticDB 打开FineReport，在菜单栏中单击 服务器>定义数据连接。在 定义数据连接 页面进行参数配置。参数 说明 数据库 选择 MySQL。驱动器 选择 MySQL jdbc驱动。URL AnalyticDB MySQL版 集群的连接地址，格式为：jdbc:mysql:/...
基本概念
时空几何 HBase Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象。矢量数据，如点、线、面状要素。在矢量数据基础上结合时间属性，组成的时空数据或时空轨迹数据。针对时空几何对象的相关操作，如时空关系的判断。时空索引 ...
数据导入Serverless实例
大量数据从HBase集群导入Serverless集群 由于Serverless实例的写入受到购买CU数的限制，如果大量的数据直接通过API写入Serverless实例可能会花费过多时间和消耗过多CU（根据购买CU量的多少，几十GB，几百GB，或者上TB的数据可以定义为大量...
Echarts 日历图
支持以下几种输入：具体像素值，例如 20。相对于容器高宽的百分比，例如 20%。left，center 或 right，组件会根据相应的位置自动对齐。右侧：图例与组件右侧边界的距离，默认为 auto。支持以下几种输入：具体像素值，例如 20。相对于容器高...
基本概念
Lindorm Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象 矢量数据，如点、线、面状要素 在矢量数据基础上结合时间属性，组成的时空数据（或时空轨迹数据）针对时空几何对象的相关操作，如时空关系判断 时空索引 Lindorm Ganos...
基本概念
时空几何 DLA Ganos中所称的时空几何，其范畴包含以下几方面：时空几何对象。矢量数据，如点、线、面状要素。在矢量数据基础上结合时间属性，组成的时空数据（或时空轨迹数据）。针对时空几何对象的相关操作，如时空关系判断。时空索引 DLA...
Echarts 日历图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
HttpFile数据源
否 utf-8 nullFormat 文本文件中无法使用标准字符串定义null（空指针），数据同步提供nullFormat定义哪些字符串可以表示为null。例如：nullFormat:"null"：表示“可见字符”。如果源头数据是null，则数据同步视作null字段。nullFormat:"\u...
规范定义最佳实践
统计粒度 统计分析的对象或视角，定义数据需要汇总的程度，可以理解为聚合运算时的分组条件（类似于SQL中Group By的对象）。粒度是维度或维度的某些属性的组合。例如，地域（维度）和客户性别（维度属性）组合成统计粒度。在定义粒度时，您...
规范定义最佳实践
统计粒度 统计分析的对象或视角，定义数据需要汇总的程度，可以理解为聚合运算时的分组条件（类似于SQL中Group By的对象）。粒度是维度或维度的某些属性的组合。例如，地域（维度）和客户性别（维度属性）组合成统计粒度。在定义粒度时，您...
X-Engine简介
为什么设计一个新的存储引擎 X-Engine的诞生是为了应对阿里内部业务的挑战，早在2010年，阿里内部就大规模部署了MySQL数据库，但是业务量的逐年爆炸式增长，数据库面临着极大的挑战：极高的并发事务处理能力（尤其是双十一的流量突发式暴增...
层级生成器功能介绍
绑定地理信息：当节点右侧显示小红点和绑定数据符号，表示当前节点内没有地理信息，您可以单击 图标，在弹窗的 绑定数据 对话框中，您可以选择 行政区数据集 或 自定义数据 两种类型的地理数据。行政区数据集：选择该类型，您可以在下方...
常见问题
StarRocks的数据模型主要有四种，分别为duplicate key、uniq key、agg模型和primary key模型，他们对于count的实现有比较大的区别。具体区别如下：duplicate key：该模型不需要做merge操作，所以count比较快。uniq key和agg模型：对count...
术语
本文介绍 云原生数据库PolarDB 使用过程中遇到的术语。名词 描述 地域（Region）数据中心所在的地理位置。...说明 购买 PolarDB 后，系统会自动创建数据库正常运行所需的相关文件并占用一定的存储空间，包括上述几种文件。
从自建MySQL迁移至PolarDB-X
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
Proxool 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 Proxool 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 proxool-mysql-client 示例工程 前提条件 您已安装 OceanBase ...
任务运行诊断
通常，任务执行失败存在以下几种情况：任务代码执行失败（数据同步逻辑或数据加工逻辑执行失败）。任务中产出表配置的数据质量规则校验失败（即任务关联的数据质量规则校验失败）。任务被冻结。检查SQL任务代码执行情况 SQL任务可直接在 ...
typeconv-overview
在 SQL 解析器里，有四种基本的 SQL 结构要求独立的类型转换规则：函数调用 本数据库类型系统的大部分建立在一套丰富的函数上。函数可以有一个或多个参数。由于本数据库允许函数重载，所以函数名自身并不唯一地标识将要被调用的函数，解析...
CREATE FUNCTION.AGGREGATE USING type_name
简介 PolarDB 数据库提供了几种预定义的聚合函数。例如，MAX、MIN和SUM用于对一组行执行操作。这些预定义的聚合函数只能用于标量数据，不能用于复杂的数据类型。例如使用对象类型、不透明类型和LOB存储的多媒体数据。CREATE FUNCTION....
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
RDS术语
M MaxCompute 大数据计算服务MaxCompute（原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，提供了完善的数据导入方案以及多种经典的分布式计算模型，能够快速地解决海量数据计算问题。通过数据集成服务，可将RDS数据导入...
术语
说明 购买 PolarDB 后，系统会自动创建数据库正常运行所需的相关文件并占用一定的存储空间，包括上述几种文件。集群版（Cluster Edition）集群版 是 PolarDB MySQL版 的推荐产品系列，使用了计算与存储分离的架构，计算层的数据库节点可以...
CREATE TABLE
设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 建表前，您可以通过下图中的示例，了解关于表的几个重要概念，包括分片、分区、聚集索引。...
OSS数据源
OSS数据源为您提供读取和写入OSS的双向通道，本文为您介绍DataWorks的OSS数据同步的能力支持情况。支持的字段类型与使用限制 离线读 OSS Reader实现了从OSS读取数据并转为数据集成协议的功能，OSS本身是无结构化数据存储。对于数据集成而言...
从自建Db2迁移至RDS MySQL
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
层级生成器功能介绍
绑定地理信息：当节点右侧显示小红点和绑定数据符号，表示当前节点内没有地理信息，您可以单击 图标，在弹窗的 绑定数据 对话框中，您可以选择 行政区数据集 或 自定义数据 两种类型的地理数据。行政区数据集：选择该类型，您可以在下方...
从自建Db2迁移至RDS MySQL
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
从自建TiDB增量迁移至RDS MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
约束
直观上，我们有几种选项：不允许删除一个被引用的产品。同时也删除引用产品的订单。其他。为了说明这些，让我们在上面的多对多关系例子中实现下面的策略：当某人希望移除一个仍然被一个订单引用（通过 order_items）的产品时，我们组织它。...
通过外表导入至数仓版
您可以根据业务需要选择如下几种方式导入数据（分区表导入数据语法与普通表一致，如下示例中以普通表为例）：（推荐）方式一：使用 INSERT OVERWRITE 导入数据。数据批量导入，性能好。导入成功后数据可见，导入失败数据会回滚，示例如下。...
从自建MySQL迁移至RDS实例
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
通过RAM角色授权模式配置数据源
本文以OSS数据源为例，为您介绍如何通过RAM角色授权模式配置数据源，提高云上数据的安全性。前提条件 如果您需使用RAM用户登录并完成本文操作流程，请先为RAM用户授予 AliyunDataWorksFullAccess 和 AliyunRAMFullAccess 权限策略，详情请...
Tablestore数据源
表格存储Tablestore是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，Tablestore数据源为您提供读取和写入Tablestore双向通道的功能，本文为您介绍DataWorks的Tablestore数据同步的能力支持情况。使用限制 Tablestore Reader和Writer...
MongoDB 5.0新特性概览
MongoDB的时间序列集合以高度优化和压缩的格式自动存储时间序列数据，减少了存储大小和I/O，以实现更好的性能和更大的规模。同时也缩短了开发周期，使您能够快速建立一个针对时间序列应用的性能和分析需求而调优的模型。创建时间序列数据...
表结构设计
FORMAT(column_name,'%Y%m'))将 column_name 的值转换为%Y 的日期格式（类似 2021）做分区，语法如下：PARTITION BY VALUE(DATE_FORMAT(column_name,'%Y'))注意事项 当数据量较大时，二级分区的选择至关重要，如果数据量大的表中没有二级...
配置敏感数据分类分级
数据分类分级支持您按照数据的价值、内容敏感程度、影响和分发范围对数据进行敏感级别和类型的划分，不同敏感级别的数据其管控原则和数据开发要求存在差异，划分分类分级后，后续可通过分类分级管控不同程度的敏感数据。本文为您介绍如何...
离线同步常见问题
脏数据限制设置为多少就是不允许有多少条脏数据，若限制为0即在发现第一条脏数据时就会停止任务，此时有可能已经传几条数据了，或者没有传输数据（脏数据在所有数据中位于第一条时）。如何排查离线同步任务运行时间长的问题？可能原因1：...
- 产品推荐
- 这些文档可能帮助您