构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
创建同步OSS
同步说明 1）目前DataHub支持将TUPLE和BLOB数据同步到OSS中 TUPLE:采用csv数据格式，每个Record中的column数据以逗号分隔，Record之间采用 换行符' ' 分隔 BLOB:采用Append方式进行数据追加，如果用户需要拆分OSS数据，用户需要自己往...
重要组件
PolarFS收到读写请求后，会通过共享内存的方式把数据发送给PolarSwitch，PolarSwith是一个计算节点主机维度的后台守护进程，接收主机上所有实例以及工具发来的读写块存储的请求。PolarSwith做简单的聚合，统计后分发给相应的存储节点上的...
概述
若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB MySQL版 提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。本章节介绍了冷数据归档方法、...
添加HBase数据源
HBase数据源类型和添加方式 HBase数据源类型 添加HBase数据源的方式 云数据库HBase标准版 如果云数据库HBase标准版或者云数据库HBase增强版与LTS使用相同的专有网络ID，添加方法请参见 通过Lindorm控制台添加HBase数据源。如果云数据库...
支持的数据源
当前DBS支持如下三种方式添加数据源：手动添加数据源 批量添加数据源 自动添加数据源 DBS支持的数据源类型请参见下表。数据源类别 数据库类型 阿里云数据库 RDS MySQL RDS SQL Server RDS PostgreSQL RDS MariaDB PolarDB MySQL版 PolarDB ...
数据导入概览
从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块，可以获取您提供的.csv格式的OSS数据文件，并将其解析为图中的点数据和边数据，然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...
测试与发布API
开发的API只有通过测试并发布至数据服务市场中，用户才可以在数据服务市场中查询并申请调用该API的权限。本文为您介绍如何测试与发布API至数据服务市场中。前提条件 在开始执行操作前，请确认您已完成API的创建。更多信息，请参见 API任务...
引擎功能
数据查询 支持通过SQL进行数据查询，兼容基于OpenTSDB协议的查询API等方式进行数据查询。用户也可以通过产品控制台的数据查询功能进行数据分组、降采样、空间聚合等可视化数据查询展现。数据管理 数据库管理 时序数据的存储以Database为...
上传数据
添加完成数据文件后，在跳转后的添加数据对话框，选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址，单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明 当数据量较大时解析时间会比较长，您可以先关闭弹...
上传数据
添加完成数据文件后，在跳转后的添加数据对话框，选择数据的分组、输入数据集的名称、选择数据的类型和数据的服务地址，单击对话框右下角的 创建数据集 即可完成三维瓦片数据的添加。说明 当数据量较大时解析时间会比较长，您可以先关闭弹...
Quick BI如何接入TSDB
将时间序列数据库 TSDB中的数据表或自定义方式创建的数据集添加到Quick BI，请参见 创建并管理数据集。添加可视化图表并分析数据，请参见 新建仪表板 和 可视化图表概述。钻取并深度分析数据，请参见 钻取、联动、跳转。
集群自定义监控报表
集群主机 memory_free 可用物理内存大小 集群主机 memory_used 使用物理内存大小 集群主机 net_recv 每秒接收数据量 集群主机 net_send 每秒发送数据量 集群主机 net_throughput 网络吞吐率 集群主机 ntp_offset_milliseconds ntp时钟偏移 ...
实时数据消费概述
实时数据消费功能包含高速数据导入API和实时数据源消费两部分，可实现数据直接写入Segment（分片单元），避免通过COPY或INSERT方式造成的Master写入负载高的问题，也可实现使用 AnalyticDB PostgreSQL版 单产品直接消费Kafka数据。...
功能简介
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
空间数据（邀测中）
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
备份集查询功能概览
背景信息 传统的备份数据查询有两种方式：将备份数据文件导入至数据库，再通过数据库操作对数据进行查询，但是这种方式耗费时间长，且可能会导致数据文件被修改。通过 Hive 的方式直接对文件进行查询，但是这种方式对数据文件格式有严格的...
数据变更最佳实践
更新数据 AnalyticDB MySQL版 提供多种数据更新方式，建议如下：数据更新频率高、基于主键的行级覆盖更新且应用可以补齐所有列，可通过 REPLACE INTO 批量更新数据。数据更新频率低、基于主键更新，可通过 REPLACE INTO 或者 UPDATE 单条...
登录数据库
操作步骤 在DMS实例列表登录数据库 使用该方式登录数据库前，需要确保您的数据库实例已录入DMS。更多信息，请参见 云数据库录入。登录 数据管理DMS 5.0。在首页左侧的未登录实例列表中，选择并右键单击目标实例。说明 数据库实例有未登录...
新建自定义数据源
如果开发模式是Dev-Prod模式，则可以通过以下方式配置数据源：单击 生产+开发数据源，配置生产环境和开发环境的数据源。单击 生产数据源，配置生产数据源。完成生产数据源的创建后，单击 开发数据源，配置开发环境的数据源。说明 系统支持...
产品优势
它提供了数据迁移、实时数据订阅及数据实时同步等多种数据传输方式。相对于第三方数据流工具，DTS提供丰富多样、高性能、高安全可靠的传输链路，同时它提供了诸多便利功能，极大方便了传输链路的创建及管理。丰富多样 DTS支持多种同构或...
新建自定义数据源
如果开发模式是Dev-Prod模式，则可以通过以下方式配置数据源：单击 生产+开发数据源，配置生产环境和开发环境的数据源。单击 生产数据源，配置生产数据源。完成生产数据源的创建后，单击 开发数据源，配置开发环境的数据源。说明 系统支持...
设置数据时效
获取数据时效 请求路径和方法 请求路径 请求方法 描述/api/ttl GET 查询数据时效 请求内容 无需请求实体 响应说明 200 表示成功，其他返回码表示失败，错误信息参见公共 响应状态码。返回 JSON 举例：{"val":7776000 } val 的值即为 ttl 的...
DataV6.0数据集介绍
本教程主要包括数据集的介绍、数据集的创建、数据集的应用场景以及数据集的组件生成方法，并以柱状图和基础平面地图组件为例介绍数据集的创建步骤。介绍 DataV数据集支持多种数据源的接入，如数据库、Excel表格文件等，通过对数据的结构化...
数据安全治理的必要性
数据安全治理采用体系化的方式保障数据安全，要求妥善处理各类人员对组织资产的行为，以避免发生数据安全事件。数据安全治理的目标是协助企业树立数据安全相关的法律意识，确保企业经营合法合规，同时展现企业的社会责任，保护企业的核心...
什么是数据资源平台
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
添加数据
空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加，支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储上存储了数据文件。背景信息 ...
数据迁移
本文为您介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据，如果您的数据存放在传统的关系型数据库且数据量庞大...
数据查询
访问方式 适用场景 描述 具体操作 Java Native SDK Java应用开发 支持流式数据传输，无需管理底层连接，提供线程安全的接口调用。Java Native SDK开发手册 JDBC Driver Java应用开发，需要配合框架使用的场景 需要自己管理连接池，或着使用...
SLS的OSS投递数据源
本文介绍如何通过向导创建SLS的OSS投递数据源发现任务，自动发现您当前区域下所有的Logstore投递到OSS的日志数据（包括新增的投递到OSS的日志数据，以及增量的分区及数据），并自动创建DLA库表映射到投递的OSS日志数据上。前提条件 当前...
数据库性能
数据管理DMS整合了数据库自治服务DAS的部分功能，可以帮助您掌握数据库实例的性能状况，快速、精准、有效地优化数据库服务。前提条件 如果您的数据库的管控模式为自由操作或稳定变更，并且您拥有实例的登录权限，当您登录目标实例后您将...
从这里开始
使用介绍 DataV数据可视化将为您提供如下功能服务：数据看板管理 创建数据看板：DataV支持通过PC端、移动端创建模板和空白数据看板，也支持通过识图方式创建数据看板。管理数据看板：在数据看板管理页面，对数据看板可进行分组、排序、搜索...
数据源概述
说明 数据同步基于数据源控制任务读写端数据库，您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。...
快速入门
空间构建平台是一个独立的平台，该平台作为城市空间构建模块，可自定义实现空间数据编辑，并将空间数据项目运用在三维城市构建器中。本文为您介绍如何快速使用空间构建平台。前提条件 已 开通DataV服务。说明 空间数据构建平台仅支持 DataV...
快速入门
空间构建平台是一个独立的平台，该平台作为城市空间构建模块，可自定义实现空间数据编辑，并将空间数据项目运用在三维城市构建器中。本文为您介绍如何快速使用空间构建平台。前提条件 已 开通DataV服务。说明 空间数据构建平台仅支持DataV...
数据洞察
数据洞察入口 数据分析支持通过如下几种方式进入数据洞察：数据洞察列表页 进入数据分析。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 工作空间列表，找到目标工作空间后，单击 操作 列的 快速进入，选择 数据分析。在 数据...
查询和修改数据复制方式
本文介绍如何查询和修改RDS PostgreSQL实例的数据复制方式，提高云数据库性能或可用性。前提条件 实例为PostgreSQL高可用系列（云盘）。如需修改 数据复制方式 为 半同步，则需要实例内核版本为20220228及以上版本。如何升级内核小版本，请...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。不同开发方式的使用方法、...
入湖基础操作
关系数据库实时入湖：可以实现RDS MySQL或PolarDB数据库表数据增量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据抽取binlog的方式将数据库表数据实时同步回放到数据湖中。待同步的数据表需确认包含...
创建TDH Inceptor数据源
通过创建TDH Inceptor数据源能够实现Dataphin读取TDH Inceptor的业务数据或向TDH Inceptor写入数据。本文为您介绍如何创建TDH Inceptor数据源。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源...
- 产品推荐
- 这些文档可能帮助您