基本介绍
Serverless版下，用户无需申请阿里云资源，即可无差别的使用HBase服务，实现管理表以及数据的增、删、改、查操作。Serverless版本非常适合于接受全托管或希望完全免运维的客户业务，即开即用。也适合业务波动大、成本要求高的用户。目前...
SQL审核
背景信息 项目研发过程中，需要通过数据库的增、删、改、查等SQL操作来完成业务逻辑的处理及页面数据的展现。而在项目正式发布到线上之前，需要对涉及的SQL进行全面的审核，避免不符合数据库开发规范的SQL发布到线上影响生产服务。例如如下...
概述
存储到OSS上的数据也支持进行增、删、改、查操作。索引透明：支持针对索引、物化视图等设置归档策略，操作透明。灵活度高 支持多种分层存储策略，包括按照表维度进行归档（同时支持索引、物化视图）、按分区维度进行归档、按指定LOB字段...
概述
存储到OSS上的数据也支持进行增、删、改、查操作。索引透明：支持针对索引、物化视图等设置归档策略，操作透明。灵活度高 支持多种分层存储策略，包括按照表维度进行归档（同时支持索引、物化视图）、按分区维度进行归档、按指定LOB字段...
概述
存储到OSS上的数据也支持进行增、删、改、查操作。索引透明：支持针对索引、物化视图等设置归档策略，操作透明。灵活度高 支持多种分层存储策略，包括按照表维度进行归档（同时支持索引、物化视图）、按分区维度进行归档、按指定LOB字段...
SQL窗口介绍
数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句，同时支持以可视化的方式对目标数据库进行增、删、改、查等操作，适用于数据查询、数据开发等场景。前提条件 已具备目标库或表的查询权限。申请权限，请参见 权限管理。SQL窗口界面介绍...
功能特性
逻辑库 逻辑表 数据开发与分析 功能集 功能 功能描述 参考文档 SQL窗口 SQL窗口 可以非常便捷地执行各类SQL语句，同时支持以可视化的方式对目标数据库进行增、删、改、查等操作，适用于数据查询、数据开发等场景。SQL窗口介绍 SQL Console...
典型场景
构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建大规模的可以增删改查的数据集，延迟为T+10分钟。一键建仓：支持数据库一键入湖，T+1天。文件上传：数据上传后，DLA元数据发现功能可自动发现并构建好元数据体系。数据...
数据查询
您可以在行为消息、物品消息、用户消息页面，可以分别查询您推送至行为表（behavior）、物品表（item）、用户表（user）的推送数据记录，包括对三张表数据的增、删、改操作。既可以确认数据已经成功上传，又可以检查特定数据上传前后是否...
Meta管理
Meta管理提供了增、删、改、单行读、多条件组合查询等接口。Meta管理的多条件组合查询功能基于多元索引，只有设置了IndexSchema的MetaStore才支持。索引类型支持LONG、DOUBLE、BOOLEAN、KEYWORD、GEO_POINT等类型，属性包含Index、Store和...
云数据库录入
如需进行实例的增、删、改、查及表结构的修改等操作，需要给账号授予足够的DML权限。如需进行实例的视图、存储过程、触发器及函数等对象操作，需要给账号授予足够的对象操作权限。创建实例时建议单独新建数据库账号，避免共用其他已被使用...
他云/自建数据库录入
如需进行实例的增、删、改、查及表结构的修改等操作，需要给账号授予足够的DML权限。如需进行实例的视图、存储过程、触发器及函数等对象操作，需要给账号授予足够的对象操作权限。创建实例时建议单独新建数据库账号，避免共用其他已被使用...
云数据库录入
如需进行实例的增、删、改、查及表结构的修改等操作，需要给账号授予足够的DML权限。如需进行实例的视图、存储过程、触发器及函数等对象操作，需要给账号授予足够的对象操作权限。创建实例时建议单独新建数据库账号，避免共用其他已被使用...
2020年
2020-09-10 全部区域 使用Logview 2.0查看作业运行信息 备份与恢复功能商业化发布 MaxCompute提供数据备份与恢复功能，系统会自动备份数据的历史版本（例如被删除或修改前的数据）并保留一定时间，您可以对保留周期内的数据进行快速恢复，...
离线同步常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少...
如何减少查询数据点提高查询效率
本文介绍如何通过减少单次查询数据点来提升查询效率。...起始时间和结束时间最好对齐小时自然边界，避免额外数据的查询。查询的 RT 和需要聚合的数据有关，数据越多，耗时越长。查询操作无法取消，请谨慎选择查询时间范围和查询的 Tag 条件。
版本说明
V2.6.13 2021年4月30日 问题修复 修复IgnoreError模式下未捕获异常的逃逸引发的行为不一致 修复查询时指定过小startTime时查不到数据的问题。V2.6.12 2021年4月9日 设计优化 添加数据写入的审计日志（由于会对写入性能有影响，只接受提交工...
使用限制
项目管理 配置计算引擎源 对于已配置为项目数据源的物理数据库，不建议再从其他非Dataphin控制台进行数据的增、删、改操作。不建议您为项目配置跨集群的计算引擎源。研发工作台 规范建模 建议您谨慎命名规范定义和逻辑表对象的英文名，且...
如何对JSON类型进行高效分析
秒级加减列 当半结构化数据因业务需求而增删JSON列时，业务表则按需通过DDL加列或删列来修改表结构，此时高效增删列就成为必不可少的功能。半结构化数据发生结构变化时，无需每次都更改表结构，可以在查询频率不高时直接通过JSON列式函数...
项目角色管理
改表数据 改表结构 项目的物理表-改表结构 删除表 项目的物理表-删除 逻辑表 查表数据 项目内逻辑表（本项目汇总表的指标）、逻辑视图的查询权限 实时元表 查表数据 实时元表-查表数据 改表数据 实时元表-改表数据 镜像表 查表数据 镜像表-...
项目角色管理
改表数据 改表结构 项目的物理表-改表结构 删除表 项目的物理表-删除 逻辑表 查表数据 项目内逻辑表（本项目汇总表的指标）、逻辑视图的查询权限 实时元表 查表数据 实时元表-查表数据 改表数据 实时元表-改表数据 镜像表 查表数据 镜像表-...
执行SQL基本操作
查看数据库 创建、查看和删除表 增加列、删除列、修改列的数据类型 创建、查看和删除本地索引 增删改查表数据 查看数据库 查看数据库：SHOW DATABASES;创建、查看和删除表 创建表。创建单表：CREATE TABLE single_tbl(id int,name varchar...
数据类型映射
本文介绍了数据表中和多元索引中字段数据类型的映射关系以及不同字段数据类型支持的附加属性信息。多元索引的字段值来源于数据表中同名字段的值，两者的数据类型必须相匹配，多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下...
执行SQL基本操作
查看数据库 创建、查看和删除表 增加列、删除列、修改列的数据类型 创建、查看和删除本地索引 增删改查表数据 查看数据库 查看数据库：SHOW DATABASES;创建、查看和删除表 说明 以下示例以DRDS模式数据库为例说明，DRDS模式数据库介绍请...
Hive数据源
通过连接Hive Metastore，云数据库 SelectDB 版 可以自动获取Hive的库表信息，进行数据查询、分析。除了Hive外，例如Iceberg、Hudi等其他系统也会使用Hive Metastore存储元数据。通过Hive Catalog，能轻松集成Hive及使用Hive Metastore作为...
查询并下载数据
前提条件 若您需下载即席查询的结果数据，在您开始执行操作前，请确认您已开启项目下载数据的权限。具体操作，请参见 添加项目成员。新建即席查询 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
查询并下载数据
若您需下载即席查询的结果数据，在您开始执行操作前，请确认您已开启项目下载数据的权限。具体操作，请参见 管理项目空间的权限和计算源。新建即席查询 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，...
修改数据库密码
前提条件 您已创建数据迁移任务、数据同步作业或新版数据订阅通道。说明 旧版数据订阅通道不支持该操作。您可以在 数据订阅列表 页中查看目标订阅通道是否属于新版。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据...
OSS Foreign Table数据类型对照表
scale)numeric（precision、scale）STRING char、varchar、text、numeric（不指定precision与scale）ARRAY、INT int4[]、int2[]ARRAY、LONG int8[]ARRAY、FLOAT float[]ARRAY、DOUBLE float8[]说明 对于Avro中的ARRAY数据类型，目前仅支持...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
SQL查询概述
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
TPC-H
大吞吐并发读写：30 TB数据集下至少10并发查询流（Query Stream），同时启动数据更新流（Refresh Stream）进行多轮大批量数据增删操作，挑战系统并发能力及ACID能力。分布式事务验证：全面测试数据库系统事务能力，涵盖Atomic、Consistency...
概述
业务挑战 大部分阿里云用户会将阿里云关系型数据库RDS、PolarDB for MySQL、MongoDB或者云服务器ECS自建数据库作为业务系统数据库，随着业务数据的增长，业务数据库存储的数据也越来越多。但RDS、PolarDB for MySQL、MongoDB或者ECS自建...
数据查询与分析管控
数据源查询结果的操作权限管控 DataWorks支持对查询结果进行展示、复制、下载、分享等操作，并设置数据分析模块中针对该类操作的管控策略，保障数据的操作安全。具体管控能力说明如下。默认权限 对查询结果相关操作的权限管控能力 所有用户...
查询诊断
AnalyticDB PostgreSQL版 查询分析功能可供您查看SQL执行计划以及对应统计信息，供您...磁盘读取数据耗时 算子从磁盘中读取数据的耗时。网络传输数据量 Motion算子节点间网络传输的数据总量。网络传输耗时 Motion算子节点间网络传输数据耗时。
增加或删除全局只读节点
您可以按照如下两种方式中的任意一种进入 增删节点向导 页面：通过 集群列表 页进入 增删节点向导：找到目标集群，单击 操作 栏的 增删节点。通过目标集群 基本信息 页进入 增删节点向导：找到目标集群，单击集群ID，进入集群 基本信息 页...
功能简介
数据资产构建 数据同步 可实现离线、实时多源异构数据的便捷同步，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。数据查询 可探查 AnalyticDB ...
数据查询
在开发调试或者生产运维过程中，往往需要去HBase中查询某条数据。除了使用HBase shell来写Get、Scan请求，Lindorm insight提供了一个简单的SQL查询入口，您可以使用SQL语法来查询HBase增强版宽表数据。前提条件 已登录目标集群的集群管理...
查询账单
对于使用DAS企业版 V3的数据库实例：在 计费项 为 下载数据量 的消费明细中，查看数据导出的费用。在 计费项 为 洞察分析 的消费明细中，查看洞察分析的费用。在 计费项 为 实时搜索分析 的消费明细中，查看实时搜索分析的费用。在 计费项 ...
什么是数据资源平台
数据资源平台覆盖数据同步、数据标准建模及数据质量检查、数据开发、数据标签体系构建，基于标签数据的群体分析、专家业务模型构建、全流程任务监控告警、数据服务化、数据资产管理等核心能力，提供标准化程度高、易用性强的一站式大数据...
- 产品推荐
- 这些文档可能帮助您