RDS SQL Server I/O高问题
结合Page性能可以发现，1点左右的I/O吞吐量突增主要是读取数据页造成的，峰值达到了50000页左右，即400 MB/sec。结合Page性能、Log性能、备份吞吐量可以发现，2点到3点左右的I/O吞吐高峰由数据页读取（峰值约40 MB/sec）、数据页写入（峰值...
新建 TiDB 数据源
TiDB 数据格式 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户时，您可以选择 TiCDC 或 TiDB Binlog 格式的数据，请从下拉列表中进行选择。备注（可选）数据源的备注信息。单击 测试连接，验证数据传输和数据源的网络连接，以及...
配置Hologres输入组件
使用限制 不支持读取Hologres数据库的视图。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照下图指引，进入 Hologres输入配置 对话框。序号 说明 ① 单击页面右上角的 组件库。② 单击 输入。③ 拖动 ...
DeleteDatabases-删除数据库
删除一个或多个已创建的数据库。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 ...
RDS SQL Server中无法直接删除数据库的处理方法
问题描述 在RDS SQL Server实例中删除数据库时，会出现以下场景的报错：如果数据库没有会话，对于RDS SQL Server 2008、2012和2016版，是用镜像做的主备同步，直接使用 drop database SQL语句删除数据库会存在以下报错。The database 'XX' ...
数据库管理
参数 说明 数据库（DB）名称 以字母开头，以字母或数字结尾；由小写字母、数字、下划线或中划线组成；长度为2~64个字符。数据库名称在集群内必须是唯一的。说明 请勿使用保留关键字作为数据库名称，如 test 等。数据库Owner 数据库的所有者...
数据库管理
参数 说明 数据库（DB）名称 以字母开头，以字母或数字结尾；由小写字母、数字、下划线或中划线组成；长度为2~64个字符。数据库名称在实例内必须是唯一的。说明 请勿使用保留关键字作为数据库名称，如 test 等。数据库Owner 数据库的所有者...
管理数据库
参数 说明 数据库（DB）名称 以字母开头，以字母或数字结尾。由小写字母、数字、下划线（_）或中划线（-）组成。长度不超过64个字符。数据库名称在实例内必须是唯一的。说明 请勿使用保留关键字作为数据库名称，如 test、mysql 等。支持...
配置Hologres输入组件
使用限制 不支持读取Hologres数据库的视图。操作步骤 请参见 配置离线单条管道，进入离线单条管道脚本的开发页面。按照下图指引，进入 Hologres输入配置 对话框。序号 说明 ① 单击页面右上角的 组件库。② 单击 输入。③ 拖动 Hologres ...
DescribeAccountAuthority-查看账号权限
string db.dict 形式，代表某数据库的某字典 test1.range_key_dict 示例 正常返回示例 JSON 格式 {"RequestId":"F5178C10-1407-4987-9133-DE4DC9119F75","Data":{"DBInstanceId":"cc-bp100p4q1g9z3*","Account":"test1","DmlAuthority":0,...
存储格式与SerDe
DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...
数据库代理主机监控详情
本文介绍数据库代理主机监控的详细信息。查看数据库代理主机监控数据 说明 数据库代理主机监控目前仅针对白名单用户开放，如需开通请咨询技术支持。进入 OceanBase 管理控制台。在左侧导航栏中，单击 实例列表。在实例列表中找到目标实例，...
产品架构
为了同步正在进行的数据变更，DTS使用两个处理事务日志的模块：事务日志读取模块：日志读取模块从源实例读取原始数据，经过解析、过滤及标准格式化，最终将数据在本地持久化。日志读取模块通过数据库协议连接并读取源实例的增量日志。如果...
ExploreHiTSDBInstanceDeletionJobList
值为 DATA（数据）或 META（时间线）返回示例 JSON 格式：{"code":"200","data":{"RequestId":"2553A660-E4EB-4AF4-A402-8AFF70A49143","JobList":[{"Status":"FINISHED","EndTime":1501430449883,"InstanceId":"hb-uf6z26x3gaz99n511","Ip...
JSON数据从OSS迁移至MaxCompute
本文为您介绍如何通过DataWorks数据集成，将JSON数据从OSS迁移至MaxCompute，并使用MaxCompute内置字符串函数GET_JSON_OBJECT提取JSON信息。前提条件 开通MaxCompute和DataWorks。新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。...
JSON数据从OSS迁移至MaxCompute
本文为您介绍如何通过DataWorks数据集成，将JSON数据从OSS迁移至MaxCompute，并使用MaxCompute内置字符串函数GET_JSON_OBJECT提取JSON信息。前提条件 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请...
数据源概览
本章节主要介绍如何使用Databricks数据洞察完成对多种数据源的读写，以及如何使用Databricks数据洞察完成与其他阿里云产品数据源之间的网络连接。静态数据源 Databricks数据洞察支持直接读取静态数据源。CSV文件 JSON文件 Parquet文件 ORC...
GetDataSourceMeta
enable：数据库是否可用，包含true（表示数据库可用），false（表示数据库不可用）取值。tableName：数据库包含的表名称。tableInfos：数据库中表的信息。示例 请求示例 http(s):/[Endpoint]/?Action=GetDataSourceMeta&ProjectId=10000&...
创建数据源
说明 数据库系统的内置数据库是否自动同步到项目是通过系统配置项 odc.connect.database.sync.block-internal-database 确定。该配置项默认为 true，表示不会自动将内置的数据库转移到绑定的项目。ODC 识别的数据库系统内置数据库如下：...
附录：消息格式
字段类型 写入Kafka topic中的消息将从源端读取数据映射为BOOLEAN、DOUBLE、DATE、BYTES、LONG，STRING六种类型，再以不同的JSON格式写入kafka topic中。类型 说明 BOOLEAN 对应JSON中的布尔类型，取值为true，false DATE 对应JSON中的数值...
CAST函数
由于格式不匹配会返回NULL，结果如下：+-+|CAST('a' AS TIME)|+-+|NULL|+-+若目标数据类型包含日期和时间数据，但数据缺少对应的信息，那么将根据如下规则自动补充数据：若 expr 中缺失时间信息，转换后的时间默认为 00:00:00。例如，将...
数据集成支持的数据源
例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓（Hive）、大数据计算服务等场景。例如，将ECS上自建的MySQL数据库的数据迁移至MaxCompute中。离线集成...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版 是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版 的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级数据库特性。同时，PolarDB ...
使用限制
自建数据库迁移至云数据库MongoDB 将ECS上分片集群架构的自建MongoDB迁移上云 使用DTS迁移分片集群架构的自建MongoDB数据库上云 使用MongoDB工具将自建数据库迁移至分片集群实例 第三方云数据库迁移至云数据库MongoDB 使用NimoShake将...
JSON数据列展开
数据库中常常需要处理JSON数据，例如，将JSON数据中的某些属性字段进行展开转换，转成行、列的关系型形式。JSON数据的展开方式灵活多变，本文通过详细的SQL示例，介绍如何展开JSON数据列。基本思路 使用 JSON函数，对JSON字符串进行解析和...
PolarDB PostgreSQL版架构介绍
PolarDB PostgreSQL版（兼容Oracle）是一款阿里云自主研发的企业级数据库产品，采用计算存储分离架构，兼容PostgreSQL与Oracle。PolarDB PostgreSQL版（兼容Oracle）的存储与计算能力均可横向扩展，具有高可靠、高可用、弹性扩展等企业级...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
返回结果
不同的 API 请求返回的数据内容和格式不同，请查阅 写入数据 和 读取数据。请求失败 如果错误发生，API 将为各个错误返回一个对应格式化的 JSON 对象。该对象包含的字段如下表所示：字段名 类型 是否必选 描述 举例 code Integer Yes HTTP ...
JSON与XML解析库
property_parse JSON 与 XML 解析函数，主要用来解析 JSON 格式。函数原型 property_parse(string property_value,int property_type)returns(uint result);请求参数 参数 必选 类型 说明 property_value 是 string JSON 格式数据 property...
JSON_VALID
检查字符串是否为合法的JSON格式。命令格式 boolean json_valid(<json>)参数说明 json：必填，待处理的JSON字符串。返回值说明 返回BOOLEAN类型的true或者false。使用示例 示例1：检查"abc"是否为合法的JSON格式字符串。select json_valid...
基于GitHub公开事件数据集的离线实时一体化实践
阿里云OSS（Object Storage Service）是阿里云提供的云存储服务，可以用于存储各类数据，本次实践引用的原始数据是JSON格式，OSS可以提供方便、安全、低成本、可靠的存储能力。MaxCompute是适用于数据分析场景的企业级SaaS（Software as a ...
功能概述
数据库自治服务DAS（Database Autonomy Service）提供智能压测功能，帮助您验证您的实例规格是否需要扩容，以便有效地应对业务流量高峰。适用场景 为应对即将到来的短期业务高峰，验证当前数据库实例规格是否需要扩容。数据库结构变更后...
数据导入概览
④ 图数据库GDB加载程序从满足RAM角色的Bucket中读取数据并将数据加载至图数据GDB实例。使用DataWorks数据集成同步数据到GDB DataWorks 是阿里云上的一站式大数据智能云研发平台，其中数据集成服务支持导出数据到GDB，您也可以使用平台完成...
区域下钻热力层（v2.x版本）
当自定义区域数据请求失败时 自定义区域数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页...
什么是消息解析
物联网平台定义设备消息的标准数据格式为Alink JSON。对于低配置且资源受限或者对网络流量有要求的设备，不适合直接构造JSON数据与物联网平台通信，可将原数据透传到物联网平台。物联网平台提供消息解析功能，可以根据您提交的脚本，将消息...
数据集成支持的数据源
例如，将本地数据库MySQL的数据迁移至阿里云数据库RDS中。整库迁移 适用于将本地数据中心或在ECS上自建的数据库，同步数据至离线数仓（Hive）、大数据计算服务等场景。例如，将ECS上自建的MySQL数据库的数据迁移至MaxCompute中。实时集成 ...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
管理数据库资产
支持加密审计的数据库需满足以下条件：数据库类型为自建数据库MySQL 5.6 加密算法为AES256-SHA和AES128-SHA（单向认证）如果您的MySQL数据库满足上述条件并配置了SSL证书，您需要打开 使用SSL 开关，并在 SSL密钥 处上传数据库使用的证书，...
等值面层（v2.x版本）
当裁剪边界数据接口请求失败时 裁剪边界数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页...
移动图标层
当移动图标层请求失败时 数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页签的 数据响应...
- 产品推荐
- 这些文档可能帮助您