查询诊断
您也可以根据需求选择按照占用内存、磁盘读取数据量、磁盘读取数据耗时、网络传输数据量、网络传输数据耗时对算子排序以及计算整体比例。算子统计信息介绍如下：名称 说明 算子名称 算子名称与编号，在计划树中唯一。类型ID 算子类型编号。...
数据传输服务概述
数据传输服务是MaxCompute数据进出的最重要通道，其中包括适用于批量操作的普通Tunnel和适用于流式写入的Stream Tunnel，同时在所有Region提供免费限量使用的数据传输服务共享资源组，也提供数据传输服务（包年包月）独享资源组，供您采购...
分组聚合查询优化
因为数据已经经过了局部聚合，所以需要网络传输的数据较少，网络压力较小。数据重分布完成后，执行最终聚合，在最终聚合节点，需要把一个分组的值及其聚合状态维护在内存中，直到所有数据处理完成，以确保某个特定的分组值没有新的数据需要...
字符串函数
当您需要对存储在表中的字符串数据进行截取、拼接、转化、比较、搜索等操作，您可以使用MaxCompute支持的字符串函数对指定字符串进行灵活处理。本文为您介绍MaxCompute支持的字符串函数的命令格式、参数说明及示例。MaxCompute SQL支持的...
准备工作概览
准备工作概览 适用场景 传输数据所用的网络 需执行的准备工作 配置时需选择的接入方式 源或目标库部署在本地，且具备公网地址。公网 添加DTS服务器的IP地址到自建库的白名单 公网IP 源或目标库部署在本地，但是不具备公网地址。云企业网 ...
JSON_TYPE
返回JSON数据所属的数据类型名称。命令格式 string|number|boolean|null|object|array json_type(<json>)参数说明 json：必填，待处理的JSON表达式。返回值说明 返回STRING类型。使用示例 示例1：返回JSON内的数据类型（array类型）。...
半结构化分析
JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供一些列特定的JSON化函数，让用户可以对这些数据做出一些...
购买与使用独享数据传输服务资源组
独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件，以减少传输时间并提高效率。本文为您介绍如何购买、使用独享数据传输服务资源组。背景信息 MaxCompute当前在各个地域均为您提供了免费的 公共数据传输服务资源组，为该...
查看增量迁移链路状态和性能
功能 说明 增量迁移链路拓扑 增量迁移链路展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s。RPS：...
监控任务性能
数据传输服务DTS（Data Transmission Service）提供了任务性能的监控功能，能够展现链路拓扑结构以及相关性能数据。您可以在控制台通过DTS实例获取到任务的链路状态信息和多种性能指标，为您管理任务提供参考依据。操作步骤 登录 数据传输...
查看同步链路状态和性能
功能 说明 增量同步链路拓扑 增量同步链路拓扑主要展示链路中各模块间的数据传输情况和网络延迟信息，模块包含：源库、DTS采集模块、DTS缓存模块、DTS写入模块、目标库。相关参数解释如下：BPS：链路中模块间每秒传输的数据量，单位为MB/s...
数据传输规格说明
本文为您介绍 OceanBase 数据传输服务的规格说明及性能测试情况。注意事项 本文的规格说明参考的是测试数据，仅供您在选择规格时进行参考，不作为产品 SLA（服务等级协议）的评判依据。不同的实例规格对应了增量同步的不同 RPS 性能表现，...
透传/编辑脚本
如果设备无法直接和云端传输JSON格式的数据，则需要设备通过二进制格式将数据透传到云端，由云端运行解析脚本将透传的数据转换成标准ICA格式的JSON数据。前提条件 已创建产品，且产品的 数据格式 设置为 透传/自定义。否则在 产品-设备调试...
JSON数据类型
JSON数据的格式为键值对，结构清晰，语法易读，同时也方便前后端的数据传输。适用引擎 JSON数据类型仅适用于宽表引擎。前提条件 宽表引擎为2.6.2及以上版本。如何查看或升级当前版本，请参见 宽表引擎版本说明 和 升级小版本。使用限制 ...
使用数据订阅功能传输数据后日期数据格式发生变化
概述 本文主要介绍MySQL中数据类型为Date的数据，通过数据订阅传输数据后，数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD，YYYY-MM-DD 是展现出来的格式，实际存储是 YYYY:MM:DD 格式。...
新建 PostgreSQL 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 PostgreSQL，并配置各项参数。参数 描述 实例类型 目前仅支持 RDS 实例。数据源标识 建议使用中文、...
新建 ADB 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 ADB，并配置各项参数。参数 描述 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，...
新建 DataHub 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 DataHub。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。...
Reserve参数说明
在调用部分接口配置或查询迁移或同步、订阅任务时，您需要配置或查询预留参数Reserve（数据类型为字符串String，传入格式为JSON）来完善或查看源或目标实例的配置信息（比如目标Kafka集群的数据存储格式、云企业网CEN的实例ID）。...
新建 TiDB 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 TiDB。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。说明...
新建 PolarDB-X 1.0 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 PolarDB-X 1.0，并配置各项参数。参数 描述 实例类型 目前仅支持 阿里云 PolarDB-X 1.0 实例。重要 ...
新建 MySQL 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 MySQL。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。...
新建 PolarDB-X 2.0 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 PolarDB-X 2.0，并配置各项参数。参数 描述 实例类型 目前仅支持 阿里云 PolarDB-X 2.0 实例。数据源...
JSON_FORMAT
将JSON数据转换成STRING类型，默认不自动进行美化。命令格式 string json_format(<json>)参数说明 json：必填，待处理的JSON。返回值说明 返回STRING类型。使用示例 示例1：将NUMBER类型的JSON数据转换为字符串。select json_format(json '...
新建 Oracle 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 Oracle。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。...
如何对JSON类型进行高效分析
针对海量半结构化数据计算与分析，本文将以半结构化数据JSON为例，首先简述传统数据库与数据仓库的解决方案，然后详细描述 PolarDB IMCI列式JSON、虚拟列、秒级加减列与表列数扩展等技术点，最后给出 PolarDB IMCI列式JSON实时分析与扩展流...
新建 Kafka 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框，选择 数据源类型 为 Kafka。选择 实例类型，配置各项参数。选择 阿里云 Kafka 实例 时，配置参数如下。阿里云 Kafka 实例的...
从OSS导入JSON数据文件
背景信息 JSON数据是由文本、布尔、数值、数组（Array）和图（Map）构成的组合类型数据。JSON数据作为一种通用类型的数据类型，其自解析、灵活的特性，使其能够很好满足复杂场景下数据的记录需求。很多数据库的日志内容中往往都是以JSON的...
区域下钻热力层（v1.x版本）
区域下钻热力层是基础平面地图的子组件，支持独立的样式、数据和交互配置，包括下钻区域的标注、边线、鼠标交互事件以及位置信息等，可直接作为省或直辖市级、地市级区域热力层使用。本文介绍区域下钻热力层各配置项的含义。重要 当前为v1....
MaxCompute JSON类型使用指南
JSON类型数据生成 有多种方式可以生成JSON类型数据：JSON Literal insert into mf_json_table values(json '123');JSON函数-json_object和json_array是MaxCompute的内置函数 insert into mf_json_table select json_object("key",123,...
新建 RocketMQ 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，选择 数据源类型 为 RocketMQ。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后，下方会自动显示对应的表单。...
JSON
select json_extract_scalar(json_parse(value_string),'$.owners[1]')from json_table_3+-+|_col0|+-+|张三|select json_extract_scalar(json_obj.json_col,'$.DEFAULT.submask')from(select json_extract(json_parse(value_string),'$....
提交物模型消息解析脚本
背景信息 数据格式为 ICA标准数据格式，设备按照物联网平台定义的标准数据格式生成消息上报，标准Alink JSON数据格式说明，请参见 设备属性、事件、服务。数据格式为 透传/自定义，设备通信时，需要物联网平台调用您提交的消息解析脚本，将...
新建 OceanBase 数据源
在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建数据源 对话框中，数据源类型 默认为 OceanBase。选择 实例类型，配置各项参数。选择的 实例类型 为 OceanBase 集群实例 时，配置下述参数...
22.8版本新特性概览
支持JSON类型和动态子列 老版本的JSON格式数据读写方式 在22.8之前的版本中，ClickHouse支持以String类型来存储JSON对象，因为JSON对象是文本格式，需要通过特殊的String解析函数来解析复杂的JSON结构，从而获得JSON对象内部字段信息。...
升级任务的链路规格
若现有的迁移或同步任务的链路规格不能适应业务需求时，您可以考虑升级链路规格以提升传输数据的性能，确保任务的顺利执行并更好地支持不断增长的业务需求。前提条件 任务须处于 运行中、已暂停 或 运行失败 状态。任务需为数据迁移任务和...
JSON
AnalyticDB for MySQL 支持JSON数据类型。本文主要介绍JSON数据的格式、注意事项及使用示例。注意事项 AnalyticDB MySQL版 支持标准JSON格式，写入JSON串时必须严格符合标准JSON格式规范。JSON类型的数据列，不支持设置Default值。JSON格式...
启动和暂停数据同步项目
在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，单击目标项目后的 启动。您也可以在 同步项目列表 页面，单击项目名称进入详情页面，单击右上角的 启动。系统自动完成对数据同步项目的预检查后，启动数据同步项目。暂停数据...
FROM_JSON
JSON数据类型 MaxCompute数据类型 OBJECT STRUCT、MAP、STRING ARRAY ARRAY、STRING NUMBER TINYINT、SMALLINT、INT、BIGINT、FLOAT、DOUBLE、DECIMAL、STRING BOOLEAN BOOLEAN、STRING STRING STRING、CHAR、VARCHAR、BINARY、DATE、...
GET_JSON_OBJECT
json_path：必填，需要返回的值的JSON路径。返回值说明 返回JSON类型。使用示例 示例1：从JSON中获取key为a的value值。select get_json_object(json '{"a":1,"b":2}','$.a');返回结果：+-+|_c0|+-+|1|+-+示例2：从JSON中获取key为c的value...
- 产品推荐
- 这些文档可能帮助您