网络资源
网络资源是流量入口和数据交互的基础设施，常见的网络资源风险点如下：网络带宽不足 指网络连接的带宽无法满足系统或应用程序的需求，导致网络传输速度慢，影响系统的响应和性能。针对网络资源带宽不足的情况：带宽监控预警：实时监控网络...
字符串函数
FROM_JSON 根据给定的JSON字符串和输出格式信息，返回ARRAY、MAP或STRUCT类型。GET_JSON_OBJECT 在一个标准JSON字符串中，按照指定方式抽取指定的字符串。INITCAP 将字符串转换为固定格式的字符串，单词之间以空格分隔。转换后的格式为：...
新功能发布记录
正则函数 2023年1月 数仓版 类别 名称 相关文档 新增 数仓版（3.0）SQL诊断功能提供Stage与Task详情，帮助您提高慢查询的分析效率。使用Stage和Task详情分析查询 数仓版（3.0）新增弹性IO资源变配规格12核96 GB 和16核128 GB...
批量查询设备网络检测任务的结果
bandwidthResult JSON 网络带宽检测结果。uploadSpeed JSON 网络上传速度。单位Mbps。downloadSpeed JSON 网络下载速度。单位Mbps。pingResult JSON 网络延时检测结果。ip String 服务IP。delay JSON 网络延时。单位ms。示例 请求示例 {"id...
查询设备网络检测任务的结果
bandwidthResult JSON 网络带宽检测结果。uploadSpeed JSON 网络上传速度。单位Mbps。downloadSpeed JSON 网络下载速度。单位Mbps。pingResult JSON 网络延时检测结果。ip String 服务IP。delay JSON 网络延时。单位ms。示例 请求示例 {"id...
使用FTP客户端传输文件到云虚拟主机速度慢的解决方法
问题描述 通过FTP客户端连接阿里云云虚拟主机后，将网站程序或者网页通过FTP协议上传到云虚拟主机的过程中，传输速度较慢。问题原因 FTP传输涉及FTP客户端和FTP服务器，因此传输速度慢可能有以下原因：在中国内地访问其他国家和地区地域下...
Logtail发布历史
新增 oas_connect_timeout、oas_request_timeout 参数，支持网络慢的场景。新增安装脚本支持通过金融云公网安装Logtail。更多信息，请参见 安装Logtail（Linux系统）。优化 取消混合配置（file+plugin）中对inputs的限制。0.16.21 新功能 ...
功能特性
数据加密 传输加密 可通过SSL在传输层对网络连接进行加密，提升通信的安全性和完整性。传输加密（Beta）数据血缘 Hologres通过DataWorks，可以基于解析调度作业等真实数据的流转情况，得出表、字段之间的血缘关系，满足数据治理需求。数据...
数据传输服务概述
如果上传数据速度太慢，可以考虑使用多线程上传方式。数据传输服务共享资源组说明 下表数据为不同区域下免费共享资源（单位：Slot）Project级最多可用Slot数说明。站点 地域 Slot（个数）中国 华东1（杭州）300 中国 华东2（上海）600 中国...
莉莉丝《剑与远征》：动态加速提升用户体验
协议优化：阿里云全站加速采用阿里云自主研发的私有传输协议，相对于传统的TCP协议，针对数据传输的慢启动机制、拥塞控制及重传机制进行了算法优化，能够充分利用带宽资源，进一步提升数据传输效率。提升游戏操作的稳定性：智能路由（丢包...
JSON函数
JSON_KEYS：若指定了 json_path，表示获取JSON在指定路径下的所有键。若未指定 json_path，表示获取根路径（即 json_path='$'）下的所有键。JSON_UNQUOTE：去除 json_value 的双引号并将 json_value 中的部分转义符进行转义后，返回处理...
查询和分析JSON日志的常见问题
如果字段值不是标准JSON格式，可能只是包含了JSON格式的内容，则设置为text类型；如果字段值是标准JSON格式，则设置为JSON类型。说明 针对非完全合法的JSON日志，日志服务支持解析合法部分。将某个字段设置为JSON类型后，如果对JSON对象中...
Serverless链路规格说明
注意事项 使用DTS可实现数据秒级同步到目标实例，但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响，DTS同步任务会出现延迟增大的情况，无法绝对保证秒级延迟。名词解释 名词 说明 DU（DTS Unit）...
复杂类型函数
您可以在MaxCompute SQL中使用复杂类型函数处理复杂数据类型，例如ARRAY、MAP、STRUCT、JSON。本文为您提供MaxCompute SQL支持的复杂类型函数的命令格式、参数说明及示例，指导您使用复杂类型函数完成开发。MaxCompute SQL支持的复杂类型...
专属集群任务规格说明
受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响，DTS专属集群任务可能会出现延迟增大的情况。名词解释 集群：多台（2~100）同等规格的主机组成的一个DTS专属集群。DU（DTS Unit）：DTS专属集群的...
JSON格式导入
最终导入的数据结果如下：+-+-+|k1|k2|+-+-+|2|1|+-+-+实际的k1列导入了JSON数据中的k2列的值。因为JSON中字段名称并不等同于表结构中字段的名称，所以需要显式的指定这两者之间的映射关系。导入语句2 curl-v-location-trusted-u root:H...
22.8版本新特性概览
动态子列的支持大大提升了JSON类型数据的存储和查询效率。根据社区官方的测试结果，新版本JSON对比老版本String整体查询效率提升了40倍左右。示例如下：SELECT event.type,event.repo,event.actor FROM github_JSON LIMIT 1;远程文件系统的...
使用Kafka（离线与实时）
FLATTEN：消息格式为JSON数据类型的字符串，JSON中的Key和Value会被解析，写入到对应的MaxCompute表中，其中JSON数据中的Key和需要与MaxCompute的表列名对应。关于不同格式消息导入的案例，详情请参见 使用示例。mode 否 消息同步到...
SQL表达式
where c1 like '%abc' not like where c1 not like '%def%' 调试SQL 若创建数据流转规则时，数据格式 选择了 JSON，可在物联网平台进行SQL在线调试。调试方法如下。编写SQL后，单击 SQL调试。在 SQL调试 对话框的 调试参数 页签下，输入...
转义字符
JSON JSON是一种常用的传输数据的文本协议，标准比较简单，完整的标准请参见 JSON，使用 \ 的转义写法如下：转义字符写法 说明 \"半角双引号。\\ 反斜线。\/正斜线。\b 退格符。\f 换页符。换行符。\r 回车符。\t 水平制表符。\u+4位16进制...
JSON和JSONB类型
select*from json_populate_recordset(null:myrowtype,'[{"a":1,"b":2},{"a":3,"b":4}]')a|b-+-1|2 3|4 jsonb_populate_recordset(base anyelement,from_json jsonb)json_array_elements(json)setof json 把一个JSON数组扩展成一个JSON值的...
Go SDK
因为网络传输中，数据都是以字符串的形式发送，需要schema来转换成对应的类型。schema就是一个Field对象的slice，Field包含三个参数，第一个参数是field的名称，第二个是field的类型，第三个参数是bool值，True表示field的值允许为空，...
Logtail机器组问题排查思路（主机场景）
操作系统 Logtail app_info.json文件路径 Linux Logtail（64位程序）/usr/local/ilogtail/app_info.json Windows（64位操作系统）Logtail（64位程序）C:\Program Files\Alibaba\Logtail\app_info.json Logtail（32位程序）C:\Program Files...
DoH JSON API 接入最佳实践
本文介绍用户在客户端使用DoH JSON API的接入方案 DoH JSON API接入最佳实践流程 接入阿里公共DNS DoH JSON API 过程中，客户端域名解析机制的流程参考如下：最佳实践的设计策略 域名解析机制需要遵循以下设计策略：兜底策略 虽然阿里公共...
基于GitHub公开事件数据集的离线实时一体化实践
JSON_OBJECT(col,'$.repo.id')AS BIGINT)AS repo_id,GET_JSON_OBJECT(col,'$.repo.name')AS repo_name,CAST(GET_JSON_OBJECT(col,'$.org.id')AS BIGINT)AS org_id,GET_JSON_OBJECT(col,'$.org.login')AS org_login,GET_JSON_OBJECT(col,'$....
基于GitHub公开事件数据集的离线实时一体化实践
JSON_OBJECT(col,'$.repo.id')AS BIGINT)AS repo_id,GET_JSON_OBJECT(col,'$.repo.name')AS repo_name,CAST(GET_JSON_OBJECT(col,'$.org.id')AS BIGINT)AS org_id,GET_JSON_OBJECT(col,'$.org.login')AS org_login,GET_JSON_OBJECT(col,'$....
如何解决增量迁移延迟或同步延迟
解法9：远距离传输导致的网络延迟无法避免，您可以通过专线接入源库和目标库实例减少延迟。解法10：根据实际情况调整表结构，确保源库和目标库的表结构保持一致。解法11：请再观察几分钟，并刷新控制台。更多信息 全量任务慢的解决方案，请...
Logtail配置文件和记录文件
启动参数配置文件（ilogtail_config.json）ilogtail_config.json文件用于配置Logtail的启动参数，文件类型为JSON。更多信息，请参见 设置Logtail启动参数。重要 该文件必须为合法JSON，否则无法启动Logtail。修改该文件后，必须重启Logtail...
OSS上传或下载文件时速度很慢，怎么办？
本文介绍OSS上传和下载文件速度慢的原因和解决方法。问题原因 OSS上传和下载速度主要受限于客户端本地的带宽以及运营商的网络链路。解决方法 使用非SDK 上传和下载文件速度慢的排查方法 检查上传和下载文件的方式。如果您是通过OSS控制台、...
2020年
本章节介绍了2020年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见 数据传输服务产品动态。2020年 发布时间 发布内容 相关文档 2020年12月 支持MaxCompute结构、全量数据迁移至MySQL...
基于JWT的token认证
1.3 JWT 1.3.1 简介 Json Web Token（JWT），是为了在网络应用环境间传递声明而执行的一种基于JSON的开放标准 RFC7519。JWT一般可以用作独立的身份验证令牌，可以包含用户标识、用户角色和权限等信息，以便于从资源服务器获取资源，也可以...
慢查询检测
慢查询检测功能用于检测并查询实例中存在的异常请求...请求传输耗时(ms)异常请求从客户端到服务端的网络传输延时，单位为毫秒（ms）。请求返回大小(byte)请求返回的数据量大小。请求源地址 发起请求的客户端地址。请求开始时间 请求发起时间。
Canal
背景信息 Canal 是一个CDC（ChangeLog Data Capture，变更日志数据捕获）工具，可以实时地将MySQL变更传输到其他系统。Canal为变更日志提供了统一的数据格式，并支持使用JSON或 protobuf 序列化消息（Canal默认使用protobuf）。支持Canal...
JSON&JSONB 数据类型操作
这部分介绍对JSON&JSONB数据类型的操作，包括：JSON&JSONB的异同 JSON输入输出语法 JSON操作符 JSONB操作符 JSON创建函数 JSON处理函数 JSONB创建索引 具体协议请参见 JSON 官网。JSON&JSONB的异同 JSON和JSONB类型在使用上几乎完全一致，...
配置网络连通
json>网络配置文件，示例内容如下：{"cloud":{"networking":{"security_group_id":"sg-7xvj6jjk0pcac7ou*","vswitch_id":"vsw-7xvm8aelsg03f8cwq*","vpc_id":"vpc-bp1s37ltnbvxgcqfc*"} } } 为使用ARM相关的机型创建的专属...
JSON函数
ARRAY_APPEND JSON_ARRAY_INSERT JSON_INSERT JSON_MERGE JSON_MERGE_PATCH JSON_MERGE_PRESERVE JSON_REMOVE JSON_REPLACE JSON_SET JSON_UNQUOTE JSON属性 JSON_DEPTH JSON_LENGTH JSON_TYPE JSON_VALID JSON工具 JSON_PRETTY JSON_...
产品优势
数据传输服务DTS（Data Transmission Service）支持RDBMS、NoSQL、OLAP等多种数据源之间的数据传输。它提供了数据迁移、实时数据订阅及数据实时同步等多种数据传输方式。相对于第三方数据流工具，DTS提供丰富多样、高性能、高安全可靠的...
Unexpected token<inJSON at position 0>
问题描述 Quick BI数据集预览数据失败报错："Unexpected token<inJSON at position 0>。问题原因 数据集预览数据超时导致的。解决方案 用户网络环境外层的SLB做了1分钟的超时限制，建议修改为5分钟即可。适用于 Quick BI
跨地域传输数据
日志服务支持通过数据加工实现跨地域传输数据，本文介绍跨地域传输数据的使用场景、操作步骤、计费等内容。使用场景 当您的业务分布在不同地域时，相关日志也会分布在不同地域。当您需要对不同地域的日志进行集中管理时，您可以使用日志...
Debezium
背景信息 Debezium 是一个CDC（Changelog Data Capture，变更数据捕获）的工具，可以把来自MySQL、PostgreSQL、Oracle、Microsoft SQL Server和许多其他数据库的更改实时流式传输到Kafka中。Debezium为变更日志提供了统一的格式结构，并...
- 产品推荐
- 这些文档可能帮助您