Canal
在很多情况下，利用Canal这个特性非常的有用，例如：将增量数据从数据库同步到其他系统 日志审计 数据库的实时物化视图 数据库表的temporal join变更历史 Flink还支持将Flink SQL中的INSERT、UPDATE或DELETE消息编码为Canal格式的JSON消息...
配置源节点
创建数据解析任务后，您可在数据解析工作台，配置数据解析任务的源节点，以作为后续数据解析的数据源。本文介绍配置源节点的操作步骤。前提条件 已创建数据解析任务，具体操作，请参见 创建数据解析任务。背景信息 数据解析功能说明，请...
使用ROS模板选择和设置对象
资源编排支持通过新增对象数组、元素数组和参数对象对JSON数据进行扩展，增强JSON对象的校验逻辑。对象数组 对象数组为单一对象，数组元素支持所有的ROS模板参数类型。模板示例 ROSTemplateFormatVersion:'2015-09-01' Parameters:...
Maxwell
在很多情况下，利用这个特性非常的有用，例如：将增量数据从数据库同步到其他系统 日志审计 数据库的实时物化视图 数据库表的temporal join变更历史 Flink还支持将Flnk SQL中的INSERT、UPDATE或DELETE消息编码为Maxwell格式的JSON消息，...
22.8版本新特性概览
本文介绍 云数据库ClickHouse 22.8版本推出的新特性。日期和时间类型扩展 扩展 Date32 和 DateTime64 类型，将日期支持范围从之前版本的1925年~2283年，扩展到1900年~2299年。日期类型数据精度最大为8位，达到微秒级精度。超出最大时间精度...
域名账号间转移，对DNS解析有影响吗？
操作的目标域名使用的是云解析DNS免费版：不影响DNS解析正常生效使用，解析记录数据会跟随域名转移至目标账号。非阿里云注册域名，在域名产品控制台是否支持转移到其他账号下？答：不支持。这里所谓的非阿里云域名转移至其他账号，本质上您...
提交物模型消息解析脚本
背景信息 数据格式为 ICA标准数据格式，设备按照物联网平台定义的标准数据格式生成消息上报，标准Alink JSON数据格式说明，请参见 设备属性、事件、服务。数据格式为 透传/自定义，设备通信时，需要物联网平台调用您提交的消息解析脚本，将...
手动触发同步
说明 辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。设置方法 登录 云解析DNS产品控制台。单击左侧导航栏的 辅助DNS 按钮进入辅助DNS页面...
解析记录备份
概述 解析记录备份 可帮助用户实现DNS解析记录的定时备份、并支持平滑一键恢复到至指定备份版本，可以有效防止因解析记录丢失而造成的业务影响。产品限制 解析记录备份是云解析DNS付费版功能，版本限制如下 版本 解析记录备份功能 定时备份...
解析与更新JSON数据
本文介绍如何使用数据加工对包含JSON对象的日志进行解析与更新。场景一：展开和提取JSON对象 日志中包含JSON对象时，您可以通过 e_json 函数展开和提取对象。示例1：展开一层JSON 例如，展开 data 字段值中的第一层键值对。原始日志 data:{...
JSON_VALUE
语法 VARCHAR JSON_VALUE(VARCHAR content,VARCHAR path)入参 参数 数据类型 说明 content VARCHAR 需要解析的JSON对象。path VARCHAR 指定路径表达式。自定义路径需要使用单引号（'），示例如下。JSON_VALUE(json,'$.passenger_name')AS ...
JSON和JSONB类型
使用限制 Hologres支持JSON和JSONB两种JSON数据类型，在使用时需要注意的事项如下：仅Hologres V0.9及以上版本支持JSON类型，如果您的实例是V0.9以下版本，请您使用 自助升级 或加入Hologres钉钉交流群反馈，详情请参见 如何获取更多的在线...
物模型数据解析使用示例
本文以解析上、下行属性数据的脚本为例，介绍为数据格式为透传/自定义的产品下的物模型数据解析脚本编写方法。步骤一：编辑脚本 在 生活物联网平台，创建产品。创建产品操作指导，请参见 创建产品。说明 数据格式 选择为 透传/自定义。为该...
基础版Spark全密态计算引擎使用示例
连接地址格式为：MySQL数据库：jdbc:mysql:/ip:port/database_name PostgreSQL数据库：jdbc:postgresql:/ip:port/database_name 本文示例为 jdbc:mysql:/rm-bp1487t8613zz*.mysql.rds.aliyuncs.com:3306/adb 。userName 数据库账号。...
调试实时任务
说明 Kafka中支持json、csv、canal-json、maxwell-json、debezium-json数据格式的自动抽样。Kafka自动抽样仅支持 无认证 和 用户名+密码认证 方式，不支持SSL。Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有...
特定格式文本数据加工
首先将dict数据转成JSON数据，再使用 e_json 函数进行展开即可。原始日志 content:{ 'referer':'-','request':'GET/phpMyAdmin','status':404,'data-1':{ 'aaa':'Mozilla','bbb':'asde' },'data-2':{ 'up_adde':'-','up_host':'-' } } LOG ...
删除记录
建议删除记录前，通过 导入/导出 功能将解析数据导出，做好备份工作。设置方法 登录 云解析DNS控制台。进入 域名解析 页面，在 权威域名 页签下，单击目标域名处的 解析设置 按钮。在 解析设置 页面，单击目标解析记录处的 删除 按钮，弹出...
DNS流量分析简介
当您将域名解析服务从其他厂商迁移到阿里云解析公网权威DNS托管时，如果您想了解DNS解析请求流量是否已经迁移到阿里云解析公网权威DNS，可以通过DNS流量分析-解析请求量统计功能观察是否有对域名的解析请求量数据，如果解析请求量数据在...
Delta Lake 快速入门
此快速入门演示如何生成管道，以便将JSON数据读入Delta表、修改表、读取表、显示表历史记录，以及优化表。有关演示这些功能的Databricks笔记本，请参阅 入门笔记本。创建表 若要创建一个delta表，可以使用现有的Apache Spark SQL代码，也...
提交消息解析脚本
sn=default 的自定义Topic上报自定义格式消息时，物联网平台收到消息数据后，需调用消息解析脚本将自定义格式数据转换为JSON结构体，再流转给后续业务系统。本文介绍如何在物联网平台控制台提交消息解析脚本实现自定义格式数据解析。使用与...
表达式函数概览
res_rds_mysql 从RDS MySQL数据库中拉取数据库表内容或SQL执行结果，支持定期更新数据。res_log_logstore_pull 从另一个Logstore中拉取数据，支持持续拉取数据。res_oss_file 从OSS中获取特定Bucket下的文件内容，支持定期更新数据。
导入/导出记录
导入记录 导入记录：指将准备好的解析数据，导入到云解析DNS控制台中。规则说明 导入记录分为 增量更新 和 全量更新。增量更新：是指在进行导入操作时，已有的解析记录保持不变，然后添加新增的解析记录。全量更新：是指在进行导入操作时，...
修改域名DNS服务器FAQ
介绍修改域名DNS服务器名称的常见问题。1.修改域名DNS服务器会影响解析生效吗？答：在解析数据未完成...注意：如果您需要混合使用云解析DNS和非阿里云DNS的服务器，请尽量保持两边的解析数据一致性，以避免出现解析不生效、解析异常等问题。
产品到期规则说明
如存在请通过修改解析记录将“主机记录”调整为5级或以内 解析线路 解析线路设置是否超出免费版提供的线路范围 免费版解析线路包含：默认、境外、联通、移动、电信、教育网，如解析线路超出免费版范围，请统一调整为免费版支持的解析线路或...
解析请求来源分析
概述 当您将域名迁移至阿里云解析DNS时，您可以通过解析请求来源分析功能来观察大致哪些地域的解析请求已经在逐步接入阿里云解析公网权威DNS，对于一些没有流量的地域运营商，可能是当地运营商DNS的缓存依然未失效，导致当地网络解析请求...
JMES语法
JMES是一个增强型的JSON查询计算语言，不仅可以对JSON数据进行提取，还可以做计算与转换。关于JMES语法的详细介绍请参见 JMES Tutorial。数据加工中的 json_select、e_json、e_split 函数支持通过JMES提取字段或JSON表达式的值，或者通过...
函数总览
jwt_encoding 基于JSON Web Token（JWT）标准，对JSON数据进行编码。jwt_decoding 基于JSON Web Token（JWT）标准，将数据解码为原始JSON。hashids_encoding 使用Hashids库对数据进行编码。hashids_decoding 对已使用Hashids库编码的数据...
JSON函数
字段样例 time:["time_local","request_time","upstream_response_time"]查询和分析语句*|SELECT json_array_length(time)查询和分析结果 json_extract函数 json_extract函数用于从JSON对象或JSON数组中提取一组JSON值（数组或对象）。...
企业上云数据库迁移场景
场景描述 企业上云最大的难点在于业务数据库迁移，很多企业在上云前，数据库域名或IP往往是已被写入应用客户端代码中，当从本地构建的数据库迁移到RDS时，需要用户修改客户端代码进行应用改造，此过程复杂，且风险高。解决方案 通过内网DNS...
管理服务
对于JSON数据会全量覆盖调用方传递过来的数据，默认为 importRequest=exportRequest。在 响应脚本 中，目前仅支持JSON，数据会全量覆盖源服务的响应数据，默认为 exportResponse=importResponse。脚本映射的结果会作为界面映射的输入，建议...
云解析DNS付费版使用FAQ
云解析DNS付费版实例到期后解析数据保留7天，7天内续费不影响解析使用。DNS付费版实例到期7天未续费，实例将会被释放，实例释放后为避免造成DNS解析异常，请您遵循如下说明进行操作。阿里云注册域名：解析数据将自动降级到云解析DNS免费版...
影响域名解析生效的原因
概述 影响域名解析不生效的主要原因：域名状态异常 域名过期 修改域名DNS服务器 修改过解析记录 原因一：域名状态异常 域名状态异常会直接影响域名解析生效。可以使用 whois工具 排查域名状态信息，如果域名状态如果显示为“serverHold”、...
云数据库的导入与导出
本文介绍如何对云数据库进行导入与导出操作。数据导出 您可以将数据库中的内容导出为JSON或者CSV格式的文件，导出结果中的每行数据都对应数据库中的一条记录。导出格式 是否必须指定导出字段 默认导出内容 建议使用场景 JSON格式 不必须 ...
CAST
返回：+-+|_c0|+-+|NULL|+-+相关函数 CAST函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。同时，CAST函数也属于其他函数，更多其他业务场景的函数请参见 其他函数。
应用场景
主机名管理 通过规范ECS主机名命名方式，使机器用途更容易理解看懂。借助内网解析服务“主机名记录”功能自动...提供解析时延、解析请求量、解析命中缓存率、热点域名、热点请求来源等各个维度的数据分析，为业务优化解析设置提供数据参考。
子域名独立托管发布计划（20190806）
发布计划 云解析DNS计划于2019年8月6日将发布子域名独立托管功能，可实现为子域名提供独立DNS托管和域名解析服务。应用场景 子域名托管，可以便于客户对主、子域名进行分别管理，适用于以下场景：1.主域名DNS服务器使用第三方DNS厂商，因...
JSON函数
0|JSON_REMOVE 命令格式 json_remove(json_string,json_path_string)json_remove(json_string,array[json_path_string])命令说明 返回 json_string 中去除 json_path_string 之后的数据，可以通过 array[json_path_string]一次性指定多个 ...
企业上云数据库迁移场景
场景描述 企业上云最大的难点在于业务数据库迁移，很多企业在上云前，数据库域名或IP往往是已被写入应用客户端代码中，当从本地构建的数据库迁移到RDS时，需要用户修改客户端代码进行应用改造，此过程复杂，且风险高。解决方案 通过pvtz...
修改DNS服务器
同时不同厂商之间的解析数据不一致问题也容易引发故障。阿里云注册域名 设置方法 在阿里云注册的域名，DNS一般默认为阿里云解析DNS提供的DNS服务器地址。如果您有自己注册成功的DNS服务器，且需要将域名的DNS修改为您自己的DNS，或将DNS...
普通区域名与加速区域名相互切换
说明 修改位置区需要一定时间（根据解析数据量多少不同），过程中无法变更解析记录。在上一次位置区切换任务没有完成之前，再次执行位置区切换操作会弹出错误提示框。操作步骤 普通区升级到加速区 登录到 云解析DNS控制台。单击左侧导航栏...
- 产品推荐
- 这些文档可能帮助您