功能更新动态（2024年）
通过直连数据源模式创建API 数据服务系统配置 跨租户发布 数据标准相关对象支持查看详情和版本对比操作，包括标准集目录、标准集、公共标准属性、词根、码表等相关对象。新增码表目录、公共日历、离线代码模板、离线物理表对象的跨租户发布...
文档更新动态（2024年）
更新说明 通过直连数据源模式创建API 数据服务系统配置 管理中心-跨租户发布-待发布对象 数据标准相关对象支持查看详情和版本对比操作，包括标准集目录、标准集、公共标准属性、词根、码表等相关对象。新增码表目录、公共日历、离线代码...
通过Logstash导入数仓版
更多参数配置：max_flush_exceptions：当写入数据出现异常时，设置最大重试次数，默认值100。skip_exception：设置是否跳过异常，默认为FALSE，表示出现异常时将重试直到到达最大重试次数 max_flush_exceptions，如果仍然失败，则同步程序...
基于Client SDK数据写入
说明 通过 e.getErrData()即可获得异常数据List，此错误码在 addMap(s)、addRow(s)、commit 操作的时候都可能会发生，因此在这些操作的时候需要单独处理此错误码的异常 COMMIT_ERROR_OTHER 102 commit中的其他异常。ADD_DATA_ERROR 103 add...
质量规则模板类型
实时多链路对比 高可用场景下，需要构建多条链路，以便数据出现异常时，能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...
质量规则模板类型
实时多链路对比 高可用场景下，需要构建多条链路，以便数据出现异常时，能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题，提升实时数据质量。稳定性 实时统计值检测 实时数据为指标值或可统计数据时...
创建全域数据表质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档当前监控字段，适用于通过单字段就可以完整确定异常...
创建全域数据表质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档当前监控字段，适用于通过单字段就可以完整确定异常...
创建数据表质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档当前监控字段，适用于通过单字段就可以完整确定异常...
创建数据表质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档当前监控字段，适用于通过单字段就可以完整确定异常...
管理服务单元权限
如果您已购买了数据服务模块，即可基于Dataphin生成API。服务单元对数据表进行统一的元数据配置。在您生成API前，需要对数据表进行统一的元数据配置。如果您需要使用他人的服务单元生成API，则需要申请服务单元的使用权限。前提条件 已购买...
数据服务概述
数据服务与API网关产品相连通，支持一键发布API至API网关。阿里云API市场涵盖了金融理财、人工智能、电子商务、交通地理、生活服务、企业管理和公共事务7大类目，目前已有数千款API产品在线售卖，是快速帮您实现数据变现的平台。详情请参见...
消息模板
数据服务 数据服务 包括 平均响应时间异常、调用次数异常、错误率异常。修改告警消息模板 在不同模块的页签下，单击 操作 列下的 图标，进入 编辑消息模板 对话框。参数 描述 当前使用模板 如上图①区域，为您展示当前告警原因的配置模板的...
消息模板
数据服务 数据服务 包括 平均响应时间异常、调用次数异常、错误率异常。修改告警消息模板 在不同模块的页签下，单击 操作 列下的 图标，进入 编辑消息模板 对话框。参数 描述 当前使用模板 如上图①区域，为您展示当前告警原因的配置模板的...
推送记录
数据服务 包括 平均响应时间异常、调用次数异常、错误率异常 和 Offline百分比异常。实时计算 包括 业务延迟过高、TPS超过范围、失败超过配置比例、数据滞留超过配置 和 反压持续时间超过配置。不同的计算引擎，支持的告警类型不同。租户内...
推送记录
数据服务 包括 平均响应时间异常、调用次数异常、错误率异常 和 Offline百分比异常。实时计算 包括 业务延迟过高、TPS超过范围、失败超过配置比例、数据滞留超过配置 和 反压持续时间超过配置。不同的计算引擎，支持的告警类型不同。租户内...
告警事件
数据服务 包括 平均响应时间异常、调用次数异常、错误率异常、Offline百分比异常。实时计算 包括 业务延迟过高、TPS超过范围、失败超过配置比例、数据滞留超过配置 和 反压持续时间超过配置。不同的计算引擎，支持的告警类型不同。租户内的...
告警事件
数据服务 包括 平均响应时间异常、调用次数异常、错误率异常、Offline百分比异常。实时计算 包括 业务延迟过高、TPS超过范围、失败超过配置比例、数据滞留超过配置 和 反压持续时间超过配置。不同的计算引擎，支持的告警类型不同。租户内的...
查看及管理服务单元
区域 描述 ① 搜索及筛选区 您可根据服务单元名称的关键字进行搜索，也可根据我的服务单元（包括我负责的和我参与开发的）、数据源、服务单元分组、服务单元类型、负责人进行精确筛选。② 列表区 为您展示服务单元名称、服务单元类型、服务...
时序异常检测
数据服务提供时序异常检测算法，采用智能时序算法，实时分析设备时序数据，准确感知设备异常现象。查看基本信息 在 物联网平台控制台 的 实例概览 页面，单击目标企业版实例卡片。在左侧导航栏，选择 数据服务>数据智能。在算法模板列表中...
创建单物理表服务单元
单物理表服务单元用于对业务数据源的单个物理表进行元数据配置。后续您可以基于该单物理表服务单元开发访问该物理表数据的API。本文为您介绍如何创建单物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作，请参见 创建服务项目...
一键诊断
自治服务开启后，DAS会在数据库出现异常时，自动进行根因分析，给出优化或止损建议，并自动进行优化或止损操作（需经您授权后才会开启优化操作）。详情请参见 自治中心。会话管理：您可以通过会话管理功能查看目标实例的会话详情和会话统计...
创建多物理表服务单元
后续您可以基于该多物理表服务单元开发可以同时访问多物理表数据的API，以实现联合数据查询。本文为您介绍如何创建多物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作，请参见 创建服务项目分组。当数据源类型为Hbase 0.9.4/1...
数据服务入门
数据服务已与API网关连通，支持一键发布API至API网关。数据服务与API网关为您提供安全、稳定、低成本、易上手的数据开放共享服务。更多数据服务的介绍，详情请参见 数据服务概述。进入数据服务 登录 DataWorks控制台，单击左侧导航栏的 ...
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
批量创建质量规则
异常归档 默认 关，开启 后可以归档异常数据到文件或归档表中，质量校验后可以下载、分析归档的异常数据。说明 仅支持Dataphin数据表和全域数据表配置异常归档。归档模式 支持 仅归档异常字段 和 归档完整记录。仅归档异常字段：只去重归档...
数据集成概述
脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列...
基本概念
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API或Dataphin...
数据服务概述
同时，支持数据服务的运维监控和告警，便于开发运维人员根据异常数据或告警通知，及时发现并修正问题。数据服务产品价值能力，概括为以下两点：数据服务创建能力：支持将单个物理表或多个物理表进行关联形成一张逻辑表，后续开发可以基于该...
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
配置数据层
当某个单元出现异常或者不可用的情况时，可通过异地多活的切流组件迅速将“问题”单元承担的流量切换至其他正常单元，保证业务的可持续性和稳定性。前提条件 配置MySQL数据层的前提条件：在两个单元环境中分别已创建一个或多个同名MySQL。...
功能特性
集群启停 重启集群 当云数据库 SelectDB 版集群出现异常情况，无法提供服务时，您可以重启该集群。重启集群 删除集群 当业务不再需要该集群时，您可以删除该集群。删除集群 监控告警 功能集 功能 功能描述 参考文档 监控告警 监控告警 云...
配置数据层
当某个单元出现异常或者不可用的情况时，可通过切流单迅速将数据库从主单元切换到正常单元，保证业务的可持续性和稳定性。前提条件 配置MySQL数据层的前提条件：在两个单元环境中分别已创建一个或多个同名MySQL。具体操作，请参见 快速创建...
Tair Proxy特性说明
在某些极端场景下某个数据分片出现异常后，对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响：客户端通过4个连接发送4个请求，当数据分片2处于异常状态时，仅有请求1（GET Key1 可正常读取到数据），其他请求会...
Redis Proxy特性说明
在某些极端场景下某个数据分片出现异常后，对数据的影响及优化方案如下。场景 影响与优化方案 图 2.多Key命令场景 影响：客户端通过4个连接发送4个请求，当数据分片2处于异常状态时，仅有请求1（GET Key1 可正常读取到数据），其他请求会...
实例告警
及时发现数据库异常是数据库日常运维的重要...当数据库出现异常情况或达到预设的告警阈值时，系统会立即通知设定的告警联系人，以帮助您及时发现数据库异常并维护数据库的稳定性。操作步骤 为实例配置警规则和告警模板，详情请参见 配置告警。
创建服务项目分组
分组用于分类管理服务单元、应用、Dataphin数据源和API。在您开始创建API、调用API或创建Dataphin数据源前，首先需要创建用于管理服务单元、应用、Dataphin数据源和API分组。本文为您介绍如何创建服务单元、应用、Dataphin数据源和API的...
异地应用双活切流
场景四：故障>数据库故障 说明 部分数据库出现异常，将发生故障的主数据库切换到另一单元（地域）。a.选中想要切换的数据库，在展示框里，同一行代表同一数据库的主备。b.单击 下一步，进入 容灾切换预览，在预览页，可以看到数据库前后主...
产品架构介绍
故障隔离：当局部Provider出现异常时，支持将异常的Provider进行故障隔离，保证所有机房内的Consumer均不会调用到异常的Provider，实现微服务流量的故障逃逸。单元化服务寻址：针对异地多活单元化架构，支持按照单元化规则寻址调用Provider...
审计日志
ChangeServiceOwner 转交数据服务的API、应用、Dataphin数据源、服务单元的负责人。归属我的 ConfigFunctionPermission 修改功能权限配置。ChangeFunctionPermissionOwner 转交功能权限。权限审计 AuthAuditExport 导出权限审计详情。系统...
- 产品推荐
- 这些文档可能帮助您