创建EMR表
该主键为业务概念，您可以在业务上保证记录的唯一性，DataWorks对主键无约束。编辑 单击已保存字段后的 编辑，修改当前字段的配置，并单击 保存。删除 删除已经创建的字段。说明 已经创建的表，删除字段重新提交时，会要求删除当前表，再去...
错误码
业务表必须有主键 给所有业务表添加主键。数据源相关（FMT 模式下）错误码 错误消息 错误说明 解决方案 DTX-500 transaction[%s]:[%s]on db[%s]flush branchInfo to db failed.保存 undo log 至 dtx\_branch\_info 表失败 检查业务数据库...
写入或更新调优指南
当您Hologres的表数据写入或更新的性能无法达到业务预期时，可根据本文提供的写入瓶颈判断方法分析其具体原因（上游数据读取较慢，或达到了Hologres的资源瓶颈等），从而选择合适的调优手段，帮助业务实现更高的数据写入和更新性能。...
INSERT ON CONFLICT(UPSERT)
而根据业务的需求，INSERT ON CONFLICT又可以分为 InsertOrIgnore、InsertOrReplace、InsertOrUpdate，三者的具体区别如下：更新模式 说明 InsertOrIgnore 写入时忽略更新，结果表有主键，实时写入时如果主键重复，丢弃后到的数据，通过 ...
RDS SQL Server间的同步
检查无主键表信息：SELECT s.name AS schema_name,t.name AS table_name FROM sys.schemas s INNER JOIN sys.tables t ON s.schema_id=t.schema_id AND t.type='U' AND s.name NOT IN('cdc','sys')AND t.name NOT IN('systranschemas')AND ...
全链路专家服务内容说明
提供本工作说明书规定的各项服务目录，如业务目标、云资源架构和云资源健康度等评估，提供可行建议，确保系统指标达到双方沟通确定的业务稳定性要求。按照商定并确定的驻场时间范围到客户现场驻场进行服务。3.1.4.完工标准 提交《专家服务...
数据类云产品专家服务
数据同步方案咨询及支持 与客户共同梳理业务架构和数据库的数据同步/迁移方案，并结合丰富的云上数据库迁移/同步经验，提供满足业务需求的数据同步/迁移方案，并提供数据同步/迁移相关的技术支持工作。包括但不限于如下场景：1、通过阿里云...
表存储格式：列存、行存、行列共存
数据查询时，优化器会根据SQL，解析出对应的执行计划，执行引擎会根据执行计划判断走行存还是列存的查询效率更高，要求行列共存的表必须设置主键：对于主键点查场景（如 select*from tbl where pk=xxx 语句）以及 Fixed Plan加速SQL执行 ...
查看业务服务
物联网应用开发（IoT Studio）提供查看业务逻辑服务的功能，包括业务服务基本信息、逻辑配置、监控运维等。帮助您实时掌握业务的运行状态。背景信息 IoT Studio提供已发布和未发布两种发布状态的业务服务：已发布：展示已发布和已发布（未...
工作流使用案例
执行工作流 您也可以指定工作流的业务时间，此时工作流作业中的时间相关变量将使用指定的业务时间进行计算，一般用于重跑某个时间段的工作流实例，可以设置单次重跑或批量重跑。如果您的作业中没有任何时间相关变量，可以选择在当前时间...
专家成长计划服务内容说明
30人 基于ITSM/ITIL的阿里云运维最佳实践工作坊 8 数字化时代业务形态越来越复杂，IT技术已经是业务发展的主要驱动力，面对复杂不确定的业务形态，如何让运维体系保障业务的安全、稳定和灵活性？阿里云集合传统IT运维理论并通过大规模商业...
顺序消息
顺序消息可以保证消息的消费顺序和发送的顺序一致，即先发送的先消费，后发送的后消费，常用于金融证券、电商业务等对消息指令顺序有严格要求的场景。本文介绍 云消息队列 RocketMQ 版 顺序消息的概念、适用场景、实现原理以及使用过程中的...
工作流编辑
背景信息 本文为您提供工作流编辑的相关操作介绍，具体如下：新建工作流 编辑工作流 配置工作流调度 执行工作流 查看工作流运行记录 工作流可执行操作 前提条件 已创建项目，详情请参见 项目管理。已编辑好作业，详情请参见 作业编辑。新建...
ListBusiness
调用ListBusiness接口，查询业务流程的列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
DNS概述
nameserver 172.xx.x.xx search kube-system.svc.cluster.local svc.cluster.local cluster.local options ndots:5 图 1.DNS解析原理示例图 序号 描述 ① 业务Pod（Pod Client）试图访问Nginx服务（Service Nginx）时，先会请求本地DNS配置...
单元测试报告
单元测试要求 用例小类 测试要点 说明 是否已检查（Y/N）规范性 命名规范检查（表、视图、工作流、字段）是否符合 MaxCompute数仓建设规范管理指南 中命名规范的表命名规范。代码格式和注释规范性 是否符合 MaxCompute数仓建设规范管理指南...
同城容灾架构概述
基本原理 同城容灾是在相隔较远的两地（同城）建立两套功能相同的IT系统，当一处系统因意外（火灾、地震等）停止工作时，整个应用系统可以切换到另一处，使得该系统功能可以继续正常工作。对于中大型企业来说，如果希望业务系统具备同城容...
导出全量数据到MaxCompute
起始主键和结束主键需要是有效的主键或者是由INF_MIN和INF_MAX类型组成的虚拟点，虚拟点的列数必须与主键相同。其中INF_MIN表示无限小，任何类型的值都比它大；INF_MAX表示无限大，任何类型的值都比它小。数据表中的行按主键从小到大排序，...
金融行业系统设计与咨询服务
业务系统设计咨询服务包含2项子服务，客户可以结合自身业务需求进行购买：基础咨询服务 针对单业务场景的系统，设计咨询服务包含以下内容：单业务场景系统复杂度判断标准参考：系统支持的业务覆盖1类用户，3种以内的核心业务模式，涉及2个...
SQL审核
现DMS推出的 SQL审核 功能将结合安全规则的SQL审核优化建议，对SQL进行审核并提供优化建议，您可以在安全规则中自定义SQL规范，例如表要有主键、限制主键列类型及限制主键包含列的个数等，更多信息，请参见 配置SQL审核优化建议。...
CREATE TABLE
未定义主键，会有以下行为：如果未定义主键和分布键，AnalyticDB for MySQL 将 自动添加一个列_adb_auto_id_作为表的主键和分布键。如果未定义主键，但定义了分布键，AnalyticDB for MySQL 不会自动添加主键。建表后，不能增加、减少或变更...
规划工作空间
工作空间规划实践 工作空间规划可按照公司部门、公司业务或数仓层次进行规划，或综合三种维度进行混合规划：细分 按部门划分 按业务划分 按数仓层次划分 划分依据 工作空间的划分可以与公司的组织架构相一致。例如：生产部、营销部、人力...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
配置并管理实时同步任务
功能 描述 为非主键表选择主键 如果来源库有主键，则同步数据时会使用该主键值作为kafka记录的key，确保同主键的变更有序写入kafka的同一分区。如果来源库没有主键：当勾选了 支持源表无主键同步，则无主键的表可以正常同步。此时写入kafka...
使用教程（时序模型）
您可以直接单击对应的模板快速地了解Flink产品功能和相关语法，实现您的业务逻辑，详情请参见 代码模板 和 数据同步模板。单击 下一步。填写作业配置信息。作业参数 说明 示例 文件名称 作业的名称。说明 作业名称在当前项目中必须保持唯一...
业产技融合分层协作方案
工作空间 工作事项 参与团队及职责 关键词 业务空间 客户诉求 用户反馈 业务团队：·收集来自客户/用户的原始诉求并录入业务空间·向产品团队澄清诉求内容·跟进原始诉求的交付进度·原始诉求完成开发后进行验收 产品团队：·评估业务团队...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
数据水印
相关人（可选）设置的相关人员都可查看工单，并协同工作，非相关人员则不能查看工单（管理员、DBA除外）。导出SQL语句（必选）填入可直接执行的SQL语句，例如 SELECT*FROM testtable，提交申请时DMS会自动校验语法正确性，如果不正确则无法...
MongoDB 7.0
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。使用MongoDB工具将自建数据库迁移至副本集...
MongoDB 6.0
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。使用MongoDB工具将自建数据库迁移至副本集...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
MongoDB 5.0
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。建议云数据库MongoDB的存储空间比自建MongoDB数据库占用的存储空间大10%。使用MongoDB工具将自建数据库迁移至副本集...
配置并管理实时同步任务
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。选择表建立方式 您可以在 表建立...
AT 模式接入
前提条件 在使用 AT 模式接入 GTS 前，请先完成以下工作：开通 GTS（创建事务分组）部署SDK 条件和约束 AT 模式的原理要求全局事务涉及的 数据库系统、Schema 和 SQL 语句 必须符合一定的规范。数据库系统 支持事务，目前支持 MySQL（RDS、...
配置并管理实时同步任务
功能 描述 为非主键表选择主键 由于当前方案不支持无主键表同步，所以您需要单击 同步主键 列的 按钮，为无主键表设置 自选主键，即选择表中一个或部分字段作为主键，写入目标端时将会使用该主键进行去重。选择表建立方式 支持 自动建表 和...
使用须知
Phoenix定位为OLTP和操作型分析（Operational Analytics），大多用于在线业务，稳定性要求第一位。Phoenix的功能很强大，也很灵活。本文结合大部分用户的经验，给出一些使用建议，希望能帮助更多用户少走弯路。重要 云数据库HBase的SQL功能...
DLA Lakehouse实时入湖
背景信息 数据湖分析（Data Lake Analytics）是⽬前炙⼿可热的⽅向，主要是以对象存储系统为核心，构建海量、低成本的结构化、半结构化、⾮结构化对象⽂件的入湖、存储和分析业务。⽬前各⼤云⼚商都在积极跟进，布局相关的业务能力，阿⾥云...
导出全量数据到OSS
起始主键和结束主键需要是有效的主键或者是由INF_MIN和INF_MAX类型组成的虚拟点，虚拟点的列数必须与主键相同。其中INF_MIN表示无限小，任何类型的值都比它大；INF_MAX表示无限大，任何类型的值都比它小。数据表中的行按主键从小到大排序，...
创建Hologres内部表
前提条件 工作空间已绑定Hologres引擎。详情请参见 绑定Hologres计算引擎。创建表的用户具备开发权限角色，空间管理员 或 开发。授权详情请参见 空间级模块权限管控。背景信息 Hologres的表类型分为内部表和外部表，其区别如下：内部表：可...
服务介绍
Search服务基于开源Solr深度定制，完全兼容开源Solr API，在系统稳定性、读写性能、监控告警上做了大量工作，提供更加可靠、高性能的企业级搜索平台。服务开通 开通Search服务需要三步：创建HBase集群，服务类型选择 增强版；创建BDS集群；...
- 产品推荐
- 这些文档可能帮助您