pg_database
目录 pg_database 存储有关可用数据库的信息。数据库通过CREATE DATABASE命令创建。和大部分系统目录不同，pg_database 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_database 拷贝，而不是每个数据库一份。列名称 列类型 ...
场景：配置增量数据离线同步任务
数据库语法 说明 可与调度参数结合实现每日读取指定时间区间的数据。MongoDB Reader query 说明 向导模式配置时，需要配置的界面参数名为：检索查询条件。基本与数据库一致 说明 可与调度参数结合实现每日读取指定时间区间的数据。OSS ...
管理数据库
背景信息 概念 实例：实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库。数据库：数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，可以简单理解为存放数据的...
管理数据库
背景信息 概念 实例：实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库。数据库：数据库是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，可以简单理解为存放数据的...
云原生能力
越来越多的客户使用云资源的方式已经在发生了改变，从应用到数据库都在向充分地利用云资源弹性、低成本等优势的方向发展，为了更好地支撑业务升级、架构升级，数据库也必然要进行升级。快速弹性 如上所述，借助于计算与存储分离的架构，...
创建数据库
您可以使用DMS（Data Management Service）、客户端（Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J）、业务系统中的程序代码或者MySQL命令行工具连接 云原生数据仓库...，然后通过CREATE DATABASE语句创建数据库...
数据处理
数据处理类节点包括串行数据处理节点。本文介绍在蓝图编辑器中，配置数据处理类节点的方法。串行数据处理节点 串行数据处理 节点，是使用串行方式来处理一个事件。使用场景：例如，小数0.835要转换成整数百分比83%，可经过：单位转换（83.5...
DataWorks资源组概述
资源组介绍 DataWorks包括独享资源组、公共资源组，各资源组根据任务调度、数据集成、数据服务等不同的使用场景，细分为不同类型的资源组，包括：独享调度资源组、独享数据集成资源组、独享数据服务资源组、公共调度资源组、公共数据服务...
调度概述
ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等，提升应用的性能和集群整体资源的利用率。本文介绍弹性调度、任务调度、异构资源调度、负载感知调度和精细化调度的主要功能。弹性调度 ACK为不同...
并行查询使用限制和兼容性问题
串行化隔离级别事务内的查询语句无法并行。隔离级别是Repeatable-read的情况下，事务内的INSERT.SELECT/REPLACE.SELECT查询部分无法并行。与串行执行结果可能不兼容的地方 错误提示次数可能会变化 串行执行中出现错误提示的查询，在并行...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
数据处理
数据处理类节点包括页面导航节点、并行数据处理节点、串行数据处理节点、序列执行节点和WebSocket节点。本文介绍在蓝图编辑器中，配置数据处理类节点的方法。页面导航节点 页面导航 节点，可用于实现页面跳转的功能，支持新开浏览器标签页...
查看并管理脚本实例
脚本实例是周期脚本任务按照定时调度时间运行生成的实例数据。后续您可以对脚本实例进行运维操作，支持的运维操作包括查看运行日志、重跑、强制重跑当前实例、强制重跑下游实例、查看节点代码等操作。本文为您介绍如何查看并管理脚本实例。...
查看并管理脚本实例
脚本实例是周期脚本任务按照定时调度时间运行生成的实例数据。后续您可以对脚本实例进行运维操作，支持的运维操作包括查看运行日志、重跑、强制重跑当前实例、强制重跑下游实例、查看节点代码等操作。本文为您介绍如何查看并管理脚本实例。...
调度模式
本文提供了您在调用API操作RPA客户端时可以设置的客户端调度状态。实例状态 状态说明 attend 不可调度 unmanned 可调度
资源调度概述
ACS兼容Kubernetes原生调度能力，支持不同类型的工作负载混合调度，并提供弹性资源、异构资源等精细化调度能力。本文介绍ACS兼容的Kubernetes原生调度能力和任务调度能力。兼容的Kubernetes原生调度能力 ACS兼容Kubernetes原生调度能力，但...
成本估算策略介绍
Pod成本的计算公式如下所示：权重值依据集群的调度水位确定，集群中CPU调度水位和内存调度水位的比例、权重的计算方式如下所示：CPU调度水位：内存调度水位：CPU权重：内存权重：使用示例 通过以下两种示例，展示如何选择成本估算策略。...
并发控制
插入 更新，删除，合并 平台 插入 不能冲突 更新，删除，合并 在可序列化时可能会冲突，WriteSerializable 中不能发生冲突 在可序列化和 WriteSerializable 中可能发生冲突 平台 不能冲突 在可序列化和 WriteSerializable 中可能发生冲突 ...
UpdateTaskFlowSchedule-更新任务流调度配置
其中 定时调度可配置调度一次或周期调度，事件调度可配置的订阅包括任务流和任务流节点。配置更新后，将任务流重新发布并部署，新的任务流实例将按照配置的调度设置进行调度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算...
设置节点调度状态
您可以通过容器服务控制台设置节点调度状态，从而合理分配各节点的负载。操作步骤 登录 容器服务管理控制台，在左侧导航栏选择 集群。在 集群列表 页面，单击目标集群名称，然后在左侧导航栏，选择 节点管理>节点。在 节点 页面中，在目标...
AI负载调度
弹性调度提供差异化调度ECS和ECI资源的能力，支持自定义弹性资源优先级调度策略。在应用发布或扩容过程中，按照自定义资源策略，设置应用实例Pod被调度到不同类型节点资源的顺序。同时在缩容过程中按照原调度顺序逆序缩容。例如在扩容过程...
kube-scheduler组件监控
队列种类如下：unschedulable：表示不可调度的Pod数量。backoff：表示backoffQ的Pod数量。active：表示activeQ的Pod数量。scheduler_pod_scheduling_attempts_bucket Histogram 调度器尝试成功调度Pod的次数，Bucket阈值为1、2、4、8、16。...
计算资源使用
补数据作业隔离 补数据作业即重刷数据作业，如果需要补很长时间的数据则会消耗很多资源，但是又不希望影响日常作业运行，那么您可以单独创建一个 Quota并设置好规则专门运行补数据作业。例如，DataWorks的调度任务发起补数据作业固定会传...
未来规划
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...
配置RDS MySQL间的数据集成任务
说明 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，因此建议您充分评估源库和目标库的性能，同时将调度时间点设定在业务低峰期。设置完成后，可单击 任务失败策略 右侧的 查看计划调度时间 来...
节点调度
您可以通过控制台设置节点调度状态，从而合理分配各节点的负载。前提条件 已创建集群 或 已导入集群 暂停调度 节点暂停调度后，在后续进行应用部署时，Pod 不会再调度到该节点。登录控制台，在左侧导航栏单击 集群管理>集群 详情，进入集群...
GPU节点调度属性标签
安装云原生AI套件的调度组件ack-ai-installer之后，您可以为GPU节点打上调度属性标签，帮助GPU节点启用共享GPU调度、GPU拓扑感知调度等能力。本文介绍GPU节点调度属性标签及如何切换标签的值。GPU节点调度属性标签说明 标签ack.node.gpu....
使用说明
支持数据库跨节点动态调度，秒级完成切换，极大提升实例整体并发读写能力。本文介绍 多主集群（库表）的使用说明。前提条件 已购买 多主集群（库表）集群。具体操作请参见 购买按量付费集群 和 购买包年包月集群。已创建高权限账号。具体...
登录数据库
相关文档 您也可以通过其他客户端工具来登录图数据库GDB实例，更多方式如下：通过开源组件GDB Console可视化控制台登录图数据库，可视化界面，操作简单，并可根据业务需求对可视化界面进行二次开发。具体操作，请参见 通过开源组件GDB ...
PostgreSQL节点
您需先将您的PostgreSQL数据库创建为DataWorks的PostgreSQL数据源，才可通过该数据源访问相应数据库的数据。详情请参见 PostgreSQL数据源。说明 PostgreSQL节点仅支持使用JDBC连接串方式创建的PostgreSQL数据源。（可选，RAM账号需要）进行...
SQL Server节点
您需先将您的SQL Server数据库创建为DataWorks的SQL Server数据源，才可通过该数据源访问相应数据库的数据。详情请参见 SQL Server数据源。说明 SQL Server节点仅支持使用JDBC连接串方式创建的SQL Server数据源。（可选，RAM账号需要）进行...
场景：调度参数在数据集成的典型应用场景
场景一：同步增量数据 重要 数据集成任务配置过程中，支持在数据过滤相关参数中使用调度参数，实现增量同步，同时您需要配置满足数据库的语法。增量同步详情请参见：场景：配置增量数据离线同步任务。示例1：将LogHub每十分钟内的增量数据...
EDAS应用支持金丝雀发布时指定任务调度比例
EDAS支持已接入SchedulerX的应用在金丝雀发布时指定任务调度比例规则。规则配置完成后，升级后的任务应用会经过小规模验证，验证通过后再全量升级，保障升级过程平稳无损。本文介绍如何将已接入SchedulerX的EDAS应用在金丝雀发布时配置任务...
StarRocks
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
- 产品推荐
- 这些文档可能帮助您