采集数据
步骤二：搭建同步链路 新建业务流程 单击左上方的 图标，选择 全部产品>数据开发与运维>DataStudio（数据开发）。在 数据开发 面板，右键单击 业务流程，选择 新建业务流程。在 新建业务流程 对话框中，输入 业务名称 和 描述。重要 业务...
如何迁移到DBFS？
一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步数据到自建于DBFS上的数据库。DTS：使用阿里云产品DTS，将数据迁移到自建于DBFS上的数据库。备份恢复：通过备份的方式，将数据库恢复到DBFS上，拉起数据库，同步最新...
使用MongoShake实现MongoDB实例间的延迟同步
搭建MongoDB间的延迟同步架构 本示例以ECS上的Ubuntu系统为例介绍如何搭建延迟同步架构。详情请参见 使用MongoShake实现MongoDB实例间的单向同步。登录ECS实例，具体请参见 登录ECS实例。执行如下命令格式下载MongoShake程序。wget 最新版...
降采样操作
当MetricStore属性页中原始时序库数据保存时间发生改变时，将自动同步到降采样配置的该字段中，无需自行更改。如果发生了某些特殊情况导致MetricStore属性页中的数据保存时间和降采样配置中记录的时间不一致，可以手动单击 同步。降采样...
小程序端性能体验功能说明
全局采样为冷启动的采样，即本次启动在不在采样范围内，如果冷启动没有被采样，各项性能指标也不会被采样。告警监控 提供灵活、准确度高的监控告警功能。您可以根据需求精细制定告警计划：通过错误类型、版本、生效时间以及阈值型或者比较...
2023年
本文为您介绍了MaxCompute 2023年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2023年12月更新记录 时间 特性 类别 ...
2019年
日志服务数据如何同步到MaxCompute 2019-11-15 监控报警新增监测MaxCompute按量付费的Project的作业消费情况。新说明 监控报警新增监测MaxCompute按量付费的Project的作业消费情况。监控报警 2019-11-12 新增MaxCompute JDBC介绍。新...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
从RDS同步至MaxCompute
通过数据传输服务DTS（Data Transmission Service），您可以将 RDS MySQL 或RDS MySQL Serverless 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 您已完成以下操作：开通MaxCompute 创建项目 注意事项 DTS在执行全量...
RDS MySQL同步至MaxCompute
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 RDS MySQL 的数据同步至MaxCompute，帮助您快速搭建数据实时分析系统。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息，请参见 开通MaxCompute和DataWorks ...
消费-搭建监控系统
中间件使用API消费数据 通过SDK的PullLog接口从日志服务批量消费日志数据，并且把数据同步到下游实时计算系统。搭建storm实时计算系统 选择storm或者其他的类型的实时计算系统，配置计算规则，选择要计算的监控指标，计算结果写入到OTS中。...
数据总线的审计事件
数据总线已与操作审计服务...SampleShard Shard采样。SplitShard 分裂Shard。UpdateConnectorField 更新同步点列信息。UpdateConnectorState 更新同步点状态。UpdateProject 更新项目信息。UpdateTopicsForKafkaGroup 更新Topic的Kafka分组。
通过image-syncer工具迁移容器镜像
在Kubernetes集群迁移场景中，镜像仓库之间进行镜像迁移和同步是基本需求，image-syncer工具可以解决通用的容器镜像批量迁移和镜像同步复制的问题，将已有的容器镜像平滑地迁移到阿里云镜像服务ACR上。本文主要为您介绍如何通过image-...
通过image-syncer工具迁移容器镜像
在Kubernetes集群迁移场景中，镜像仓库之间进行镜像迁移和同步是基本需求，image-syncer工具可以解决通用的容器镜像批量迁移和镜像同步复制的问题，将已有的容器镜像平滑的迁移到阿里云镜像服务ACR上。本文主要为您介绍如何通过image-...
LogHub（SLS）实时ETL同步至Hologres
本文为您介绍如何LogHub（SLS）实时ETL同步至Hologres任务。新建数据源 配置LogHub（SLS）数据源 您可以手动添加LogHub（SLS）数据源至DataWorks，详情请参见 配置LogHub（SLS）数据源。新建Hologres数据源 获取Hologres数据源信息 进入 ...
数据同步概述
实时数仓Hologres是一款兼容PostgreSQL 11协议的实时数仓，与大数据生态无缝连接，支持高并发地实时写入，数据写入即可查，同时也支持离线数据的加速查询、实时数据和离线数据联邦分析，助力快速搭建企业级实时数仓。Hologres数据同步说明 ...
创建异地灾备实例
主实例和灾备实例均搭建主备高可用架构，当主实例所在区域发生突发性自然灾害等状况，主实例（Master）和备实例（Slave）均无法连接时，可将异地灾备实例切换为主实例，在应用端修改数据库连接地址后，即可快速恢复应用的业务访问。...
应用场景
阿里云提供了非常完善的BI体系，DTS可以帮助您将自建数据库实时同步至阿里云的BI存储系统（例如MaxCompute、分析型数据库或流计算等），助力您在阿里云上快速搭建满足自身业务的定制化BI系统。数据实时分析 传输方式：数据订阅 数据分析在...
搭建高可用架构
创建异地灾备实例：通过 数据传输服务（DTS）实现主实例和异地灾备实例之间的实时同步。主实例和灾备实例均搭建主备高可用架构，当主实例所在区域发生突发性自然灾害等状况，主节点（Master）和备节点（Slave）均无法连接时，可将异地灾备...
功能特性
2、多屏同步 支持同门店设备，实现播放内容250ms内同步。3、内容排版 内容排版，实现客户快速搭建模板，实现图文内容快速生产，降低设计师工作量。4、AI巡检 重要 本功能仅升级版提供。自动化巡检机制，通过门店定时截屏，算法比对预期结果...
Oracle同步至Tablestore
本文以Oracle同步至表格存储Tablestore场景为例，为您介绍如何通过数据集成将Oracle的某张表数据实时同步到Tablestore。使用限制 本实践仅支持使用 独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以Oracle作为...
镜像同步加速
自定义同步链路：使用自定义的云企业网，为不同地域搭建私网通信通道，实现跨地域网络互通。如果跨境同步加速功能不能满足您对同步实例时延的要求，您可以使用自定义同步链路来进一步加快镜像同步速度。说明 公有云Region不支持同步至非...
同步 OceanBase 数据库的数据至 Kafka
背景信息 Kafka 是目前广泛应用的高性能分布式流计算平台，数据传输支持 OceanBase 数据库两种租户与自建 Kafka 数据源之间的数据实时同步，扩展消息处理能力，广泛应用于实时数据仓库搭建、数据查询和报表分流等业务场景。前提条件 数据...
产品优势
通过端侧预聚合技术以及自适应采样技术，确保数据准确性不受采样率影响，在大规模场景下有着明显的成本优势。通过容器服务ACK接入可以享受计费减半的优惠，通过叠加资源包（最高2折），能进一步降低费用成本。ARMS应用监控与开源产品对比 ...
Kafka单表实时入湖OSS（HUDI）
创建同步任务 进入 数据集成主站，单击 同步任务 进入同步任务页面，在页面中单击 新增任务，开始配置同步任务。配置同步任务基本信息。任务名称：自定义。同步类型：来源数据源选择Kafka，去向数据源选择OSS，并选择 单表实时同步 方案。...
同步方案选取指南
当您在使用关系型数据库（RDS）遇到查询慢的问题时，可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，可近乎于准实时地存储、查询和分析超大数据集。您可以通过...
Kafka实时ETL同步至Hologres
实时ETL同步方案根据来源Kafka指定Topic的内容结构对目的Hologres表结构做初始化，然后将Kafka指定Topic的存量数据同步至Hologres，同时也持续将增量数据实时同步至Hologres。本文为您介绍如何创建Kafka实时ETL同步至Hologres任务。使用...
网络时间同步助手
本文介绍如何通过函数计算部署网络时间同步助手，实现设备本地时间与网络时间同步。如果您的设备上已经安装了NTP服务，有和云端服务器周期性同步系统时间的能力，则无需操作本文内容。前提条件 本示例仅适用于Link IoT Edge专业版，在开始...
概述
数据同步过程中，数据源中的数据存储在目标数据仓库OSS中，搭建数据仓库过程中不会对数据源端的业务系统产生任何压力。通过DLA控制台配置建仓任务，支持自定义设置定时数据投递。极致的计算能力，充分发挥DLA的计算能力，通过DLA的大内存、...
将内网解析记录同步至自建DNS
本文主要介绍企业在混合云网络场景下，如何通过内网DNS解析配置内网DNS解析记录，并同步至自建DNS。业务场景 自建IDC与阿里云VPC通过专线或者VPN进行网络连通。部署在自建IDC和阿里云VPC内的业务均需要通过DNS查询进行业务间调用。因此需要...
如何PrivateZone同步至自建DNS
本文主要介绍企业在混合云网络场景下，如何通过PrivateZone实现内网DNS记录的配置，并同步至自建DNS。业务场景 自建IDC与阿里云VPC通过专线或者VPN进行网络连通。部署在自建IDC和阿里云VPC内的业务均需要通过DNS查询进行业务间调用。因此...
通过SCIM同步Okta用户或用户组的示例
本文为您介绍通过SCIM协议，将Okta中的用户或用户组同步到云SSO。前提条件 基于SCIM的用户同步适用于开通云SSO的企业用户。背景信息 假设企业在本地IdP Okta中有大量用户，且已在阿里云资源目录（RD）中搭建了多账号体系结构。企业希望经过...
搭建小程序
商品设置 搭建小程序前，建议商家先完成商品相关的管理与配置，如商品的同步、上下架、零售价修改、分类分组等，如果同步自天猫的商品信息中含有特殊信息如特价、促销价等多端无法匹配的信息，需要删除或修改。说明 商品设置详情请参考运营...
引擎指标
采样聚合：对采样周期内的数据采用的聚合方式。overview（概况）指标 指标含义 说明 Tags 聚合算子 elasticsearch-server.search_total 端到端查询QPS 每秒端到端查询次数。例如客户端每秒发送两个查询index的请求，则search_total为2。...
CREATE TABLE AS（CTAS）语句
通过CTAS语句，在实时同步数据的同时，还能实时将上游表结构（Schema）的变更同步到下游表，提高您在目标存储中创建表和维护源表结构变更的效率。本文为您介绍CREATE TABLE AS（CTAS）的使用方法，并提供了多种使用场景下的示例。前提条件 ...
通过对接外部LDAP登录云原生AI控制台
可选：搭建Keycloak。具体操作，请参见 部署KeyCloak应用。配置Keycloak对接OpenLDAP，并同步用户信息至Keycloak。具体操作，请参见 配置Keycloak应用。在KeyCloak中添加阿里云为SAML服务提供商。具体操作，请参见 添加阿里云为SAML服务...
数据采样
是 随机采样 随机采样 平均采样 固定间隔行数采样 固定时间周期采样 固定区域采样 随机采样、固定区域采样 参数名 参数描述 是否必填 参数默认值 参数范围 采样数量获取方式 按行数：按指定的行数进行采样。按比例：按指定的比例进行采样。...
调用链采样模式选择
与固定采样率不同，自适应采样通过引入多项采样命中策略，动态决定是否对一条链路进行采样，从而解决固定采样率在小采样率下的覆盖度问题以及大采样率下的成本问题。在大流量场景，以及业务流量变化比较大的场景，推荐您选择自适应采样模式...
预降采样
预降采样可以在数据写入时就按指定时间粒度对数据进行预计算并单独存储，降采样查询时可以自动查询匹配到的预降采样数据，以降低访问延迟。本文介绍预降采样的概念，创建和管理预降采样规则的方法，查询预降采样数据的方法，以及预降采样的...
分析实例简介
RDS MySQL提供分析实例功能，可以将RDS MySQL主实例中的数据自动同步到分析实例中，解决RDS MySQL复杂分析与查询时卡顿的问题，实现毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。使用场景 随着企业业务发展，精细化实时运营诉求...
- 产品推荐
- 这些文档可能帮助您