接入数据库实例
接入阿里云数据库实例时，目标数据库实例需要与DAS属于同一个阿里云账号 接入阿里云ECS自建数据库实例时，部署数据库实例的ECS需要与DAS属于同一个阿里云账号。操作步骤 登录 DAS控制台。在控制台首页的 热荐功能 区域，单击 快速实例接入...
常见术语
需要在开通主机或者部署数据库实例时指定地域，购买后暂不支持更改。可用区 Availability Zone（AZ）可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。MyBase Dedicated Cluster 在同一地域的...
常见问题
在数据水印的基础上，数据安全中心通过系统内置的异常事件检测，对运维高危操作、异常访问、拖库攻击、数据库注入、数据库外联、数据库高危操作等行为进行监控告警，覆盖传统数据库的基础上，还支持对象存储OSS、大数据平台MaxCompute以及...
常见问题FAQ
只有在部署数据库实例的时候，才会知道需要多少存储空间，实例用到的云盘存储是在部署实例的时候进行收费。如果 专属集群MyBase 的主机选择了本地盘，则部署实例的时候无需再计费。Q：主机到期有什么影响？A：详情请参见 主机续费。
接入阿里云ECS自建数据库实例
部署数据库实例的ECS与DAS属于同一个阿里云账号。接入方式说明 DAS支持以下三种接入ECS自建数据库方式：直连接入：无需部署DAS网关（DBGateway）,仅需要输入数据库账号和密码即可快速接入您的数据库实例。适合比较少的ECS实例，需要设置...
高可用架构部署方案
相较于使用单台ECS实例部署数据库与应用，高可用架构只需简单部署，并且拥有更高的稳定性和可扩展性。高可用架构特点 高可用架构具有如下特点：使用多可用区高可用版的负载均衡CLB（Classic Load Balancer）对多台云服务器ECS进行流量分发...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
DataWorks on EMR Serverless StarRocks最佳实践
了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一站式大数据开发治理平台，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、作业周期性调度，同时结合StarRocks引擎在数据分析和数据...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
创建SAP HANA数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长（单位ms），默认900000毫秒（15分钟）。说明 若您在JDBC...
创建IBM DB2数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 connectionTimeout 数据库的connectTimeout时长（单位s），默认900秒（15分钟）。说明 若您在JDBC ...
数据服务概述
在平台系统上进行简单配置，便可自动生产和部署数据服务，从而提升效率。功能介绍 数据服务支持基于业务数据源的物理表或Dataphin生成的逻辑表 创建服务项目分组 和 开发Dataphin数据源并加速数据查询，以满足不同场景的业务诉求。后续应用...
创建PostgreSQL数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长（单位s），默认900秒（15分钟）。说明 若您在JDBC URL中...
创建MySQL数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 connectTimeout 数据库的connectTimeout时长（单位ms），默认900000毫秒（15分钟）。说明 若您在JDBC...
创建ClickHouse数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 connection_timeout 数据库的connection_timeout时长（单位ms），默认900000毫秒（15分钟）。说明 若...
创建Microsoft SQL Server数据源
如下图所示：ECS ID：填写部署数据库的ECS服务器的ECS ID。您可登录 ECS控制台 进行查看。如下图所示：配置数据源的高级设置。参数 描述 loginTimeout 数据库的loginTimeout时长（单位s），默认900秒（15分钟）。说明 若您在JDBC URL中带有...
散点层
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
创建PolarDB MySQL版数据订阅通道
说明 建议配置同部署数据订阅客户端的 ECS 实例属于同一网络。例如ECS是专有网络，那么此处的网络类型选择为专有网络并指定ECS所属的 专有网络 和 虚拟交换机。通过内网地址进行数据订阅时，网络延迟最小。上述配置完成后，单击 授权白名单...
同步时源库为Db2 for LUW的注意事项及限制
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
自建Oracle间的数据迁移
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
经济版（ARM架构）性能&价格力观测
本文介绍如何在瑶池数据库控制台一键快速搭建资源完全对等的环境，对经济版（ARM架构）RDS MySQL与部署在ECS实例（X86架构）的自建MySQL基于Sysbench进行性能压测，实时动态查看性能、价格和性价比结果。背景 阿里云提供了两种体验方式：...
DataWorks模块使用说明
开放平台概览 任务备份、迁移-迁移助手 DataWorks迁移助手支持将开源调度引擎的作业迁移至DataWorks，支持作业跨云、跨Region、跨账号迁移，实现DataWorks作业快速克隆部署，同时DataWorks团队联合大数据专家服务团队，上线迁云服务，帮助...
部署方案
云数据库 OceanBase 支持包年包月和按量付费两种付费方式，部署方案支持多机房部署、双机房部署和单机房部署三种部署方案。高可用版本 多机房部署 云数据库 OceanBase 多机房部署指将三个节点部署在三个不同可用区，实现跨可用区容灾。每个...
减灾与应急时空解决方案与案例
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
使用EMR-CLI自定义部署Gateway环境
使用限制 本文档仅适用于数据湖集群（DataLake）、实时数据流集群（DataFlow）和数据分析集群（OLAP）的Gateway环境部署。对于已存在的Hadoop集群和Kafka集群的Gateway环境部署，详情请参见 创建Gateway集群。说明 如果您在2022年12月19日...
查看组件部署信息
在E-MapReduce集群中，不同版本的集群实例节点上会部署不同的服务角色。例如，HDFS中的NameNode会被部署在Master节点上。本文将为您介绍如何查看E-MapReduce集群中各节点上服务组件的部署信息。操作步骤 进入集群服务页面。登录 E-...
什么是EMR on ECS
EMR on ECS将EMR的大数据处理功能与ECS的容器化部署优势相结合，使得您可以更加灵活地配置和管理EMR集群，从而更好地适应复杂的数据处理和分析场景。通过EMR on ECS，您可以快速创建、管理和运维EMR集群，同时也能够更加高效地使用计算和...
使用MirrorMaker 2（Dedicated）跨集群同步数据
本文通过示例为您介绍如何通过EMR的集群脚本功能，快速部署使用MirrorMaker 2.0（MM2）服务同步数据。背景信息 本文的业务场景以EMR DataFlow集群作为目的集群，并且在目的集群中以Dedicated MirrorMaker集群的方式部署MM2，即EMR DataFlow...
产品架构
EMR自研能力 为让开源大数据组件和服务更好的运行在阿里云技术设施上，EMR自研了如下组件：数据应用平台，提供交互式开发、作业提交、作业调试和工作流一站式数据开发体验，详情请参见 EMR Studio概述。Shuffle Service是EMR在优化计算引擎...
在非EMR集群中部署JindoSDK
本文为您介绍在非EMR集群中部署JindoSDK的具体步骤。前提条件 已连接ECS实例。具体操作，请参见 连接ECS实例。部署JindoSDK 执行以下命令，下载4.6.2版本的JindoSDK JAR包。wget ...
HDFS的部署拓扑
本文分别为您介绍非高可用集群和高可用集群的HDFS组件的部署拓扑信息。非高可用集群 节点 组件 描述 master-1-1（部分版本为 emr-header-1）NameNode NameNode对外提供读写服务。SecondaryNameNode SecondaryNameNode合并NameNode的edits...
什么是数据库自治服务DAS
管理部署在多种环境的多种数据库的难度大。管理经验沉淀和传承的难度大。数据库的安全风险大 随着数据价值的提升，企业的数据面临着越来越多的内部或者外部的攻击，数据泄漏、数据丢失等问题层出不穷。未授权或者不可预期或者错误的数据库...
基于Kubeflow或Seldon的在线服务
您可以根据提供的dsdemo代码，将Tensorflow，Pytorch和Python等模型部署到Seldon中。前提条件 已创建DataScience集群，并且选择了Kubeflow服务，详情请参见 创建集群。已进行keras-API训练，详情请参见 基于Kubeflow的Training示例。下载...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
创建实例
选择商品类型 云原生多模数据库 Lindorm针对不同的使用场景，提供了Lindorm、Lindorm轻量版、Lindorm通道服务（LTS）、Lindorm AIGC体验版 Lindorm：独立集群的标准化部署方式，提供宽表、时序、搜索、文件、计算和流引擎。可用于大中型...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
PolarDB MySQL版迁移至Kafka
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
从自建Oracle迁移至PolarDB-X
DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，甚至导致数据...
新零售行业解决方案
方案价值：基于阿里云ADAM和 PolarDB PostgreSQL版（兼容Oracle）替代商业版数据库，优化IT的成本结构，每年不但节省大量License授权费用，并且极大地提升了系统可用性 应用和数据库都部署在云上，可以充分利用云资源的弹性能力，解决网络...
- 产品推荐
- 这些文档可能帮助您