产品架构
EMR自研能力 为让开源大数据组件和服务更好的运行在阿里云技术设施上，EMR自研了如下组件：数据应用平台，提供交互式开发、作业提交、作业调试和工作流一站式数据开发体验，详情请参见 EMR Studio概述。Shuffle Service是EMR在优化计算引擎...
什么是阿里云Cloudera CDP
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造的阿里云上的大数据平台。Cloudera CDP企业数据云平台 Cloudera企业数据云是社区版CDH的全新商业化升级产品，是阿里云和Cloudera联合打造阿里云上的大...
添加区块链服务数据源
使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好待添加的区块链服务数据源。添加区块链服务数据源操作步骤 登录 DataV控制台。...
页面介绍
本文介绍DataV数据看板的调试预览界面。预览模式 DataV服务支持两种数据看板预览的模式：普通预览 和 调试预览。普通预览：在蓝图编辑器右上方单击 图标下的 普通预览 时，DataV服务不会记录预览数据看板时的交互日志和报错信息。调试预览...
什么是RDS PostgreSQL
RDS PostgreSQL 阿里云关系型数据库RDS（Relational Database Service）支持PostgreSQL引擎，RDS PostgreSQL的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持，包括JSON数据、IP数据和几何数据等。除了完美支持事务、子查询...
数据导出服务
数据导出服务能将区块链上特定的区块、交易、合约事件导出到外部的数据库中，导出过程中保证事件的完整性，符合条件的事件会被推送到外部数据库至少一次。数据导出服务支持导出指定区块高度区间内的所有事件，也支持持续运行模式，准实时地...
什么是RDS MySQL
通用描述约定 描述 说明 本地数据库 指代部署在本地机房或者非阿里云RDS上的数据库。RDS XX（XX 为 MySQL、SQL Server、PostgreSQL或MariaDB）指代某一数据库类型的RDS，如RDS MySQL是指在RDS上开通的数据库引擎为MySQL的实例。
应用场景
阿里云数据库备份DBS支持将其他云上数据库备份到阿里云OSS上，通过相应的配置可以将跨云备份运行起来，成本可控，稳定性也有保障。优势：安全可靠：数据加密传输，避免数据库的服务端口显示至公网中，安全可靠。简单易用：现代化备份平台，...
添加区块链服务数据源
使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好待添加的区块链服务数据源。添加区块链服务数据源操作步骤 登录 DataV控制台。...
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
步骤二：规划数仓
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层...阿里云数据库：在阿里云上创建的数据库。ECS（VPC）自建数据库：使用（VPC）自建的数据库。高级设置 使用 默认配置。单击 测试连接。连通性测试通过后，单击 确定。
网络连通解决方案
添加数据源时需要根据数据源所在网络环境，通过对应的网络解决方案，实现Dataphin与数据源的网络连通。本文为您介绍数据源在不同网络环境中与Dataphin的网络连通方案。网络连通方案 根据数据源所在的网络环境，在下图中选择对应的网络连通...
跨链数据连接服务
跨链数据连接服务 Open Data Access Trusted Service(ODATS)，通过制定标准化的区块链UDAG全栈跨链协议，保证跨链交易的安全性、可扩展性及可靠性，打破区块链数据孤岛，实现同构及异构链之间的可信互通，助力企业之间可信协作，促进产业...
选购指南
阿里云区块链服务BaaS的产品系列包括已经商用的蚂蚁区块链、Hyperledger Fabric，以及免费试用中的企业以太坊Quorum。本文为您介绍商用产品的特点和适用场景，便于您根据业务现状选购阿里云BaaS产品。购买流程-蚂蚁区块链：为您介绍购买...
调试实时任务
Dataphin支持对开发的实时任务代码进行数据采样或者手动上传并进行本地调试，以帮助您保障代码任务的正确性，避免人为错误或遗漏。本文将为您介绍如何调试实时任务。使用限制 Blink仅支持引擎版本3.6.0及以上进行本地调试。不支持...
新建BLINK_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。离线模式依赖关系配置。单击 确定。步骤四：调试BLINK_SQL任务代码（可选）Dataphin支持调试已开发的BLINK_SQL代码。单击页面右上方的 调试按钮，可以对代码任务...
新建BLINK_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。离线模式依赖关系配置。单击 确定。步骤四：调试BLINK_SQL任务代码（可选）Dataphin支持调试已开发的BLINK_SQL代码。单击页面右上方的 调试按钮，可以对代码任务...
新建Flink_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。配置说明，请参见 离线模式依赖关系配置。单击 确定。步骤四：调试 FLINK_SQL 任务代码 Dataphin支持调试已开发的Flink_SQL代码。单击页面右上方的 调试按钮，...
新建FLINK_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。离线模式依赖关系配置。单击 确定。步骤四：调试 FLINK_SQL 任务代码 Dataphin支持调试已开发的Flink_SQL代码。单击页面右上方的 调试按钮，可以对代码任务采样...
数据上云工具
DataWorks数据集成（Tunnel通道系列）DataWorks数据集成（即数据同步），是一个稳定高效、弹性伸缩的数据同步平台，致力于为阿里云上各类异构数据存储系统提供离线全量和实时增量的数据同步、集成、交换服务。其中数据同步任务支持的数据源...
新建FLINK_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。离线模式依赖关系配置。单击 确定。步骤四：调试 FLINK_SQL 任务代码 Dataphin支持调试已开发的Flink_SQL代码。单击页面右上方的 调试按钮，可以对代码任务采样...
进入管理页面
区块链管理主要有以下部分：数据分类，在访问区块链网络前，管理员需要先与联盟方约定数据格式，在BaaS平台完成数据分类配置，多方上链数据均遵守数据分类的约束。邀请用户，您作为联盟 联盟管理员，邀请更多 联盟成员 加入您的联盟链。...
新建FLINK_SQL任务
依赖关系（必选）：配置依赖关系可帮助排查调试时快速了解数据的上下游任务。配置说明，请参见 离线模式依赖关系配置。单击 确定。步骤四：调试 FLINK_SQL 任务代码 Dataphin支持调试已开发的Flink_SQL代码。单击页面右上方的 调试按钮，...
RDS SQL Server如何收缩事务日志
说明 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，请务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前创建快照或开启RDS日志备份等功能。如果您在阿里云...
公共数据集成（调试）资源组：按量计费
运行在独享数据集成资源组上的任务不被计入公共数据集成（调试）资源组的数量，详情请参见 独享数据集成资源组计费说明：包年包月。说明 每日实例数量如果达到120,000以上，则超出实例数量的上限阈值，导致实例无法正常调度运行。如果您的...
添加数据源概述
数据源类型 数据源 说明 数据库类 说明 如果您在其它地域，或者没有使用阿里云数据库，想连接自建数据库，那就需要暴露数据库的公网IP进行连接。DataV当前不支持IP白名单，如果您担心安全性问题，可以使用阿里云提供的数据库连接代理工具来...
配置ClickHouse输出组件
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
应用场景
上线1年，总计有38家公益机构、355个公益项目上链（截止2017年07月）。互助保险 这种模式是基于特定人群自发组织成一个保险风险池互帮互助，无中心信任背书。此时，如何提高保险资金的公平合理使用就显得尤为重要。利用区块链技术公示所有...
云产品流转
使用物联网平台规则引擎的数据流转功能，可将Topic中的数据消息转发至其他Topic或其他阿里云产品进行存储或处理。重要 同一组数据请勿同时开通云产品流转和服务端订阅两种订阅模式，避免消息干扰。配置SQL 登录 物联网平台控制台，单击实例...
配置ClickHouse输出组件
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
开始使用REST服务
可靠性服务：幂等控制、可靠上链、可靠推送、异常重试、交易数据持久化，智能路由能够选择最优节点来发起上链交易。稳定性保障：限流降级、细粒度监控告警。安全性护航：AK/SK及访问令牌、TEE链加密交易 高性能支撑：结合数据分片、水平扩...
使用应用程序访问本地或第三方云数据库
除此之外，DG还提供数据库访问点功能，您部署在阿里云ECS上的应用程序，通过该访问点，也可以直接访问本地或第三方云数据库。使用DMS管理本地或第三方云数据库。使用DTS迁移本地或第三方云数据库。使用DBS迁移本地或第三方云数据库。什么是...
前言
数据库是企业最重要的...凭借自身实力，PolarDB已经赢得了超过数千客户的信任，目前，已有超过1万个业务系统和生产实例运行在PolarDB上，在政务、能源、运营商、金融、互联网等行业实现了规模化的市场应用，是阿里云上增长最快的数据库产品。
跨链服务
跨链数据连接服务目前正在公测中，试用申请 跨链服务调用链路 使用跨链数据连接服务，需要将区块链在跨链数据连接服务上进行注册，并安装跨链合约，用户的业务合约通过与跨链合约交互来完成不同链之间的信息交互。数据交互方式 目前跨链...
申请区块链
您可以申请创建联盟链部署属于您自己的区块链，成为区块链的 管理员，管理员可以 邀请用户 成为区块链的联盟方，还可以通过 配置数据分类 约定联盟内上链数据的格式。如果您是受邀请加入区块链的 联盟方，可以跳过上述步骤，直接 申请加入...
示例项目使用说明
本地运行 这里主要介绍如何在本地运行Spark程序访问阿里云数据源，例如OSS等。如果希望本地调试运行，需要借助一些开发工具，例如IntelliJ IDEA或者Eclipse，尤其是对于 Windows环境，否则需要在Windows机器上配置Hadoop和Spark运行环境。...
查询日志
对于这种情况，您可以通过阿里云Logstash提供的管道配置调试功能，在管道配置完成后，直接在控制台上通过调试日志查看管道配置的输出结果，降低调试成本。详细信息，请参见 使用Logstash管道配置调试功能。调试日志默认关闭，您需要通过...
创建ClickHouse数据源
ECS(VPC)自建数据库：您在阿里云ECS上自建的数据库。支持VPC方式访问。VPC网络访问数据库需配置以下信息：区域：据库所在Region。仅支持Dataphin实例相同区域的数据库。如您的Dataphin实例为华东2（上海），仅支持选择华东2（上海）区域。...
使用限制
本文总结了区块链服务在功能方面的使用限制。通用限制 限制项 说明 访问底层云资源 为保证区块链服务的安全和稳定性，不支持用户直接访问底层云资源，如ECS、Kubernetes集群、Docker容器、NAS文件系统、云盘等等。如有相关问题或需求，可...
数据湖构建服务条款
提示条款 欢迎您与阿里云计算有限公司（以下简称“阿里云”）共同签署本《阿里云产品服务协议》（下称“本协议”）并使用阿里云服务！协议中条款前所列索引关键词仅为帮助您理解该条款表达的主旨之用，不影响或限制本协议条款的含义或解释...
- 产品推荐
- 这些文档可能帮助您