功能发布记录（2024年）
2024.2.20 所有地域 所有DataWorks用户 数据上传 数据下载 数据开发新增CDH集群节点 您可在DataWorks上进行CDH相关的Hive、Spark、MR、Presto、Impala等任务的开发和周期性调度。2024.2.19 所有地域 所有DataWorks用户 创建CDH Hive节点 ...
TableTunnel
TableTunnel是访问MaxCompute Tunnel服务的入口类，仅支持表数据（非视图）的上传和下载。TableTunnel接口定义及说明 TableTunnel接口定义如下，详情请参见 Java-sdk-doc。public class TableTunnel { public DownloadSession ...
典型场景
文件上传：数据上传后，DLA元数据发现功能可自动发现并构建好元数据体系。数据ETL：DLA支持Spark，提供强大的数据ETL能力，把ODS层的原始数据清洗为结构化的DW数据。机器学习：DLA支持Spark，支持开源算法库。交互式分析：DLA提供Presto...
我是DBA
离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。数据可视化 数据可视化功能可让您更容易通过数据去洞察业务，辅助进行业务决策。比如分析趋势、增长对比...
我是管理员
离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。数据可视化 数据可视化功能可让您更容易通过数据去洞察业务，辅助进行业务决策。比如分析趋势、增长对比...
使用ETL分析实时订单
单击左上角的，在 新增数据流 对话框中，您需在 数据流名称 配置ETL任务名称，选择 开发方式 为 DAG。单击 确认。执行如下操作，配置流表和维表信息。配置流表信息 页面左侧，将 输入/维表 MySQL 节点拖拽至页面右侧画布的空白区域。单击...
管理快照
快照是某一时间点磁盘数据状态的备份文件，常用于日常数据备份、服务器数据误操作恢复、网络攻击恢复、制作自定义镜像等场景。本文介绍如何通过管理控制台创建、删除快照以及使用快照回滚磁盘、创建自定义镜像。使用限制 说明 轻量应用...
常见问题
本文档根据实践，介绍了本案例中比较常见的两个问题及解决方法。流计算中注册 RDS数据存储 失败。可能原因：您的RDS数据库与流计算项目不...参考文档：【流数据与大屏DataV】如何使用DTS，DataHub，StreamCompute，RDS及DataV搭建流数据大屏。
产品优势
本文介绍流数据服务Confluent的产品优势。流数据服务Confluent使客户的流处理服务享受Confluent platform的企业级特性。以下介绍Confluent的业界优势：Confluent是Apache Kafka的原创者开发的产品。Confluent团队撰写提交了80%的Kafka代码...
创建恢复任务
如果您已经为服务器创建了勒索防护策略，当该服务器被勒索病毒入侵后，您就可以通过创建恢复任务来恢复被勒索病毒加密的数据，降低勒索病毒给您带来的损失。本文介绍如何创建恢复任务、查看恢复任务状态以及删除已备份数据等操作。前提条件...
DataWorks V2.0
数据质量以数据集（DataSet）为监控对象，目前支持MaxCompute数据表和DataHub实时数据流的监控。当离线MaxCompute数据发生变化时，数据质量会对数据进行校验并阻塞生产链路，避免问题数据污染扩散。同时，数据质量提供了历史校验结果的管理...
集群开通
本文介绍如何开通和配置流数据服务Confluent集群。开通购买流程 在 流数据服务Confluent管控页 进行集群初始化配置、网络设置等，并完成商品购买和集群部署。目前，流数据服务Confluent开通的Region为：北京、上海、深圳。如有新增Region...
开通数据订阅
数据订阅功能可以帮助您获取Lindorm的实时增量数据，及时掌握数据的变化情况。您可以在Lindorm管理控制台开通数据订阅功能，并根据自身业务需求消费增量数据，搭建多种业务场景。本文介绍在控制台开通数据订阅功能的方法。前提条件 已开通...
流数据服务Confluent对比开源Kafka
本文介绍流数据服务Confluent相较于开源Kafka具备哪些优势。流数据服务Confluent vs Kafka的具体优势如下：特性 Apache Kafka Confluent Platform 提供Connect和Streams组件 支持 支持 多编程语言开发 Client：C++，Python，Go，以及.NET ...
轻量应用服务器数据迁移至ECS实例
重要 创建迁移任务后，目标ECS实例中的原数据将会清除（源服务器的数据不会被清除，例如您的源数据服务器为轻量应用服务器，轻量应用服务器的数据不会被清除）。如果ECS实例中存在重要数据，不推荐您使用该方式迁移。推荐您在迁移时，目标...
Control Center基本使用
Control Center是流数据服务Confluent的核心管理服务，提供了一个可视化的监控平台。本文介绍Control Center平台上的基本操作。详细的Control Center用户指南请参见 Control Center官方文档。登录Control Center 创建阿里云Confluent集群，...
如何配置跨域数据
当您在DataV中使用API数据源时，可能会遇到跨域的问题。本文为您介绍跨域问题的产生背景，并提供几种常见的解决跨域问题的方法。背景信息 用户A想创建一个可视化应用，用于向客户展示数据。当 数据源类型 选择 API 时，可能出现以下两种...
计费项
本文为您介绍轻量应用服务器、轻量应用负载均衡、轻量容器服务和轻量数据库服务 的计费项及其计费示例。计费项 轻量应用服务器 说明 本文中的价格仅为示例，具体价格以产品购买页显示为准。计费项 计费说明 计费方式 计费公式 套餐配置 ...
无法更换轻量应用服务器的操作系统
问题描述 重置系统可以重新安装服务器的应用或者操作系统，达到重新初始化服务器的目的。若您在阿里云轻量应用服务器控制台中，无法更换轻量应用服务器的操作系统，可参考本文进行操作。解决方案 阿里云提醒您：如果您对实例或数据有修改、...
流式ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
什么是ETL
ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据装载。在降低开发门槛和业务系统影响的同时提升效率，丰富企业实时数据处理和计算场景，赋能企业数字...
计费说明
本文介绍流数据处理Confluent的版本、计费项目和产品定价，帮助您快速了解计费详情，按需选择产品计费方式。版本介绍 流数据处理Confluent对外提供三个版本，不同版本提供的功能不同，价格也不相同，版本的功能如下：标准版 Standard 专业...
简单上传示例
Tunnel SDK是MaxCompute提供的离线批量数据通道服务，主要提供大批量离线数据上传和下载。典型的表数据上传流程 创建表，如果是分区表先创建分区。创建TableTunnel。创建UploadSession。创建RecordWriter，写入Record。提交上传。示例 ...
快速搭建移动应用上传回调服务
这就导致应用服务器无法得知用户上传了哪些数据，作为该App的开发者，就无法对应用上传数据进行管理。为此OSS提供了上传回调方案。流程介绍 上传回调的开发流程如下：OSS在收到Android/iOS移动应用的数据（上图中步骤5）和在返回用户上传...
创建服务器迁移任务
重要 创建迁移任务后，目标ECS实例中的原数据将会清除（源服务器的数据不会被清除，例如您的源数据服务器为轻量应用服务器，轻量应用服务器的数据不会被清除）。如果ECS实例中存在重要数据，不推荐您使用该方式迁移。推荐您在迁移时，目标...
迁移ECS实例至轻量应用服务器
阿里云数据传输DTS ECS实例中网站程序的数据库数据，将通过阿里云数据传输DTS迁移至轻量应用服务器的数据库中。关于DTS的更多信息，请参见 什么是数据传输服务DTS。注意事项 创建快照以备份数据。具体操作，请参见：ECS实例：创建快照。轻...
集群资源规格评估建议
阿里云流数据服务Confluent组成架构 阿里云流数据服务Confluent是一个流数据平台，能够组织管理来自不同数据源的数据，是一个稳定高效的系统。如下图所示，它由六个组件构成，分别为Kafka Broker、Rest Proxy、Connect、Zookeeper、ksqlDB...
续费
本文介绍如何给流数据服务Confluent续费。集群续费 首先进入 集群管控页，点击集群管理>选择相应的集群>点击右上角“续费”按钮。在续费详情页面，会展示当前集群的broker数量以及对应的配置信息，在付费时长下拉框选择要续费的时长，勾选...
服务器迁移中问题
本文介绍服务器迁移相关的故障问题及解决方案。日志报错提示子账号权限不足Forbidden.SubUser，怎么办？日志报错提示Forbidden.Unauthorized错误，怎么办？日志报错提示Your Account Haven't Completed Real-name Authentication错误，...
释放实例
您可以将数据备份到本地或者迁移至ECS实例，具体操作，请参见 搭建FTP服务器 或者 轻量应用服务器数据迁移至ECS实例。操作步骤 登录 轻量应用服务器管理控制台。在左侧导航栏，单击 服务器。在服务器卡片中，选择 更多操作>释放。在弹出的...
源服务器迁移至轻量应用服务器
服务器迁移中心支持将其他厂商轻量服务器（腾讯云轻量应用服务器、AWS Lightsail Instance和华为云云耀云服务器）、IDC服务器、虚拟机和其他云平台的云主机迁移至阿里云轻量应用服务器。本文介绍如何将其他厂商轻量服务器迁移至轻量应用...
源服务器迁移至轻量应用服务器
服务器迁移中心 支持将其他厂商轻量服务器（腾讯云轻量应用服务器、AWS Lightsail Instance和华为云云耀云服务器）迁移至阿里云 轻量应用服务器。本文介绍如何将其他厂商轻量服务器迁移至轻量应用服务器。前提条件 已导入迁移源信息。您...
数据上云工具
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
ECS中安装并使用SSRS报表服务
您可以在ECS实例中安装SSRS（SQL Server Reporting Services）报表服务器，然后基于RDS SQL Server的数据输出报表。本文介绍如何在ECS实例中安装并使用SSRS报表服务。背景信息 微软的SQL Server产品中包含SQL Server数据库引擎、Reporting ...
数据开发与运行
超过30M的资源需要通过[tunnel]（使用Tunnel命令上传下载数据）上传，上传后再使用MaxCompute资源功能添加到DataWorks进行后续的资源使用操作。详情请参考常见问题：通过odpscmd上传的资源如何在DataWorks上使用？通过odpscmd上传的资源...
新手指引
什么是轻量应用服务器 轻量应用服务器的产品优势 轻量应用服务器的应用场景 轻量应用服务器支持的镜像 轻量应用服务器的使用限制 轻量应用服务器与云服务器ECS对比 快速使用流程 轻量应用服务器快速使用流程如下图所示。准备工作 您需注册...
新功能发布记录
2022-08-03 轻量数据库服务概述 创建轻量数据库服务 通过DMS登录数据库（公网）通过命令行和客户端连接数据库（内网）开启和关闭公网访问地址 查看监控信息 重置数据库密码 续费数据库服务 查看错误日志和慢日志 修改数据库参数 2022年07月...
数据上传下载成本优化
本文为您介绍如何优化数据上传和下载的同步成本。尽可能使用经典网络和VPC网络 您可以使用内部网络（经典网络或VPC）实现零成本数据导入和导出。网络设置详情请参见 配置Endpoint。合理利用ECS的公共下载资源 如果您的ECS使用包月资源，...
审批中心概述
自定义审批策略后，后续进行表权限申请与审批、数据服务权限申请与审批、数据集成任务保存时，流程如 表字段权限申请与审批流程、数据服务权限申请与审批流、数据集成任务审批流程、扩展程序审批流程 所示。表字段权限申请与审批流程 在 ...
扩容
本文介绍流数据服务Confluent如何扩容。集群扩容 当您的集群出现数据业务瓶颈时可以选择扩容操作，当前集群只支持水平扩容。首先进入 集群管控页，点击集群管理>选择相应的集群>点击右上角“扩容”按钮。在扩容详情页面，从新增资源下拉...
- 产品推荐
- 这些文档可能帮助您