客户案例
解决方案 玩物得志基于阿里云DataWorks+MaxCompute框架搭建大数据平台，使用其核心存储、计算等组件、上层可视化及业务查询能力，在开源方案的基础上进行了二次开发。解决方案架构如下。详细案例信息，请参见 玩物得志案例。互联网社交案例...
DataWorks快速入门指引
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台，为了便于新用户快速了解DataWorks的数据开发治理操作全流程，DataWorks为您提供了...
金融大数据
架构优势：提供了结构化与非结构化数据的融合方案 满足了同时存在离线、在线、流数据的业务场景 解决了大数据平台的集成问题 为大数据平台的开发与管理提供了高效方案 金融风险控制方案 金融风险控制解决方案通过大数据画像、机器学习、...
Napatech案例
在网络和安全性应用领域率先使用基于FPGA的技术，通过FPGA可重构计算平台，向电信、金融行业客户及互联网公司提供网络管理和安全应用数据交付解决方案。业务挑战 随着网络数据流量的爆增以及业务可用性要求的不断提升，Napatech公司的用户...
GenerateDISyncTaskConfigForUpdating
DataWorks目前仅支持直接使用 UpdateDISyncTask 接口更新数据集成离线同步任务，而数据集成实时同步任务和解决方案同步任务则需要先调用GenerateDISyncTaskConfigForUpdating和 QueryDISyncTaskConfigProcessResult 接口，异步生成更新数据...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
DataWorks On EMR使用说明
背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。阿里云...
图扑案例
Lindorm 针对工业物联网数据高并发写入，实时存取等特点，创新性地融合时序、索引、宽表等多模引擎能力，为存储、分析低价值密度、高通量、高实时性的工业物联网监控数据提供了高性价比的最优解决方案，大幅度降低了数据存储和存储系统运维...
Tableau连接
背景信息 Tableau是安全并且灵活的端到端数据分析平台，提供从连接到协作的一整套功能。AnalyticDB PostgreSQL版 支持直接连接Tableau并可视化分析数据。前提条件 已准备好待添加的 AnalyticDB PostgreSQL版 数据源。操作步骤 下载并安装...
支持的数据源及同步方案
Lindorm数据源-LogHub（SLS）数据源-MaxCompute数据源-MariaDB数据源-Maxgraph数据源-Memcache（OCS）数据源-MetaQ数据源-MongoDB数据源-MySQL数据源-OpenSearch数据源-Oracle数据源-OSS数据源-OSS-HDFS数据源-PolarDB数据源-PolarDB-X 2.0...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
解决无法连接实例问题
数据库类型 错误信息 报错原因 解决办法 MySQL或MariaDB ERROR 2003(HY000):Can't connect to MySQL server on 'XXX'(10038或10060或110)无法连接到数据库：XXX 网络互通问题。确保ECS实例和RDS实例处于同一个地域。确保ECS实例和RDS实例的...
连接PostgreSQL实例
RDS PostgreSQL实例支持通过多种方式连接（如通过数据管理DMS、pgAdmin客户端、PostgreSQL命令行工具、应用程序等），实现您的业务目标。本文介绍这些连接方法的具体操作。前提条件 已创建RDS PostgreSQL实例。更多信息，请参见 创建RDS ...
连接PostgreSQL实例
购买RDS PostgreSQL实例并完成必要配置（创建账号、设置白名单）后，您就可以通过数据管理DMS、pgAdmin客户端、PostgreSQL命令行工具或应用程序等方式连接RDS PostgreSQL实例，实现您的业务目标。本文介绍这些连接方法的具体操作。前提条件...
恢复数据库
数据库备份DBS 提供数据恢复能力，通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中，可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作，请参见...
操作流程
流程图及说明 任务项 说明 创建解决方案 通过创建解决方案，将工作组内已加工完成的数据标准、数据模型、数据加工场景、数据服务API配置等信息，进行版本化解决方案封装。以整体解决方案为例，具体操作，请参见 新建解决方案。创建类型：...
IPsec-VPN连接常见问题
本文汇总了建立IPsec-VPN连接时出现协商失败、流量不通现象的常见原因并提供了相应的解决方案。常见问题快捷链接 IPsec-VPN连接协商问题 IPsec连接状态为“第一阶段协商失败”怎么办？IPsec连接状态为“第二阶段协商失败”怎么办？IPsec...
常见错误码及排查方法
解决方法：请检查Redis服务端状态，是否能正常连接，并修复Redis问题。DTS-30005 内部处理中保存元数据信息失败 DTS-30005:save changed job progress info failed cause:SQLException:result content unexpected.expect 3 time 1,actually...
数据传输作业：数据集成
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute，数据集成作业主要有三种类型：离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。离线同步 离线（批量）的数据通道通过定义数据...
聚合支付方案
业务痛点 武汉利楚商务服务有限公司（利楚扫呗）已覆盖全国400多个地级市，旗下商户数量70万家，每天处理交易数大约1200万笔，年受理交易金额2000亿元，成功为上百个行业提供聚合支付综合解决方案。随着业务持续扩张，利楚扫呗面临以下问题...
按应用关联
目前上报API和三方API暂时不支持被解决方案获取。逻辑表 对应数据建模中创建的逻辑表。说明 需在数据建模中创建逻辑表，且该逻辑表需被生产场景的场景节点引用。场景 对应数据开发生产状态的场景。说明 需在数据开发模块部署及运行生产场景...
快速体验
背景信息 本次实验根据零售电商行业的会员、商品、交易、物流、评价等业务数据计算出GMV（商品交易总额）、用户画像等数据供业务决策。您可以通过本次实验，了解到如下信息。了解一个项目从数据建模、数据同步（数据传输）、数据开发、运维...
云产品集成
大数据开发治理平台 DataWorks DataWorks 是一款为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。您可以使用 DataWorks 添加 ApsaraDB For OceanBase 数据源，管理 OceanBase 数据库中的数据，通过数据集成...
创建解决方案
数据开发模式全面升级，包括工作空间>解决方案>业务流程三级结构，抛弃陈旧的目录组织方式。背景信息 DataWorks对数据开发模式进行全面升级，按照业务种类组织相关的不同类型的节点，让您能够更好地以业务为单元、连接多个业务流程进行开发...
如何对JSON类型进行高效分析
针对海量半结构化数据计算与分析，本文将以半结构化数据JSON为例，首先简述传统数据库与数据仓库的解决方案，然后详细描述 PolarDB IMCI列式JSON、虚拟列、秒级加减列与表列数扩展等技术点，最后给出 PolarDB IMCI列式JSON实时分析与扩展流...
全增量实时同步至Hologres
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数，即同一时间内，当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
创建Hologres数据源
若您要使用DataWorks进行Hologres任务的开发、管理，需先将您的Hologres实例创建为...同时，可根据需要选择离线同步、实时同步、同步解决方案等场景执行相关数据同步操作。增删改查数据源：进入数据源管理页面执行编辑、删除等管理操作。
MySQL分库分表同步至Hologres（方案2.0）
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数，即同一时间内，当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
Paho-MQTT C#接入示例
本文介绍如何使用C#语言的Paho MQTT类库接入阿里云物联网平台，并进行物模型数据通信。前提条件 已在物联网平台中，创建了产品和设备，并在产品的 功能定义 页签下，定义一个LightSwitch属性。请参见 创建产品、单个创建设备 和 单个添加物...
数据使用诊断
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
车联网数据存储处理方案
本文从车联网的定义出发，结合行业趋势和国家规范，给出车联网通常需要采集的数据以及可以提供的服务。根据对车联网的业务特征的...方案详情&专家服务 解决方案详情参见：基于Lindorm的车联网数据存储处理方案。任何问题，欢迎联系 专家服务。
创建Kafka数据源
通过创建Kafka数据源能够实现Dataphin读取Kafka的业务数据或向Kafka写入数据。本文为您介绍如何创建Kafka数据源。背景信息 Kafka是一种消息队列，用于处理实时数据。Dataphin支持对接Kafka09、Kafka010、Kafka011。如果您使用的是Kafka，在...
创建Kafka数据源
通过创建Kafka数据源能够实现Dataphin读取Kafka的业务数据或向Kafka写入数据。本文为您介绍如何创建Kafka数据源。背景信息 Kafka是一种消息队列，用于处理实时数据。Dataphin支持对接Kafka09、Kafka010、Kafka011。如果您使用的是Kafka，在...
他云/自建数据库录入
目标数据库实例已购买网络解决方案。网络解决方案详情，请参见 连接本地IDC。注意事项 若需要通过数据管理DMS管理实例，请在创建实例时需根据实际需求设置数据库账号权限，具体授权语法可参考各数据库类型对应的官网文档。具体权限说明如下...
常见报错
报错概览 配置备份计划时常见报错 源库测试连接失败 备份恢复预检查时常见报错 源库连接性检查失败 数据库权限检查失败 OSS检查失败 源库binlog开启检查失败 源库binlog模式检查失败 源库binlog_row_image是否为FULL检查失败 源库server_id...
通过DMS连接Tair
解决方案：在DMS 数据库实例 列表中，右键单击目标实例，选择 编辑实例，然后选择 录入方式 为 连接串地址，将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Tair 客户端程序连接Tair
通过DMS连接Redis
解决方案：在DMS 数据库实例 列表中，右键单击目标实例，选择 编辑实例，然后选择 录入方式 为 连接串地址，将修改后的实例连接地址填写到 连接串地址 文本框中进行重试。相关文档 通过redis-cli连接Redis 客户端程序连接Redis
- 产品推荐
- 这些文档可能帮助您