什么是DataWorks

从2009年起,DataWorks不断沉淀阿里巴巴大数据建设方法论,支撑数据中台建设,同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手,不断提升数据应用效率,助力产业数字化升级。产品架构 DataWorks十多年...

产品优势

多场景支持:支持离线数仓搭建、数仓提速、离线数据分析、数据中台搭建、规模数据集成、离线计算、异构数据集成等。低门槛:近乎零代码,简单配置连线后即可满足各项离线数据集成任务,同时任务支持复杂调度。基于资产的虚拟湖:配合数据...

添加处理后数据数据管理

数据处理后,需要将处理后的数据添加到数据管理中,以便被用于数仓建设、标签管理等数据中台任务。本文以倾斜数据处理后为例,介绍如何添加处理后数据数据管理。前提条件 已新建数据处理任务,具体操作,请参见 新建数据处理任务。操作...

数据服务

背景信息 数据服务提供了数据中台建设过程中的数据服务化能力,面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力;面向数据资产管理者提供服务的统计分析、服务用量统计分析,实现数据中台...

空间数据(邀测

入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库,方便对空间数据库进行空间检索、数据质检、血缘记录,打通数据...,使得空间数据被用于数仓建设、标签管理等数据中台任务...

功能简介

入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库,方便对空间数据库进行空间检索、数据质检、血缘记录,打通数据...,使得空间数据被用于数仓建设、标签管理等数据中台任务...

添加入库任务

入库后,方便对空间数据库进行空间检索、数据质检、血缘记录,打通数据计算引擎链路,使得空间数据被用于数仓建设、标签管理等数据中台任务。本文主要介绍如何添加入库任务。前提条件 已添加文件类矢量数据,具体操作,请参见 添加文件类...

准备工作

开通企业数据智能平台 企业数据智能平台默认为关闭状态,使用前需要前往 AnalyticDB PostgreSQL版 控制台开通。登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角,选择实例所在地域。...单击 开通数据中台

应用场景

构建数据中台,行业领域模型快速沉淀 场景:快速构建数据仓库,有效治理数据质量,实现政企客户各部门数据的业务协同和共享。痛点:以政务服务为例,政务服务部门众多,业务系统复杂、流程长,数据来源多且更新频率高;数据口径标准、数据...

客户案例

基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率,构建大润发的数据中台体系。新金融行业:某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的,同时引入的数据中台...

功能简介

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API,支持的API类型包括...

将云消息队列 Kafka 版的数据迁移至MaxCompute

在数加(一站式大数据平台),DataWorks控制即为MaxCompute控制。MaxCompute和DataWorks一起向用户提供完善的数据处理和数仓管理能力,以及SQL、MR、Graph等多种经典的分布式计算模型,能够更快速地解决用户海量数据计算问题,有效...

统一服务

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、和空间服务API。支持创建...

功能简介

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、空间服务API。支持创建、...

大数据安全治理的难点

通常,大数据系统的工作流涉及多部门、多责任人且跨系统的数据,如何才能协调好这些业务系统准时、保质保量地产出数据,避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据,关乎到企业数据业务的连续性问题甚至高层的信任问题...

DataWorks数据服务对接DataV最佳实践

在大屏中调用数据服务API 进入DataV控制台中的 我的可视化 页面,单击 新建可视化。选择一个模板,单击 创建,本文以 智能工厂 模板为例。模板中的组件自带了静态数据,下文将以把模板中间的基本折线图改为调用上文创建好的查询成交金额...

回收站列表

回收日期 数据表(包括逻辑表和物理表)在治理工作台中被删除后,会被移至回收站。您在治理工作台中删除数据表的时间即为回收站中的回收日期。操作日期 清除数据表的日期。回收状态 数据表的 回收状态。清除表 清除后的数据表不支持再次...

数据管理DMS服务器监控数据的采集频率

本文对数据管理控制台中服务器监控数据刷新频率进行说明。通过“登录服务器”,进入到服务器管理界面,“实时监控”显示的数据,是每隔5秒左右获取一次数据,如下图。关闭、退出服务器管理界面,会自动停止“实时监控”数据的采集。数据...

手动添加数据

您可以通过 数据库备份DBS 的手动添加数据源功能,将不同环境的数据库添加至 数据库备份DBS ,便于后续对数据源进行管理与备份。费用说明 添加数据源操作不会产生费用,只有在添加数据源后开启备份才会产生费用。如何开启备份,请参见 ...

清除数据

操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Tair实例列表,在上方选择地域,然后单击目标实例ID。在 实例信息 页面,单击右上角的 清除数据。在弹出的对话框中,选择待清除的对象:图 1.清除...

清除数据

操作步骤 说明 在 参数设置 中禁用 FLUSHALL 命令不会影响控制台中 清除数据 功能。访问 Redis实例列表,在上方选择地域,然后单击目标实例ID。在 实例信息 页面,单击右上角的 清除数据。在弹出的对话框中,选择待清除的对象:图 1.清除...

主备方案介绍

数据库HBase存储海量大数据,在业务场景往往承载着重要数据,为保障数据的高可用性和安全性,云数据库HBase提供了主备活和主备容灾特性。本文介绍云数据库HBase的主备活和主备容灾特性功能。使用场景 主备活:大数据量随机读响应...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

发展历程

全球两大热门计算存储标准化开源体系之一的ORC(Optimized Row Columnar)社区的PMC(Project Management Committee),MaxCompute成为近两年贡献代码量最多的贡献者,引导存储标准化。MaxCompute积极投入全球热门的优化器项目Calcite,...

从ECS上的自建SQL Server同步至云原生数据仓库...

如果选择为 是,且存在下述情况,DTS在结构初始化阶段和增量数据迁移阶段会为目标对象添加单引号或引号:源库所属的业务环境对小写敏感且小写混用。源表名不是以字母开头,且包含字母、数字或特殊字符以外的字符。说明 特殊字符仅...

从ECS上的自建SQL Server同步至云原生数据仓库...

如果选择为 是,且存在下述情况,DTS在结构初始化阶段和增量数据迁移阶段会为目标对象添加单引号或引号:源库所属的业务环境对小写敏感且小写混用。源表名不是以字母开头,且包含字母、数字或特殊字符以外的字符。说明 特殊字符仅...

基本介绍

背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库,从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求,支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...

概述

优势 云原生数据仓库AnalyticDB PostgreSQL版 向量数据库通过自研向量引擎FastANN提供的向量分析能力目前已经在诸多业务中得到了广泛应用,包括阿里巴巴数据中台,阿里巴巴电商新零售业务,阿里云城市大脑,通义千问模型搭建的问答服务等...

功能简介

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力,帮助用户在数据开发等过程中...

RDS MySQL修改字符集(平滑方案)

由于业务需求,需要变更表的字符集(例如从gbk变更为utf8mb4),如果直接使用ALTER命令修改字符集会锁表,当数据表过时,对业务的影响较。本文介绍的操作方法需要先在目标实例创建表结构信息(新字符集),再通过DTS将源实例的数据...

公交出行:启迪公交

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...

Dataphin支持的数据

资产质量概述 数据服务 数据服务(OneService)是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛的同时,保障了数据开放的安全。数据服务概述 标签工厂 标签...

从RDS SQL Server同步至云原生数据仓库AnalyticDB ...

如果选择为 是,且存在下述情况,DTS在结构初始化阶段和增量数据迁移阶段会为目标对象添加单引号或引号:源库所属的业务环境对小写敏感且小写混用。源表名不是以字母开头,且包含字母、数字或特殊字符以外的字符。说明 特殊字符仅...

从RDS SQL Server同步至云原生数据仓库AnalyticDB ...

如果选择为 是,且存在下述情况,DTS在结构初始化阶段和增量数据迁移阶段会为目标对象添加单引号或引号:源库所属的业务环境对小写敏感且小写混用。源表名不是以字母开头,且包含字母、数字或特殊字符以外的字符。说明 特殊字符仅...

新零售:特步

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍特步(中国)有限公司如何通过 PolarDB-X 应对...

从ECS上的自建MySQL同步至RDS

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。定位至已购买的数据同步实例,单击该实例...

Redis企业版实例间的双向同步

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。配置正向同步作业。定位至已购买的数据...

Redis企业版实例间的双向同步

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。配置正向同步作业。定位至已购买的数据...

ETL工作流快速体验

GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基础版 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub提交次数最多的代码语言数据,在DataStudio 数据开发 模块通过函数...

PolarDB MySQL版间的双向同步

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据同步。在 同步作业列表 页面顶部,选择同步的目标实例所属地域。配置正向同步作业。定位至已购买的数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 云数据库 Redis 版 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用