什么是ETL
数据传输服务DTS提供的流式数据ETL（Extract Transform Load）功能是一种高效的实时数据加工工具。ETL支持通过可视化拖拉拽操作、Flink SQL语句配置任务，并结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换和加工、数据...
实例规格说明
数据库类型：目前推荐MySQL 5.7，PostgreSQL 10.x，MongoDB等。dbfs.medium CPU：单个DBFS最多占用0.5 vCPU。内存：单个DBFS最多占用1.0 GiB。业务场景：通用场景，可用于小型在线事务及低成本分析型数据库；NoSQL数据库。数据库类型：目前...
实施步骤
本文主要介绍搭建DataV数据大屏的操作步骤。步骤一：购买DataV基础版 登录 DataV管理控制台，本教程使用 兼容MySQL 方式连接DLA服务，所以购买DataV基础版即可满足要求。步骤二：添加DLA数据源 在添加数据源之前，您必须先为您的DLA配置白...
全量数据同步
gz>10000 说明 全量同步工资大于10000的银行客户数据。在 目标端配置 区域，配置目标端数据。参数 说明 示例 目标端 数据写入目标端的数据源类型以及该类型下已添加的数据源。MaxCompute/dataq_odps_dev 数据表 数据源中数据实际写入的表。...
云数据库Redis版与自建Redis的对比
相比自购服务器搭建Redis数据库，云数据库Redis版 在数据安全、运维投入、内核优化等方面都有一定的优势。对比项 云数据库Redis版 自建Redis 安全防护 事前防护：VPC网络隔离。白名单控制访问。自定义账号与权限。事前防护：需自行构建网络...
产品优势
特性 Lindorm时序引擎 OpenTSDB 运维管控 服务可用性 99.9%需自行保障，自行搭建集群，自建组件依赖 数据可靠性 99.9999%需自行保障，自行搭建集群，自建组件依赖 软硬件投入 无软硬件投入，按需付费 数据库服务器成本相对较高 维护成本 ...
增量数据同步
gz>10000 说明 同步工资大于10000的银行客户数据。在 目标端配置 区域，配置目标端数据。参数 说明 示例 目标端 数据写入目标端的数据源类型以及该类型下已添加的数据源。MaxCompute/dataq_odps_dev 数据表 数据源中数据实际写入的表。若...
DataWorks交流钉钉群
说明 从2009年飞天大数据平台写下第一行代码开始，DataWorks历经10年发展，形成一套成熟的产品功能体系，满足企业数据中台搭建需求。在阿里巴巴内部，每天有数万数据、算法开发工程师正在使用DataWorks。您需要先单击 申请链接 加入“阿里...
MyBase与自建数据库对比优势
运营复杂，DBA自行安装部署数据库、搭建HA、备份、监控。运维压力大，依赖资深DBA。弹性机制 可按现有规格直接创建相同实例。专属集群内资源分配率可调整，用户可自行定义符合业务需求的规格族，并根据发展动态调整。可以根据业务诉求设置...
云产品集成
您可以使用 DataV 添加 OceanBase for MySQL 数据源，通过图形化的界面处理 OceanBase 数据库中的数据，轻松搭建专业水准的可视化应用，展示多种业务需求。在 DataV 添加 OceanBase for MySQL 数据源的详细操作，请参见：什么是DataV数据...
添加宜搭数据源
宜搭是阿里巴巴自研的低代码应用构建平台，您可以通过可视化拖拽的方式，快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...
添加宜搭数据源
宜搭是阿里巴巴自研的低代码应用构建平台，您可以通过可视化拖拽的方式，快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...
客户案例
解决方案 友盟+联合MaxCompute构建开发者数据银行，为企业提供面向分析的、实现友盟域数据与企业私域数据全面融合的自助分析服务“U-DOP数据开放”。该服务通过订阅数据包返还数据到MaxCompute，预置分析模板并结合可视化分析BI工具来快速...
产品优势
多场景支持：支持离线数仓搭建、数仓提速、离线数据分析、数据中台搭建、大规模数据集成、离线计算、异构数据集成等。低门槛：近乎零代码，简单配置连线后即可满足各项离线数据集成任务，同时任务支持复杂调度。基于资产的虚拟湖：配合数据...
自助建站方式汇总
搭建PostgreSQL主从架构 PostgreSQL被业界誉为先进的开源数据库，支持NoSQL数据类型（JSON/XML/hstore）。本教程介绍在CentOS 7操作系统的ECS实例上搭建PostgreSQL主从架构的操作步骤。管理ECS实例自建数据库 ECS实例自建数据库，是指在ECS...
营销页面搭建
（只有发布并且审核通过的页面才会看到线上这个按钮，会呈现发布上线后的页面的 二维码信息（可下载）和线上链接的复制能力，供ISV营销推广使用）三、设计&搭建 提供页面搭建设计，数据配置等核心能力，让服务商快速搭建营销页面。...
最佳实践概览
轻量应用服务器提供了部分最佳实践，包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求，参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像，您可以通过应用镜像快速部署应用...
银行行业
网上银行应用/数据架构部署 云上银行不依赖物理网点，突破网点辐射范围限制，让偏远地区的用户也可以获得金融服务，实现普惠金融，同时大幅降低网点和人工成本。业务架构 架构说明：整个系统架构基于分布式服务化进行应用解耦，实现大平台...
功能特性
即便没有设计师，也可搭建专业的数据可视化看板。智能化工具 提供智能主题配色、一键美化、大屏智能生成等工具，快速解决在搭建可视化应用时遇到的整体样式配置困难问题。专业的地理信息可视化 专业地理信息组件 提供地理轨迹、地理飞线、...
功能特性
即便没有设计师，也可搭建专业的数据可视化看板。智能化工具 提供智能主题配色、一键美化、大屏智能生成等工具，快速解决在搭建可视化应用时遇到的整体样式配置困难问题。专业的地理信息可视化 专业地理信息组件 提供地理轨迹、地理飞线、...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
产品概述
您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。100%采用社区开源组件，适配并优化开源组件，性能远高于开源版本。基于时间的弹性伸缩能力，抢占式实例可进一步降低成本。解耦了计算与存储之间的绑定关系，...
产品简介
您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。100%采用社区开源组件，适配并优化开源组件，性能远高于开源版本。基于时间的弹性伸缩能力，抢占式实例可进一步降低成本。解耦了计算与存储之间的绑定关系，...
技术架构
由于单个数据库实例的计算能力有限，传统的做法是通过搭建多个数据库副本来分担压力，从而提供数据库Scale out的扩展能力。然而，这种做法需要存储多份全量数据，并且频繁同步日志数据造成了过高的网络开销。此外，在传统数据库集群上，...
账单数据订阅及查询分析
DataWorks及MaxCompute：DataWorks基于MaxCompute等大数据引擎，支持您在线进行SQL分析、业务洞察、编辑和分享数据，以及将查询结果保存为可视化图表卡片，快速搭建可视化数据报告。订阅账单数据后，用户中心会将相关账单数据同步至指定...
客户案例
南京银行 公司介绍 南京银行成立于 1996 年 2 月 8 日，是一家具有由国有股份、中资法人股份、外资股份及众多个人股份共同组成独立法人资格的股份制商业银行，实行一级法人体制。先后于 2001 年、2005 年引入国际金融公司和法国巴黎银行...
简介
与云上Spark无缝集成，快速搭建空间大数据仓库和空间大数据分析平台。基于OGC标准设计，便于系统间的集成与互操作。基于阿里云HBase专业运维，全托管方式，提供可靠稳定的服务。典型案例&架构 航海船舶大数据平台 场景：全球AIS船舶实时...
DataWorks On Hologres使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
DataWorks On MaxCompute使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
产品概述
DataV数据可视化应用搭建平台以丰富的图表组件和二三维时空地理组件为特色，搭配强大的低代码可视化搭建编排能力，可以高效、低成本地完成可视化大屏、PC数据看板、移动端报表等各类数据可视化应用的搭建，并集成到您的业务系统中。...
联系我们
技术交流 数据可视化DataV是阿里云一款数据可视化应用搭建工具，旨在让更多的伙伴看到数据可视化的魅力，帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用，满足您会议展览、业务监控、风险预警、地理信息分析等多种业务的...
联系我们
技术交流 数据可视化DataV是阿里云一款数据可视化应用搭建工具，旨在让更多的伙伴看到数据可视化的魅力，帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用，满足您会议展览、业务监控、风险预警、地理信息分析等多种业务的...
数据服务：低成本快速发布API
功能概述 作为数据仓库与上层应用系统间的“桥梁”，DataWorks数据服务为企业搭建统一的服务总线，帮助企业统一创建及管理对内、对外的API服务，解决数仓、数据库与数据应用间的“最后一公里”，加速数据的流动和共享。数据服务支持通过零...
搭建页面
模块搭建支持在搭建页面时，修改组件的数据源。页面搭建主要包括添加组件和配置信息两个部分。前提条件 已创建应用页面，具体操作参见 创建页面。如搭建页面时要使用自定义的前端组件，需要先添加自定义组件并完成接口配置，具体操作参见 ...
数据表
前提条件 已公开数据表资产“dws_ren_kh_demo_di（银行客户信息）”，具体操作，请参见 表资产。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 发现。在顶部菜单栏，单击 资产目录 在数据表目录页面，单击 数据表。...
Github实时数据同步与分析
教程简介 本教程基于GitHub Archive公开数据集，通过DataWorks将GitHub中的项目、行为等20多种事件类型数据实时采集至Hologres进行分析，同时使用DataV内置模板，快速搭建实时可视化数据大屏，从开发者、项目、编程语言等多个维度了解...
案例二：搭建文档检索系统
搭建流程 创建文档数据表 创建文档数据表的SQL语句如下：CREATE TABLE enterprise_context(id bigint(20)NOT NULL AUTO_INCREMENT COMMENT '主键id',content text DEFAULT NULL COMMENT '内容',PRIMARY KEY(id))ENGINE=InnoDB COMMENT='...
受众与核心能力
总之，使用DataWorks，您不仅可以进行海量数据的离线加工分析，还能完成数据的汇聚集成、开发、生产调度与运维、离线与实时分析、数据质量治理与资产管理、安全审计、数据共享与服务、机器学习、应用搭建等覆盖大数据全生命周期的最佳实践...
- 产品推荐
- 这些文档可能帮助您