DataWorks On CDP/CDH使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心、数据保护伞、审批中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全...
风险识别规则
您可以直接使用DataWorks官方提供的扩展程序来对高危行为进行管控，也可以基于DataWorks开放平台自行开发、部署能够应对更加复杂场景的扩展程序作为风险识别规则，从而将自身企业内部风控平台能力延伸至云上DataWorks大数据平台。...
功能发布记录（2024年）
所有DataWorks用户 数据治理中心概述 数据治理中心新增物化视图功能 当您在面对大数据计算任务频繁且存在大量相似子查询场景时，DataWorks支持自动化治理，智能推荐物化视图，为您提供了一种智能化、自动化的解决方案。当您启用此功能时，...
什么是EMR Serverless Spark
EMR Serverless Spark是一款云原生，专为大规模数据处理和分析而设计的全托管Serverless产品。它为企业提供了一站式的数据平台服务，包括任务开发、调试、调度和运维等，极大地简化了数据处理的全生命周期工作流程。使用EMR Serverless ...
DataWorks On Hologres使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
DataWorks On MaxCompute使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
什么是MaxCompute
提供持续的SaaS化云上数据保护 为云上企业提供基础设施、数据中心、网络、供电、平台安全能力、用户权限管理、隐私保护等保三级超20项安全功能，兼具开源大数据与托管数据库的安全能力。产品架构 MaxCompute的产品架构如下。其中核心模块...
2023年
2023年12月27日-新增项目停止自动安装项目级别Information Schema 尊敬的MaxCompute用户：感谢您对云原生大数据计算服务MaxCompute的支持，MaxCompoute于北京时间2023年08月01日全面开放了租户级别的Information Schema，支持一次性查询...
识别任务说明
文件或表扫描限制 为了避免数据源中文件或表过大影响整体扫描进度，数据安全中心对可以扫描的文件大小或表的字段大小做了限制，请您在进行敏感数据扫描前了解以下规则：结构化数据（RDS MySQL、RDS PostgreSQL、PolarDB等）、大数据...
基于Delta lake的一站式数据湖构建与分析实战
数据湖计算与分析 相比于数据仓库，数据湖以更开放的方式对接多种不同的计算引擎，如传统开源大数据计算引擎Hive、Spark、Presto、Flink等，同时也支持云厂商自研的大数据引擎，如阿里云MaxCompute、Hologres等。在数据湖存储与计算引擎...
客户案例
阿里妈妈 公司介绍 阿里妈妈广告业务主要是一种 P4P（Pay for Performance）形式的广告业务系统，而报表中心作为阿里妈妈向广告主透出广告效果数据的唯一平台，在阿里巴巴大平台丰富多样的商业场景下，为客户提供优质，高效，可靠的数据...
功能发布记录（2022年）
英国（伦敦），美国（硅谷），美国（弗吉尼亚），阿联酋（迪拜）所有DataWorks用户 数据集成概述 DataWorks支持EMR新版数据湖DataLake DataWorks支持基于EMR计算引擎新版数据湖DataLake，实现基于EMR引擎的数据集成、数据建模、数据开发...
通过函数计算节点实现GitHub实时数据分析与结果发送
开发人员在基于GitHub开源项目进行开发时会产生海量事件，GitHub会记录每次事件的类型、详情、开发者和代码仓库等信息，并开放其中的公开事件。DataWorks提供“Github十大热门编程语言”模板，通过对GitHub中公开数据集进行加工和分析，并...
新功能发布记录
OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...
Lindorm for Cassandra应用实践
开放数据生态：提供简单易用的数据交换、处理、订阅等能力，能够高度兼容MySQL、Spark、Flink、Kafka等系统。开源Cassandra挑战 开源Cassandra是基于Amazon DynamoDB和Google Bigtable设计的一款分布式NoSQL数据库，具备无中心、一致性可调...
技术架构
它可以为多种环境的数据库提供强有力的保护，包括本地数据中心、其他云厂商、公共云及混合云。产品架构 PolarDB-X 作为阿里云的成熟云产品，在产品化的配套能力上支持比较完整，包括白屏化的运维操作、多样化的交付形态、完整的OpenAPI、...
文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
公开数据集概述
简介 MaxCompute开放的公开数据集类别包括：GitHub公开事件数据、国家统计数据、TPC性能测试数据、数字商业类数据、生活服务类数据、金融股票类数据。所有的数据均存储在MaxCompute产品的公开项目BIGDATA_PUBLIC_DATASET的不同Schema中。...
功能发布记录 2022年之前
DataWorks开放租户、元数据、数据开发、运维中心、数据质量、数据服务等API，让您更加自由地使用DataWorks。说明 您需要购买DataWorks企业版及以上版本，才可以使用OpenAPI功能。2020.07.16 华东1（杭州）、华东2（上海）、华南1（深圳）、...
什么是云原生数据库PolarDB分布式版
目前，逐步尝试分布式服务化改造来实现单元化架构，每个单元都是活跃且同时承载各自业务流量，满足数据中心级别的故障隔离，实现异地多活的效果。产品能力：金融级高可用、透明分布式、安全与稳定。混合负载访问 场景描述：互联网业务的...
产品概述
在开发过程中，您可以快速完成各类不同数据源的接入，并通过蓝图编辑器完成组件间、跨页面的交互联动编排，最终产出可视化效果丰富、人机交互灵活的可视化应用，并在各类媒介终端上进行演示播放，如个人电脑、会议室大屏、指挥中心大屏。...
发布API
上架至阿里云API市场 阿里云API市场 涵盖了金融理财、人工智能、电子商务、交通地理、生活服务、企业管理和公共事务8大类目，目前已有数千款API产品在线售卖，是快速帮您实现数据变现的平台。数据服务生成和注册的API发布至API网关后，可以...
文档更新动态（2023年）
更新说明 创建、配置及手动触发识别规则 资产目录 个人数据中心 标签工厂-标签加工-离线标签 标签离线服务任务支持跨项目选择目标表。支持使用非本项目下的物理表作为来源表创建离线视图。离线视图及行为关系支持手动依赖解析及手动配置...
功能更新动态（2023年）
创建、配置及手动触发识别规则 资产目录 个人数据中心 标签工厂 标签离线服务任务支持跨项目选择目标表。支持使用非本项目下的物理表作为来源表创建离线视图。离线视图及行为关系支持手动依赖解析及手动配置上游依赖节点。组合标签、行为...
名词解释
AIoT能力中心控制台 阿里云AIoT能力中心控制台用来使用AIoT开放能力和数字行业引擎，控制台包含两大功能模块“应用开发工作台”与“项目集成工作台”。应用开发工作台 提供对开放能力的调用调试、基于K8s的应用托管及运维工具。用户可以...
计费逻辑说明
报警短信及报警电话个数 运维中心的智能监控、实时同步任务监控、数据质量规则订阅等产生的报警短信和报警电话，均会产生一定费用，详情请参见 报警短信与报警电话计费。说明 DataWorks的增值版本将附赠一定报警短信与电话额度供您免费试用...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
OpenEvent概述
下载中心 数据下载前置事件 描述：在实际的数据下载操作之前，会触发 数据下载前置事件，以获取即将进行的下载操作的相关信息。类型：数据 扩展点事件 例如，当用户在下载中心进行数据下载操作。说明 由于网络时延问题，OpenEvent的消息...
DataWorks V2.0
数据服务与API网关一道为您提供了安全稳定、低成本、易上手的数据开放共享服务。数据保护伞（新增）数据保护伞 为MaxCompute提供数据资产识别、敏感数据发现、数据分级分类、脱敏、访问监控、风险发现预警与审计的能力。
控制台发布记录
2024-3-7 开启冷数据归档 数据与缓存一站式 PolarDB MySQL版 支持数据与缓存一站式功能，在保证数据强一致性的同时，面向在线业务场景构建一套完整的数据库+缓存的解决方案。2024-3-12 灰度发布中 PolarDB MySQL推出数据与缓存一站式功能 ...
常见问题（FAQ）
开放搜索（OpenSearch）是为您量身定制打造的针对结构化数据的云端搜索服务。您可以通过我们提供的平台非常容易的拥有高质量，易扩展，可定制的搜索服务而不用关心搜索的各种技术细节。您所需要做的只是做好相关配置并上传数据，然后就可以...
DataWorks各版本详解
支持 支持 支持 安全中心 平台安全诊断 MaxCompute数据访问权限控制 数据使用诊断 敏感数据管理 支持 支持 支持 支持 全部DataWorks部署地域 审批中心 计算引擎审批策略 不支持 不支持 不支持 支持 除英国（伦敦）、阿联酋（迪拜）、日本...
常见问题（FAQ）
开放搜索（OpenSearch）是为您量身定制打造的针对结构化数据的云端搜索服务。您可以通过我们提供的平台非常容易的拥有高质量，易扩展，可定制的搜索服务而不用关心搜索的各种技术细节。您所需要做的只是做好相关配置并上传数据，然后就可以...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
数据防泄漏典型案例
使用数据安全中心可以监测和防范各类数据泄露风险，例如身份盗用、越权操作、违规操作、操作失误、基础设施缺陷以及数据故意泄密等。检测到异常行为并触发异常告警后，您需要仔细分析审计日志，从而评估被记录操作的正当性，并采取相应的...
公告
数仓规划、数据集成、概念建模、运维中心、数据标准、资产安全、数据质量、服务、安全等功能升级优化。更多功能更新信息，请参见 功能更新记录。2022年07月19日-Dataphin新版本发布 为了提供更全面的服务体系，聚焦满足客户需求，提升用户...
使用限制
搭建数据库复制 提供主备复制架构，其中的备（slave）实例不对用户开放，用户应用不能直接访问。重启RDS实例 必须通过控制台或API重启实例。实例数量 按量付费实例数量限制为30个。您可以前往 配额中心 申请提升配额。
新手指南
您可以在能力广场的14大类、上百项AI技术能力中选取适合您业务的能力进行调试和开发。本文以 身份证识别 能力为例，帮助您快速了解如何调用视觉智能开放平台能力。操作流程 初次使用阿里云视觉智能开放平台时，您可以根据以下流程快速上手...
阶段二：数据安全防护措施及策略增强建设
在该阶段，DataWorks为您提供了新人入职自动化授权、按需申请数据权限&多级审批、数据可用而不可见、数据完整性与可用性专项治理等多个场景的最佳实践，帮助企业做好数据安全防护措施并建设更加完善的安全治理策略。场景一：新人入职自动化...
技术架构
架构演进理念 当前，分布式领域有3大技术方向：Sharding技术，NewSQL原生分布式技术，云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 1.0 的架构继承了DRDS和X-DB技术的稳定性，结合了PolarDB的云原生技术，融入了NewSQL对于...
- 产品推荐
- 这些文档可能帮助您