受众与核心能力
产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks，您可以获得如下...
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。功能入口 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表。在 应用列表 页面顶部菜单栏选择地域，在...
上游应用
对于某个应用而言，上游应用是指向该应用发送数据的应用。本文说明如何查看上游应用情况，包括响应时间、请求数、错误数等信息。应用限制 EDAS标准版不支持查看上游应用情况，专业版和铂金版支持查看上游应用情况。功能入口 登录 EDAS控制...
DescribeProtectionModuleMode
调用DescribeProtectionModuleMode接口获取指定域名配置中各WAF防护功能模块（包括正则防护引擎、大数据深度学习引擎、CC安全防护、数据风控、主动防御等模块）当前采用的防护模式。您可以通过设置 DefenseType参数值指定防护功能模块。...
大数据安全治理的难点
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API，支持的API类型包括...
调用Dataphin数据源
调用Dataphin数据源即应用调用生产环境中的Dataphin数据源。Dataphin数据源后续可以作为Quick BI的数据源，对业务数据进行展示、分析、探查和制作报表等。本文为您介绍如何调用Dataphin数据源。前提条件 在开始执行操作前，请确认您已满足...
数据集成
接入数据总线的应用，对项目隔离空间内的数据的操作，是需要被授权的。授权的权限点，来自于应用接入定义时的指定。对项目管理者，需要决定是否赋予该应用，对当前项目空间下该数据模型的指定操作权限。进入项目详情内的“数据集成”页面，...
统一服务
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、和空间服务API。支持创建...
功能简介
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、空间服务API。支持创建、...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...
数据服务概述
加工后的数据供应用读取 用户使用DMS数仓开发对数据进行加工汇总后，希望在应用中读取这部分加工后的数据进行业务处理，则可通过API的方式快速输出。当需要变更读取的逻辑时，只需要调整API的查询逻辑，而不需要重新发布应用。使用流程图 ...
典型使用场景
实时计算-HBase增强版（Lindorm）+Blink/Spark 基于数据的应用，如算法、智能运营、监控大屏等系统。通常需要实时获取业务系统产生的数据，基于数据更新进行实时计算。HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据...
新建及管理动态脱敏规则
应用场景 选择数据脱敏的应用场景。支持选择 写开发表、数据查询 应用场景。写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不...
新建及管理动态脱敏规则
应用场景 选择数据脱敏的应用场景。支持选择 写开发表、数据查询 应用场景。写开发表：对来源表敏感数据的查询结果进行脱敏后再写入开发表中，防止生产环境的敏感数据泄露，特殊情况下，个人账号写Basic表则视为写开发表。数据查询：针对不...
概述
本文主要介绍需要实时获取HBase表的数据变更场景。...LindormStreams支持实时获取HBase表的数据变更，您可以基于LindormStreams的这个功能构建自己的数据应用。说明 该功能只支持云数据库HBase增强版、云原生多模数据库Lindorm。
Grafana视图
说明 语言 列显示 图标的应用为接入应用监控的应用，显示-图标的应用为接入 可观测链路 OpenTelemetry 版 的应用。在左侧导航栏单击 Grafana视图。在 Grafana视图 页面，您可以通过筛选页面顶部标签，查看不同标签下的监控指标。添加标签的...
应用场景
RDS云数据库审计 通过在用户PC（该PC通过数据库运维工具直接连接RDS数据库）或访问数据库的应用系统服务器上部署Agent，获取访问日志数据用于日志审计，实现对RDS云数据库的审计。说明 关于数据库审计系统（C100）如何部署Agent，请参见 ...
概述
例如，业务将应用数据库迁移到云上，需要应对云平台以及运维人员越权访问数据的潜在威胁；再如，数据应用需要将数据库整体线下部署到客户线下环境，需要防止数据被客户运维非授权获取。敏感数据合规：该场景主要针对在不可信环境（如第三方...
什么是MaxCompute
开放的平台 支持开放接口和生态，为数据、应用迁移、二次开发提供灵活性。支持与Airflow、Tableau等开源和商业产品灵活组合，构建丰富的数据应用。联系我们 如果您在使用MaxCompute的过程中有任何疑问或建议，欢迎填写 钉钉群申请表单 加入...
数据服务：低成本快速发布API
功能概述 作为数据仓库与上层应用系统间的“桥梁”，DataWorks数据服务为企业搭建统一的服务总线，帮助企业统一创建及管理对内、对外的API服务，解决数仓、数据库与数据应用间的“最后一公里”，加速数据的流动和共享。数据服务支持通过零...
关联和管理依赖数据源
在依赖数据源页面添加依赖数据源后，您可以在服务方法的编排中使用关联的数据源的应用服务方法。本文介绍如何关联和管理关联数据源。关联和管理数据源 关联数据源 在 应用列表 页面，单击目标轻应用名称。在目标轻应用导航栏中，选择 服务...
什么是数据传输服务DTS
数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移、订阅、集成、加工于一体，助您构建...
监控灰度流量
在 应用列表 页面单击进行了灰度发布的应用名称。在应用详情页面单击 实例部署信息 页签，在具体应用实例分组区域右侧单击 流量监控。在 流量监控 对话框右侧选择监控视角（实例视角 或 服务视角），然后在时间窗中选择监控时间周期。监控...
概述
以下是常见的应用场景：数据存储与计算安全场景：在不可信环境中（如第三方平台），Spark全密态计算引擎 可以为关键的数据分析应用（如投资和财务分析）提供数据保护，保证用户数据在存储与计算过程中的安全，降低明文数据泄露风险。...
在SAE控制台使用镜像方式部署Java应用
前提条件 创建VPC 创建命名空间 制作应用镜像 可选：在容器镜像服务控制台配置镜像同步 如果要使用的阿里云镜像仓库与您的应用不在同一个地域，您需要先使用容器镜像服务ACR的镜像同步功能将该镜像仓库同步至应用所在的地域，再部署应用。...
划分数据域
数据仓库是面向主题（数据综合、归类并进行分析利用的抽象）的应用。数据仓库模型设计除横向的分层外，通常也需要根据业务情况进行纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于...
在SAE控制台使用镜像部署多语言应用
前提条件 创建VPC 创建命名空间 制作应用镜像 可选：在容器镜像服务控制台配置镜像同步 如果要使用的阿里云镜像仓库与您的应用不在同一个地域，您需要先使用容器镜像服务ACR的镜像同步功能将该镜像仓库同步至应用所在的地域，再部署应用。...
将应用从Web+迁移到SAE
背景信息 对于使用RDS、Redis等数据库的应用，迁移到 SAE 后对应的数据库可继续使用，并且可以通过Secret方式配置数据库连接（需要保证网络互通）。将Tomcat、Java、PHP应用从Web+迁移到SAE 使用阿里云账号登录 SAE购买页。说明 SAE 支持...
01创建解决方案
数据来源说明如下：关联项 勾选情况 说明 应用 手动选中 来源于对应数据API上线时关联的应用。服务 默认选中 来源于统一服务模块创建的数据API，并上线。场景 来源于数据开发上线状态的生产场景。场景节点 来源于生产场景包含的节点。需在...
架构
订阅者按照数据在发布者上被提交的顺序应用数据，这样任意单一订阅中的发布的事务一致性才能得到保证。逻辑复制被构建在一种类似于物理流复制的架构上。它由“walsender”和“apply”进程实现。walsender 进程开始对 WAL 的逻辑解码并且...
在SAE控制台使用镜像部署PHP应用
前提条件 创建VPC 创建命名空间 制作应用镜像 可选：在容器镜像服务控制台配置镜像同步 如果要使用的阿里云镜像仓库与您的应用不在同一个地域，您需要先使用容器镜像服务ACR的镜像同步功能将该镜像仓库同步至应用所在的地域，再部署应用。...
开发前端界面
步骤三：编排服务 从数据源批量创建服务方法 对于想直接复用的关联数据源中已构建完成的应用服务方法，轻应用提供了快速复用的功能。通过对数据源内应用服务方法的勾选，即可批量生成对应的服务方法，后续即可在应用内直接调用。在目标轻...
数据探索
针对已接入用户体验监控的应用，数据探索提供了数据的快速查询、灵活聚合、详情追踪能力。通过数据探索功能，您可以了解应用会话、页面、资源、异常等关键事件的统计指标，并支持详细的下钻分析。前提条件 已将应用接入用户体验监控，具体...
功能特性
分区格式化数据盘 扩容数据盘 随着业务发展和应用数据增长，数据盘的使用空间不足时，您可以扩容数据盘的存储容量。扩容数据盘 管理快照 管理快照 快照是某一时间点磁盘数据状态的备份文件，常用于日常数据备份、服务器数据误操作恢复、...
创建ClickHouse数据源
您需要根据数据源的应用场景提前准备好对应的资源组并完成资源组配置，在创建ClickHouse数据源时确保与对应资源组间网络连通。各资源组的介绍与配置引导请参见 DataWorks资源组概述。已创建或加入目标工作空间。您需在目标工作空间中，将...
应用场景
云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构，具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用：使用云数据库MongoDB作为大数据的云存储系统，随时进行数据提取分析，掌握行业动态。
划分数据域
数据仓库是面向主题（数据综合、归类并进行分析利用）的应用。数据仓库模型设计除横向的分层外，通常也需要根据业务情况纵向划分数据域。数据域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念，目的是便于管理和应用数据。通常...
MSHA应用双活架构接入Helloworld
北京单元的数据库显示如下图：数据保护规则如下图：测试步骤 北京单元的应用执行数据库读操作（即查询商品详情）、写操作（即下单），应该访问到北京数据库。杭州单元的应用执行数据库读操作（即查询商品详情）、写操作（即下单），应该...
应用开发
本章主要介绍应用托管边缘集群中需要的应用改造和相关的操作流程。1.对接说明 应用开发对接分为：操作系统适配、OAuth对接、数据模型对接、服务模型对接、LinkEdge对接、LinkVisual对接、其他平台相关的组件对接。其中，“操作系统适配”是...
- 产品推荐
- 这些文档可能帮助您