文档修订记录
DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发...
管理健康报告
扫描字节数 SQL执行过程中访问的数据量大小。单位：bytes。扫描行数 SQL执行过程中访问的数据行数。返回行数 SQL执行后返回的结果行数。SQL文本 被执行的具体SQL语句文本。参数化SQL分析 参数化SQL是指将SQL语句中的常量替换成?参数，同时...
开发文档
interface ChainDataInterface {/*function：chainDataRequest*usage:用户合约调用账本数据合约发送跨链账本数据访问请求*parameters：*_biz_id：用户自定义的业务请求 ID*_chain_data_cmd：账本数据访问命令，参考账本数据访问命令说明*_...
第三方认证文件管理
背景信息 第三方认证机制用于用户和服务的强身份验证，通过该机制，可以有效地避免不受信任的程序或服务来获取数据访问权限，提高数据同步过程中访问数据资源的安全性。DataWorks的认证文件管理功能，可以为您提供统一入口来管理认证文件，...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。该页面E-MapReduce计算引擎的操作数据展示暂只支持上海region。前提条件 阿里云主账号已授权开通数据保护...
存储费用
日存储量平均值=采集到的存储量之和÷24 低频存储 日存储费用=日存储量平均值×单价 数据访问费=数据访问量×单价 低频存储计费单价如下：公共云：0.00266元/GB/天。金融云：0.00505元/GB/天。低频存储数据访问费单价如下：公共云：0.04元/...
限制说明
使用场景 当数据访问分布比较均匀，数据没有明显的冷热分别时，大量的访问请求在云数据库 Memcache 版无法命中，使用云数据库 Memcache 版作为数据库缓存的效果不明显。在选择缓存时，需要充分考虑到业务模式对数据访问的要求。数据删除...
应用场景
数据泄露检测与防护 通过智能化检测模型分析企业内外账号对敏感文件的访问行为，实现对敏感数据访问的异常检测，同时为数据安全管理团队提供相关告警。数据脱敏 支持通过灵活多样的内置或自定义脱敏算法，支持生产类敏感数据脱敏到开发测试...
混合存储型（已停售）
在保证常用数据访问性能不下降的基础上，混合存储型能够大幅度降低用户成本，实现性能与成本的平衡，同时使单个Redis实例的数据量不再受内存大小的限制。内存数据：内存中存放了热数据的Key和Value，同时为快速确认要操作的Key是否存在，...
分层存储
日存储量平均值=采集到的存储量之和÷24 低频存储 日存储费用=日存储量平均值×单价 数据访问费=数据访问量×单价 低频存储计费单价如下：公共云：0.00266元/GB/天。金融云：0.00505元/GB/天。低频存储数据访问费单价如下：公共云：0.04元/...
引擎功能
提供了数据库层面的用户权限功能，从而在网络白名单的基础上进一步对数据访问进行更细的权限管理。数据存储默认采用多副本策略，充分保证数据的可用性。数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过...
敏感数据溯源
DataWorks仅支持对开启 数据水印 功能之后所执行的数据访问操作进行溯源。说明 例如，您查询表A之前未开启 数据水印 功能，此时，即使您开启了 数据水印 功能并启动对该数据文件的溯源任务，仍然无法通过 数据溯源 功能溯源到此次查询操作...
成本
存储分层能力 很多分析场景的数据具有一定的时效性，时间越近的数据访问频率越高、越远的数据访问频率越低。AnalyticDB PostgreSQL版 能够根据需求，自动地将部分时效性较低的数据进行归档、使用OSS等成本更低、访问速度较慢的存储介质替换...
混合存储型（已停售）
在保证常用数据访问性能不下降的基础上，混合存储型能够大幅度降低用户成本，实现性能与成本的平衡，同时使单个Redis实例的数据量不再受内存大小的限制。内存数据：内存中存放了热数据的Key和Value，同时为快速确认要操作的Key是否存在，...
数据查询与分析管控
附录：查看数据源的访问身份 工作空间模式差异 数据源环境介绍 自建数据源 默认创建自建数据源时，配置的访问该数据源的账号，拥有该自建数据源的访问权限。该功能仅对数据源查询权限进行管控，若要对数据源的读写操作进行权限管控，请参考...
概述
冷存后的数据访问延迟会有所增加，且不建议频繁更新或写入，您可以选择性地将数据存储在OSS中。技术原理 PolarDB PostgreSQL版 实现的冷热分层存储功能可以将OSS对象存储直接作为数据库的一种存储介质，存储价格低廉。PolarDB PostgreSQL版...
概述
冷存后的数据访问延迟会有所增加，且不建议频繁更新或写入，您可以选择性地将数据存储在OSS中。技术原理 PolarDB PostgreSQL版（兼容Oracle）实现的冷热分层存储功能可以将OSS对象存储直接作为数据库的一种存储介质，存储价格低廉。PolarDB...
概述
冷存后的数据访问延迟会有所增加，且不建议频繁更新或写入，您可以选择性地将数据存储在OSS中。技术原理 PolarDB PostgreSQL版（兼容Oracle）实现的冷热分层存储功能可以将OSS对象存储直接作为数据库的一种存储介质，存储价格低廉。PolarDB...
产品功能
数据和实例安全 TSDB 提供以下方案保证您的数据和实例的安全：提供 VPC 的实例访问方式，充分保证实例访问的安全性。提供网络白名单功能：您可以通过设置允许访问实例的机器名单，进一步保证实例和数据的访问安全。如果一台机器在 VPC 内部...
EMR+DLF数据湖解决方案
以上两个步骤完成后，您的整个EMR集群的数据访问将会受到数据权限控制，如果没有权限的用户访问集群数据，将会被拒绝。此时可以参考DLF的 新增授权，为相应的用户配置合理的数据权限。步骤六（可选）：使用生命周期对数据湖存储进行合理...
数据保护伞入门
敏感数据访问及导出情况 展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。查看数据风险（新版）从多维度呈现了通过配置的风险识别规则命中的风险数据，方便您了解不同维度...
安全设置
安全设置是您可以对数据安全及访问进行精细化控制、对...开启：鉴权开启后，Spark Jar的任务的数据访问将进行权限校验，原有的任务若无相应权限，则将导致任务执行失败。说明 开启后可访问逻辑表，且使用逻辑项目和板块的方式访问数据表。
安全设置
安全设置是您可以对数据安全及访问进行精细化控制、对...开启：鉴权开启后，Spark Jar的任务的数据访问将进行权限校验，原有的任务若无相应权限，则将导致任务执行失败。说明 开启后可访问逻辑表，且使用逻辑项目和板块的方式访问数据表。
低成本历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库Lindorm（HBase增强版）能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据...
配置安全规则
将数据库添加到数据库审计系统后，您可以为数据库配置安全规则（即审计规则），当数据库的审计记录命中审计规则时，数据库审计系统会触发告警。本文介绍如何配置审计规则。背景信息 审计规则支持内置规则和自定义规则。内置规则即数据库...
应用场景：低成本历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库 Lindorm 能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据库完美组合，...
低成本RDS历史库
能够满足数据分析需求，历史数据访问频度低，但是在某些业务场景下需要对全量数据进行挖掘分析，比如支付宝年账单。云原生多模数据库Lindorm（HBase增强版）能够同时满足存储成本低廉、运维简单、弹性伸缩、性能稳定等需求可以和关系型数据...
平台安全诊断
平台安全诊断目前支持的安全域说明如下：数据计算与存储安全性诊断 用于对数据权限的控制、数据存储加密、数据存储备份等功能进行安全性诊断，及时识别潜在的安全隐患，提升在数据存储与访问过程中的安全性。数据传输安全性诊断 用于对数据...
客户端FAQ
如果您在使用RDS MySQL全密态数据库的客户端访问数据库过程中存在疑问或遇到问题，可以参考本文查看解决方案。常见问题 Q：JDBC读取数据报错：java.lang.NumberFormatException:For input string:"xxxx"A：尝试按照普通数据类型解析密文...
基本概念
金字塔模型 对栅格数据创建金字塔可以显著改善数据访问性能。金字塔模型是原始栅格数据集的缩减采样版本，一般包含多个缩减后的连续的采样图层。各个连续图层均以 2:1 的比例进行重采样。以下是为栅格数据集创建的4级金字塔示例：金字塔...
数据保护规则简介
在使用全密态功能之前，您需要配置数据保护规则，规则包括：指定目标数据列为被保护数据、声明数据保护方法（例如加密、脱敏）、授权指定用户访问数据等。本文介绍数据保护规则格式及说明。规则格式及说明 {"version":20230830,"rules":[{...
应用画像
热点：主要衡量应用所访问的数据库是否存在访问频率非常集中的对象。分数越高，说明应用的数据库访问存在热点情况。规模：主要衡量当前应用的部署单元数或者实例数情况。负载：主要衡量应用的运行性能情况。系统信息 系统信息是根据ADAM...
创建ClickHouse数据源
通过创建ClickHouse数据源能够实现Dataphin读取ClickHouse的业务数据或向ClickHouse写入数据。本文为您介绍如何创建ClickHouse数据源。背景信息 如果您使用的是数据库ClickHouse，引入ClickHouse的业务数据至Dataphin中或将Dataphin数据...
ListDoctorHiveTables-批量获取Hive表分析结果
温数据指的是 7 日内没有访问的数据，但是 30 日以内有访问的数据。coldDataSize:冷数据的数据量大小。冷数据指的是 30 日内没有访问的数据，但是 90 日以内有访问的数据。freezeDataSize:极冷数据数的据量大小。极冷数据指的是 90 日以内...
创建SAP HANA数据源
通过创建SAP HANA数据源能够实现Dataphin读取SAP HANA的业务数据或向SAP HANA写入数据。本文为您介绍如何创建SAP HANA数据源。背景信息 SAP HANA是一款具有高性能内存的应用平台。如果您使用的是SAP HANA，在对接Dataphin进行数据开发或将...
创建并管理数据源
若您想在DataWorks操作您的数据库或数据仓库（例如，MaxCompute项目数据），需先在DataWorks的数据源管理页面，将数据库或数据仓库创建为DataWorks的数据源，并将该数据源绑定至DataWorks相应的功能模块使用。例如，同步MaxCompute数据前，...
API概览
本产品（云数据库 OceanBase 版/2019-09-01）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
添加访问地址
本页面为您介绍添加访问地址的操作步骤以及和访问地址相关的其他操作。原理介绍 OceanBase 数据库在数据库和应用程序之间提供网络代理服务，您可以根据业务需求在代理层添加只读地址和读写分离地址，充分利用 OceanBase 数据库的多副本能力...
ListDoctorHDFSDirectories-批量获取HDFS目录分析结果
温数据指的是 7 日内没有访问的数据，但是 30 日以内有访问的数据。coldDataSize:冷数据的数据量大小。冷数据指的是 30 日内没有访问的数据，但是 90 日以内有访问的数据。freezeDataSize:极冷数据的数据量大小。极冷数据指的是 90 日以内...
产品优势
②：该性能与数据访问的冷热分布相关，命中内存的比例越高性能越接近社区版基准性能。③：区别于Redis社区版6.0的IO多线程，内存型的Real Multi-IO能够将IO加速地更彻底，具备更高的抗连接冲击性，且可以线性地提升吞吐能力。④：数据落盘...
- 产品推荐
- 这些文档可能帮助您