缓存数据持久化
python3 test.py 首次运行，由于Redis缓存中没有数据，从RDS MySQL中读取，返回结果示例：Redis中未查询到数据，从RDS MySQL查询到数据：((1,'Zhangsan'),(2,'Lisi'),(3,'Wangwu'))再次运行时，由于第一次查询后已将查询数据缓存至Redis中...
导入概述
streaming_load_rpc_max_alive_time_sec 在导入过程中，StarRocks会为每个Tablet开启一个Writer，用于接收数据并写入。该参数指定了Writer的等待超时时间。默认为600秒。如果在参数指定时间内Writer没有收到任何数据，则Writer会被自动销毁...
功能发布记录 2022年之前
某些数据源只能以HTTP REST API形式对外提供数据，或者接收数据。针对这类数据源，数据集成支持离线形式读取和写入数据。2021.1.4 全部地域。RestAPI Reader 2020-12 功能名称 功能描述 发布时间 发布地域 相关文档 DataWorks数据集成新增...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
项目启动成功后，PolarDB-X 1.0 数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目会自动删除，数据传输会保存 PolarDB-X 1.0 数据库下挂载的数据库至 OceanBase 数据库 MySQL 租户的数据迁移项目，并自动创建相应的数据源。您可以在弹...
自建Oracle迁移至PolarDB PostgreSQL版
已在 PolarDB PostgreSQL版 集群中创建用于接收数据的数据库。创建方法，请参见 数据库管理。自建Oracle数据库已开启ARCHIVELOG（归档模式），设置合理的归档日志保持周期且归档日志能够被访问，详情请参见 ARCHIVELOG。自建Oracle数据库已...
AnalyticDB MySQL 2.0数据导入
by pangu 对于MaxCompute中已经没有原始数据的场景，从 AnalyticDB for MySQL 2.0本地同步数据,需要在命令最后指定 by pangu。说明 如果不指定 by pangu，且在第二步未定义 odps-access-id 和 odps-access-key 参数，数据同步会报错。同步...
风险识别管理（新版）
风险识别维度 细分类别 描述 数据属性 数据分级 识别指定级别的风险数据，您需要提前定义数据的分级，详情请参见 配置敏感数据分类分级。数据分类 识别指定类别的风险数据，您需要提前定义数据的类别，详情请参见 配置数据识别规则。敏感...
数据质量风险监控
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
数据质量风险监控
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
管理数据
本文为您介绍如何在数据填报中新增表单并对填报的数据进行管理。前提条件 已新建数据填报，请参见 新建数据填报。使用限制 表单的开发者和项目空间的管理员能够管理所有数据，填报的人只能管理自己填报的数据。没有被分享或只有公开链接的...
Quick BI智能报表全表单数据不准确
问题描述 用户想要查看全部的OA审批数据，发现全表单数据表里数据和单个OA流程表单数据以及本身OA流程数据不一致。解决方案 全表单数据表已经不在维护，推荐使用单个OA流程表单数据。适用于 智能报表 表单数据
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
网站表单
表单属于数据收集性质，可收集来自网站用户的数据，方便企业了解用户诉求。本文旨在介绍如何进入设计表单页面及查看表单数据。进入设计表单页面：单击 进入设计>表单 即可进入设计表单页面。添加表单控件：在表单设计制作完成后，在设计...
网站表单
表单属于数据收集性质，可收集来自网站用户的数据，方便企业了解用户诉求。本文旨在介绍如何进入设计表单页面及查看表单数据。进入设计表单页面：单击 进入设计>表单 即可进入设计表单页面。添加表单控件：在表单设计制作完成后，在设计...
管理数据填报
没有被分享或只有公开链接的人均无法管理此表单的数据。分享 进入数据填报页面。在左侧导航栏单击 数据填报。在 数据填报 管理页面，按照下图指引，进入分享页面。在 私密链接分享 对话框，复制URL并发给有权限的用户。创建数据集 进入数据...
表单管理
1、表单管理->添加表单 登录系统后台管理界面，一次点击【表单管理】、【表单列表】、【添加表单】，输入表单名称（必填）、设置开启/关闭表单支付（必选），若开启表单支付，则可选择支付工具（微信/支付宝），设置支付金额。可设置表单...
外部数据
不管使用什么外部数据包装器，本数据库会要求外部数据包装器从外部数据源获取数据，或者在更新命令的情况下传送数据到外部数据源。访问远程数据可能需要在外部数据源的授权。这些信息通过一个用户映射提供，它基于当前的本数据库角色提供了...
创建数据表质量规则
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置数据表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员支持...
创建数据表质量规则
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置数据表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员支持...
创建全域数据表质量规则
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置全域数据表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员...
创建全域数据表质量规则
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置全域数据表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员...
新建 Oracle 数据源
配置好数据源是创建数据迁移或数据同步项目的前提。本文为您介绍如何在数据传输中新建 Oracle 数据源。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 ...
数据投递
前提条件 已创建用于接收数据的目标库实例，当前仅支持 AnalyticDB PostgreSQL。创建方法，请参见 创建实例。目标 AnalyticDB PostgreSQL 实例中需已创建好用于接收数据的数据库和Schema（本示例创建的Schema为 dts_deliver_test）。创建...
PolarDB-X 2.0迁移至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构迁移过程...
PolarDB-X 2.0同步至自建Oracle
前提条件 已创建用于接收数据的自建Oracle，且Oracle可用的存储空间需要大于源 PolarDB-X 2.0 已使用的存储空间。自建Oracle中已创建用于接收数据的Schema。说明 创建用户时会自动创建一个对应的Schema。注意事项 说明 在库表结构同步过程...
DataWorks On MaxCompute使用说明
二、数据建模与开发 模块 描述 相关文档 数据建模 数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
数据脱敏
数据安全中心（Data Security Center，简称DSC）支持静态脱敏和动态脱敏，可以脱敏数据库中的敏感数据。本文介绍如何使用静态脱敏和动态脱敏。脱敏方式 静态脱敏：通过新增脱敏任务，使用脱敏算法对敏感数据进行遮盖、加密或替换，并将脱敏...
云数据库MongoDB版（分片集群架构）同步至函数计算FC
函数 选择目标函数计算FC用于接收数据的函数。服务版本和别名 请根据实际情况进行选择。默认版本：服务版本 固定为 LATEST。指定版本：您还需选择 服务版本。指定别名：您还需选择 服务别名。说明 目标函数计算FC的专有名词，请参见 基本...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
云数据库MongoDB版（副本集架构）同步至函数计算FC
函数 选择目标函数计算FC用于接收数据的函数。服务版本和别名 请根据实际情况进行选择。默认版本：服务版本 固定为 LATEST。指定版本：您还需选择 服务版本。指定别名：您还需选择 服务别名。说明 目标函数计算FC的专有名词，请参见 基本...
入门概览
如果您需要将数据从OSS导入到图数据库GDB中，需要提前创建服务关联角色。具体操作，请参见 授权GDB访问OSS。操作流程 从购买实例到连接实例，您需要完成以下操作：可选：授权RAM用户访问控制台 如果您需要使用RAM用户（子账号）管理图数据...
添加宜搭数据源
宜搭是阿里巴巴自研的低代码应用构建平台，您可以通过可视化拖拽的方式，快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...
RDS MariaDB迁移至RDS PostgreSQL
已在目标RDS PostgreSQL实例中创建用于接收数据的数据库。具体操作，请参见 创建账号和数据库。注意事项 说明 在库表结构迁移过程中，DTS会将源数据库中的外键迁移到目标数据库。在全量迁移和增量迁移过程中，DTS会以Session级别暂时禁用...
配置Hologres输入组件
同步Hologres数据源的数据至其他数据源的场景中，您需要先配置Hologres输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Hologres输入组件。前提条件 已创建Hologres数据源，如何创建，请参见 创建Hologres数据源。...
将云消息队列 Kafka 版的数据迁移至MaxCompute
本文介绍如何使用DataWorks数据同步功能，将 云消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute，方便您对离线数据进行分析加工。前提条件 在开始本教程前，确保您在同一地域中已完成以下操作：云消息队列 Kafka 版 ...
数据库迁移
背景信息 随着业务的发展，数据库会出现升降配、数据库整体迁移的需求，为支持此类业务场景，DMS推出数据库迁移功能，支持对多种数据库的结构、数据进行同构迁移，同时支持库名称修改、迁移前预校验、迁移后数据一致性校验及来源数据库的...
管理数据
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中，管理员可以高效管理数据资产及资产中的敏感数据。本文介绍首次使用数据域功能的具体操作。...
添加宜搭数据源
宜搭是阿里巴巴自研的低代码应用构建平台，您可以通过可视化拖拽的方式，快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...
云数据库Redis间的迁移
已选择对象 若您需要指定接收数据的库（DB 0~DB 255）或通过前缀过滤待迁移的数据，可以使用映射或过滤功能。在 已选择对象 框中右键单击待迁移的库，然后在弹出的 编辑Schema 对话框中进行配置。更多信息，请参见 库表列名映射 和 设置...
- 产品推荐
- 这些文档可能帮助您