创建同步任务

本文为您介绍如何通过创建同步任务,导出MaxCompute数据至MySQL数据。前提条件 已通过RDS创建MySQL实例,获取RDS实例ID,并在RDS控制添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...

01创建解决方案

已创建“全域数据平台”应用,具体操作,请参见 新建API归属应用。已创建“银行客户根据证件号码查询”API,具体操作,请参见 新建API-向导模式。背景信息 根据应用关联对应资源信息,包括服务、物理表、逻辑表、场景、场景节点、单节点、...

基本概念

数据同步 数据源:是指数据库应用程序所使用的数据库或者数据库服务器,在数据资源平台的数据同步可以将配置数据源端数据同步到目标端。多源异构数据:指的是多种不同结构的数据源。数据模板:用于对非结构化数据的解释,当创建数据...

创建Oracle数据

背景信息 Oracle是一款可移植、可靠性、适应高、功能强大的关系型数据库。如果您使用的是Oracle,在对接Dataphin进行数据开发时,您需要先完成Oracle数据源的创建。更多Oracle信息,请参见 Oracle官网。权限说明 仅支持具备新建数据源...

文档更新动态(2022年之前)

新功能 网络连通解决方案 2021年08月24日 数据服务:支持数据服务模块的数据查询加速、支持的数据源类型和版本拓展 为了满足对数据查询速度有要求的业务场景,Dataphin支持为项目添加加速计算源,且完成Dataphin数据源开发后,您可以手动...

技术原理

业务应用在能够忍受只读实例相对于主实例数据同步延迟的前提下,不需要修改代码,即可在 PolarDB-X 1.0 控制台中增加RDS/MySQL只读实例和调整读权重,将读流量按照需要的比例在RDS/MySQL主实例与多个RDS/MySQL只读实例之间调整,写操作和...

RDS SQL Server空间不足问题

回收日志空间 回收日志空间比较简单,使用 DBCC SQLPERF(LOGSPACE)命令或自治服务查看数据库的日志文件空间实际已使用部分的比例,如果已使用部分的比例较高,收缩日志文件几乎没有效果,可以查询系统视图sys.databases,通过 log_reuse_...

漏斗分析

查看明细数据 明人群 在明细数据中,有每一步骤的详细结果。点击查询的结果数据,可以把该数据直接保存成人群。保存数据到报表 用户数 点击右上角功能区「保存」按钮,弹出保存报表弹窗,填写选择如下信息:1.输入报表名称 2.选择报表保存...

常见问题

支持的数据库部署位置(接入方式)阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...

风险识别管理(新版)

登录 DataWorks控制,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品>数据治理>数据保护伞。单击 立即体验,进入数据保护伞。进入 风险识别管理。在 数据...

批量创建质量规则

一致性:包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性:包含 表稳定性校验、...

批量创建质量规则

一致性:包含 单表字段值一致性比较、单表字段统计值一致性比较、单字段业务逻辑一致性比较、两表字段值一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较 和 跨源两表字段统计值一致性比较。稳定性:包含 表稳定性校验、...

新功能发布记录

OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...

通过向导模式配置离线同步任务

您需要在数据集成同步任务配置前,配置您需要同步的源端和目标端数据库,以便在同步任务配置过程,可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...

通过脚本模式配置离线同步任务

您需要在数据集成同步任务配置前,配置您需要同步的源端和目标端数据库,以便在同步任务配置过程,可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...

新建及管理质量规则模板

添加质量规则:可根据该模板快捷添加质量规则,详情请参见 批量添加全域数据表质量规则。查看模板详情:查看模板的配置详细信息。克隆:可快捷复制该模板的配置信息。转交:可转交模板的负责人。删除:引用的模板不支持删除,需在 质量...

使用流程

同时支持接入不同引擎的云数据库、自建数据库等,均可以在DBS控制数据进行管理。备份完成后,您可以按需恢复数据库。说明 DBS支持接入的数据源,请参见 数据源。大型企业级备份 操作简单 管理方便 批量创建多个备份计划 方式一:...

新建数据服务API-向导模式

设置API基础信息:输入API的名称为“根据银行客户办卡额度查询”、选择所属应用为“全域数据平台”、调用认证方式为“简单身份认证”,输入描述为“根据银行客户办卡额度查询”。配置API参数。选择云计算资源为“dataq_dws_rds”,服务资源...

集群性能监控概述

数据库 OceanBase 为您提供集群实例的数据库性能和主机性能监控功能,可在 OceanBase 管理控制台中查看监控数据,还支持自定义监控能力,您可按需配置常用监控指标作为自定义监控面板。查看监控数据 进入 OceanBase 管理控制台。在左侧...

DataWorks交流钉钉群

说明 从2009年飞天大数据平台写下第一行代码开始,DataWorks历经10年发展,形成一套成熟的产品功能体系,满足企业数据中台搭建需求。在阿里巴巴内部,每天有数万数据、算法开发工程师正在使用DataWorks。您需要先单击 申请链接 加入“阿里...

新建及管理质量规则模板

两表字段统计值一致性比较/单表字段统计值一致性比较:统计方式:可统计字段分组个数、字段最大值、字段重复率等,详情请参见 创建全域数据表质量规则。两表字段业务逻辑一致性比较:业务逻辑:输入SQL表达式函数。例如${T1.total_sales}=$...

新建数据服务API-SQL模式

配置API基础信息:输入API的名称为“查询银行客户的所有信用卡”、选择所属应用为“全域数据平台”、调用认证方式选择为“简单身份认证”,输入描述为“查询银行客户的所有信用卡”。配置API参数 选择云计算资源为“dataq_dws_rds”,服务...

全域标签

标签列表:覆盖人数:全域标签所覆盖的用户人数,即针对该标签有数据的用户人数。调用次数:该标签参与受众筛选和洞察分析的总次数。更新时间:全域标签将每日更新上述覆盖和调用情况。您可以:单击 圈人,使用该标签进行受众筛选,请...

通过DMS登录数据库(公网)

DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成(上云迁移、容灾、多活、ETL)、数据开发及数据消费服务等能力,致力于帮助企业高效、安全的挖掘数据价值,助力企业数字化转型。更多信息,请参见 什么是数据管理DMS。操作...

SLS的OSS投递数据

使用DLA的Serverless Spark及Presto引擎能够计算和分析DLA元数据管理的全域数据,可以支持ETL后数据交付、低频全量日志数据分析、日志数据关联DB数据分析等业务场景。操作步骤 登录 Data Lake Analytics管理控制。在左侧导航栏,单击 ...

添加静态数据

本文档介绍在DataV添加静态数据文件的方法。前提条件 已准备待添加的静态数据文件。操作步骤 登录 DataV控制。在 工作 页面,将鼠标移动至需要编辑的数据看板上,单击 编辑。重要 如果您的 工作 页面内还没有创建任何数据看板...

添加API数据

本文档介绍在DataV添加API数据源的方法,以及相关参数配置说明。API指通用的数据接口,如果您已有可用的API接口,可在DataV使用自己的API数据源连接。前提条件 已准备待添加的API数据源。操作步骤 登录 DataV控制。在 工作 页面...

添加DataWorks数据服务数据

说明 获取 AppKey 和 AppSecret:在 DataWorks数据服务控制 ,单击 服务管理API调用,可获取您的 AppKey 和 AppSecret。信息填写完成后,单击 确定,完成数据源的添加。新添加的数据源会自动显示在数据源列表中。使用DataWorks数据服务...

用户洞察常见问题

用户首次使用Quick Audience社交互动、全域会员等模块时,系统将在数分钟内:获得社交互动、全域会员模块的回流数据数据表存储在 配置回流数据源 时配置的社交互动回流数据源、全域会员回流数据。在默认空间创建相应的“社交互动_XXX...

管理敏感数据

说明 RDS控制台中仅支持对数据库中的敏感字段进行监控与统计,如需使用上述所有功能,需登录DMS控制台进行操作。更多信息,请参见 管理敏感数据。操作步骤 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在左侧导航栏,单击 数据...

数据标准

添加数据标准 添加数据标准的方式有两种,第一种是手动在平台单个添加标准,第二种是通过Excel的形式批量将数据标准维护到平台去。进入【数据标准】模块,点击‘“创建数据标准”按钮即可进入数据标准添加页面。根据选项填写数据标准的...

多账号统一管理

便于企业有效地执行数据安全管理任务,如自动发现敏感数据数据分类分级、以及对潜在安全威胁的监测和报警。本文介绍如何使用多账号统一管理功能。使用须知 使用多账号统一管理功能的阿里云账号和被管理的阿里云账号必须同属于一个资源...

添加ClickHouse数据

本文档介绍在DataV添加ClickHouse数据源的方法,以及相关参数配置说明。前提条件 已准备待添加的ClickHouse数据源。通过内网添加数据源操作步骤 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表...

添加Oracle数据

本文档介绍在DataV添加Oracle数据源的方法,以及相关参数配置说明。前提条件 已准备待添加的Oracle数据源。操作步骤 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表,选择 Oracle。填写数据库...

快速接入

角色授权 埋点方案录入 将业务准备梳理的埋点方案内容录入到Quick tracking后台,为下一步埋点集成做准备 方案管理 事件管理 属性管理 埋点集成与验证 在创建组织和应用后,需要客户端接入SDK来采集用户行为日志,为后续的数据分析提供...

什么是数据库网关

DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,致力于帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库...

我的看板

数据来源 在工作台中创建并发布的数据看板内容,会同步在此处展示,若数据看板仅编辑完成,但是未发布,则在此处不展示。如需编辑某一看板内容,请单击页面右上角的 前往可视化工作台,编辑并发布对应数据看板后,刷新当前页面即可。操作...

添加CSV文件

前提条件 已准备待添加的CSV文件数据源。操作步骤 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表,选择 CSV文件。上传CSV文件。说明 CSV文件大小不能超过 512KB,暂时不支持上传超出512KB的CSV...

添加开源Elastic Search数据

前提条件 已准备待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表,选择 开源Elastic Search。填写开源Elastic Search数据服务...

添加 MySQL 数据源的白名单

复制 OMS 控制 添加数据源 对话框显示的 OceanBase 数据传输服务器的 IP 地址。在安全组详情页面的 访问规则>入方向 区域,单击 快速添加。您也可以选择 手动添加,手动输入 端口范围、授权对象 等信息。在 快速添加 对话框,粘贴复制...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云数据库 RDS 云数据库 Redis 版 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用