统计功能介绍
【关于数据抓取的解释】数据抓取：指一种自动获取网页内容的程序，是搜索引擎的重要组成部分。百度数据抓取：指百度搜索引擎的数据抓取访问您的网站的次数。Google数据抓取：指Google（谷歌）搜索引擎的数据抓取访问您的网站的次数。其他...
基础术语
中文 释义 数据抓取延迟 数据抓取延迟是指数据同步服务抓取数据并写入产品存储的时间与数据实际写入至源数据库的时间差。数据抓取延迟仅在增量同步阶段有数值。数据写入延迟 数据写入延迟是指同步到目标实例的最新数据在源数据库执行的时间...
查看同步任务详情
在任务详情页，您可以查看以下信息：数据来源信息：上游数据抓取延迟：数据同步服务抓取数据写入存储的时间与数据实际写入至源数据库的时间差。源端数据源配置信息：包括源端数据库主机、端口、名称，数据表及用户名等。数据去向信息：下游...
数据服务概述
相关概念 API（Application Programming Interface，应用程序编程接口）：API是让应用、软件、系统能够面向数据源进行数据交互的接口，数据服务API支持“读数据”的操作，可以从数据库、数据表中不断地进行数据查询。函数：作为API过滤器，...
产品架构
如果源数据库为RDS MySQL，那么数据抓取模块通过Binlog dump协议连接源库。日志回放模块：日志回放模块从日志读取模块中请求增量数据，并根据用户配置的同步对象进行数据过滤，然后在保证事务时序性及事务一致性的前提下，将日志记录同步到...
基本概念
API：应用程序编程接口，是一些预先定义的函数，目的是提供应用程序与开发人员基于某软件或硬件得以访问一组例程的能力。数据API：API的源头为数据表，可以是单表也可以是多表，请求后最终以类SQL的形式到数据库查询并返回符合条件的数据，...
教程概述
DataWorks数据服务与DataV进行无缝打通后，就不再需要使用DataV中的 API数据源 去填写一个URL调用API，而是直接新建一个DataWorks数据服务作为数据源，就可以选用数据服务中的API。无需每个API都设置AppKey和AppSecret认证信息，并且支持...
封装流式数据（DataHub）API
本文介绍如何封装流式数据API。前提条件 工作组管理员账号登录。已创建“信息中心（xxzx）”工作组，具体操作，请参见 新建工作组并添加成员。已在系统设置添加DataHub云计算资源，具体操作，请参见 新建云计算资源。已创建API归属应用，...
网络抓包
云防火墙提供网络抓包工具，允许您通过特定的IP和端口捕获互联网边界的流量数据包，便于您快速分析数据包内容、诊断网络问题以及审查潜在的攻击行为，进而揭示网络通信的安全隐患。本文介绍如何有效使用该网络抓包工具。限制说明 云防火墙...
常见问题
如何处理：参见 配置数据源（来源为PolarDB）的操作授予权限，或者检查PolarDB是否是主节点（读写库），目前实时任务不支持从PolarDB备节点抓取数据。实时任务，运行报错：...
常见问题
如何处理：参见 配置数据源（来源为PolarDB）的操作授予权限，或者检查PolarDB是否是主节点（读写库），目前实时任务不支持从PolarDB备节点抓取数据。实时任务，运行报错：...
按应用关联
根据应用关联对应资源信息，选中目标应用后，系统自动选中关联此应用的上线API、有产出关系的场景、场景下包含的所有场景节点以及场景节点包含的所有逻辑表以及数据标准、数据源和全局配置。说明 工作组若有创建数据标准、数据源和全局变量...
添加DataWorks数据服务数据源
使用DataWorks数据服务数据源操作步骤 准备通过 DataWorks数据服务 生成的API数据。登录 DataWorks数据服务控制台，参见 生成API概述，使用数据服务生成API。登录 DataV控制台。在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 ...
按线上API关联
手动选中目标服务后，系统自动选中API的归属应用、和API关联的物理表、和API关联物理表有产出关系的场景、场景下包含的所有场景节点、场景下输出的物理表，以及场景节点包含的所有逻辑表，以及场景节点包含的所有逻辑表以及数据标准、数据...
添加DataWorks数据服务数据源
使用DataWorks数据服务数据源操作步骤 准备通过 DataWorks数据服务 生成的API数据。登录 DataWorks数据服务控制台，参见 生成API概述，使用数据服务生成API。登录 DataV控制台。在 我的可视化 页面中，将鼠标移动至需要编辑的可视化应用上...
产品简介
支持数据的服务能力输出：您在使用DataWorks（大数据开发治理平台）、Dataphin（智能数据建设与治理）、DMS（数据管理）等阿里云大数据、数据库方面的产品时，可以快速将数据API通过API网关发布，实现数据的服务化输出；支持AI能力输出：您...
数据服务：低成本快速发布API
功能概述 作为数据仓库与上层应用系统间的“桥梁”，DataWorks数据服务为企业搭建统一的服务总线，帮助企业统一创建及管理对内、对外的API服务，解决数仓、数据库与数据应用间的“最后一公里”，加速数据的流动和共享。数据服务支持通过零...
数据源配置常见问题
如果您已有API中的逻辑在使用DataV的API数据源时不支持（例如计算签名等），可使用阿里云API网关托管您的API，DataV连接阿里云API网关数据源时可以间接调用您在API网关中托管的API，此时阿里云API网关相当于API的代理。具体使用操作请参见 ...
数据源配置常见问题
如果您已有API中的逻辑在使用DataV的API数据源时不支持（例如计算签名等），可使用阿里云API网关托管您的API，DataV连接阿里云API网关数据源时可以间接调用您在API网关中托管的API，此时阿里云API网关相当于API的代理。具体使用操作请参见 ...
DataWorks数据服务对接DataV最佳实践
注意事项 DataWorks数据服务与DataV进行无缝对接后，无需使用DataV中的API数据源去填写一个URL调用API，直接新建一个DataWorks数据服务作为数据源，便可直接选用数据服务中的API。无需每个API都设置AppKey和AppSecret认证信息，且支持通过...
RestAPI Reader最佳实践
实践1：读取一个接口数据，该接口根据时间范围查询数据 示例场景：接口定义 本实践示例的场景为读取一个RESTful接口数据并写入一个MaxCompute分区表中，其中使用的示例RESTful接口为一个自建的测试GET接口，会根据接口输入的时间范围参数...
数据服务
可视化制作：对于多数可视化制作工具，均支持API数据源。使用API数据源来制作可视化，而不是对外暴露数据库连接的用户名密码，可以避免账号泄露，同时API的方式更简易。加工后的数据供应用读取：通过数据工具对数据进行加工汇总后，业务...
修改名单抽奖数据
具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑器内。以画布中 抽奖池 组件为例，单击选中该组件后，在画布...
修改名单抽奖数据
具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。在 我的可视化 页面内，单击 名单抽奖 可视化应用，进入画布编辑器内。以画布中 抽奖池 组件为例，单击选中该组件后，在画布...
RestAPI（HTTP形式）数据源
RestAPI数据源为您提供读取和写入RestAPI双向通道的功能，本文为您介绍DataWorks的RestAPI数据同步的能力支持情况。使用限制 目前该数据源仅支持 独享数据集成资源组。目前不支持设置超时参数，当前DataWorks内置的请求超时时间是60s,如果...
创建API数据源
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加...
使用DataWorks数据服务生成API
本文为您介绍如何通过DataWorks的数据服务，生成并发布数据API，用于在DataV中进行调用并展示。前提条件 在开始本案例前，您需要首先完成 准备工作。背景信息 注意 按照本文档操作后，可以获取到您数据API的AppCode、AppKey和AppSecret，请...
创建API数据源
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加...
生成数据API
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
01创建解决方案
数据来源说明如下：关联项 勾选情况 说明 应用 手动选中 来源于对应数据API上线时关联的应用。服务 默认选中 来源于统一服务模块创建的数据API，并上线。场景 来源于数据开发上线状态的生产场景。场景节点 来源于生产场景包含的节点。需在...
新建API消费应用
创建消费应用以备申请API时使用。本文介绍如何新建API消费...单击右上角 新建应用，将应用名称输入为“智能营销应用”，应用code为“znyxyy”，填写描述为“创建数据API消费的应用”，单击 确认。预期结果 在 应用管理 列表可查看新建的应用。
新建API归属应用
本文介绍如何新建API应用。前提条件 租户管理员账号登录。已创建“信息中心（xxzx）”工作组，具体操作，请参见 新建工作组并添加成员。操作步骤 登录 数据资源平台控制台。在页面右上角，单击 账号 下拉列表，选择 系统设置。在左侧导航栏...
DataWorks产品安全能力介绍
为充分契合数据安全治理的核心理念与通用思路，DataWorks针对资产梳理、技术体系/运营体系建设提供了一系列全面的数据安全产品能力，基于“I（Identify）P（Protect）D（Detect）R（Respond）”理论框架，从资产识别、安全防护、行为检测、...
修改组件数据
具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧配置面板的 数据 页签中，单击 配置数据源。在 设置数据源 ...
适配组件数据
具体配置API数据源时，是否选中 服务器代理请求 等操作，详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 我的可视化 页面中，选择已创建的可视化应用，单击 编辑。在左侧图层栏中，单击选中某一组件。例如：双十一气泡图。在...
适配组件数据
具体配置API数据源时，是否选中 服务器代理请求 等操作，详情请参见 如何配置跨域数据。操作步骤 登录 DataV控制台。在 工作台 页面中，选择已创建的数据看板，单击 编辑。在左侧图层栏中，单击选中某一组件。例如：Echarts 基本折线图。在...
修改组件数据
具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据配置。操作步骤 登录 DataV控制台。以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧配置面板的 数据 页签中，单击 配置数据源。在 设置数据源 ...
账单域API使用手册
导读 常用API概览 API选择方案 控制台功能对应API 数据字段对应API汇总 各数据源产商品字段对比 常见FAQ 典型场景最佳实践 随着云上业务体量和业务场景复杂度的增加，许多企业在“多组织跨部门管理效率”，“精细化管理质量”以及“云上...
OpenAPI 导航
PolarDB-X 实例 DescribeRegions 查询 PolarDB-X 的 Region 信息 数据库管理类 API 数据库管理类 API 可实现对 PolarDB-X 数据库的运行管理，包括建库、删库、主备读写策略等操作，如下表所示。API 名称 API 描述 CeateDrdsDB 创建数据库 ...
资源组说明
资源组分类 资源组是用于执行具体任务的服务，如接收调度引擎的指令执行SQL任务、数据同步任务，也包括按数据API的定义提供数据服务。按使用场景，资源组分为两类：系统资源组：由数据资源平台提供，供所有用户使用，对于QPS和并发有限制，...
- 产品推荐
- 这些文档可能帮助您