教程概述
DataWorks数据服务与DataV进行无缝打通后，就不再需要使用DataV中的 API数据源 去填写一个URL调用API，而是直接新建一个DataWorks数据服务作为数据源，就可以选用数据服务中的API。无需每个API都设置AppKey和AppSecret认证信息，并且支持...
实时数据订阅概述
云原生多模数据库 Lindorm 支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何一个表的...
运行SQL命令并导出结果数据
在MaxCompute客户端，执行Tunnel Download命令导出数据。命令示例如下。tunnel download result_table1 result_table1.txt;tunnel download result_table2 D:\test\result_table2.csv;当出现图示 OK 字样，说明导出完成。在导出路径下确认...
Invalid Signature
因为 HTTP Response Header 中不允许出现换行符，因此返回结果中的 StringToSign 换行符都已经被抹去。请参照文档合理比对。如果服务端 StringToSign 与客户端一致，请再检查使用的 AppKey、AppSecret 是否正确，尤其注意是否额外错误添加...
导出至OSS
云原生数据仓库AnalyticDB MySQL版 支持通过外表和INSERT INTO方式将 AnalyticDB MySQL版 数仓版（3.0）中的数据导出到对象存储OSS（Object Storage Service）中。将数据导出到OSS功能只支持CSV和Parquet格式文件。前提条件 在 对象存储 ...
DMS数据管理预案助力业务大促
通过本文您可以对现有数据库性能、安全等能力进行评估，提前规划好预防措施保障业务稳定运行，避免活动期间因数据库超载导致系统崩溃造成经济损失。前提条件 使用DMS大促预案的实例的管控模式为安全协同。更多信息，请参见 管控模式。背景...
表详情
元数据包括：技术元数据：表在库中的物理信息，包括所属库和实例、表名、描述（Comment）、字段、索引、编码、行数、容量、血缘、产出信息及数据质量等。业务元数据：用于更好从业务层面去描述和管理表而配置的信息，包括标签、类目、表...
使用摘要签名认证方式调用API
因为HTTP Header中无法表示换行，因此StringToSign中的换行符都被替换成#。errorMessage:Invalid Signature,Server StringToSign:`GET#application/json#application/json#X-Ca-Key:200000#X-Ca-Timestamp:1589458000000#app/v1/config/...
使用XIHE BSP SQL进行作业开发
示例数据说明 本文示例将数据文件 xihe_oss.txt 上传至OSS路径 oss:/adb-test-1/test_xihe/中，数据行分隔符为换行符，列分隔符为英文逗号（,）。示例数据文件内容如下：001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100...
mysqldump
当您需要备份或者迁移 云数据库SelectDB 中的数据时，通过mysqldump工具，可以将数据库的结构和数据导出到一个文本文件中。该文件包含了创建数据库、表以及插入数据的SQL语句，从而确保数据的完整性和一致性。使用示例 导出 导出test_db...
数据服务
数据服务中的API分组的作用是什么，与API网关中的分组有什么关联？如何合理设置API分组？最多可以创建多少个API分组？什么情况下要开启API返回结果分页功能？生成API是否支持POST请求？生成API是否支持HTTPS协议？为什么数据服务无法连接...
创建元数据
分隔符 基于业务数据中的分隔符选择对应的分隔符。当只有一个Rowkey字段时，也需要选择分隔符，这时分割符可以任意选一个即可。Rowkey字段间的分隔符包括DASH(-)、AMPERSAND(&)、CARET(^)、SEMICOLO(:)、POUND(#)、VERTICAL(|)、UNDERSCORE...
操作流程
数据服务API：数据API是一种由云计算资源中的数据通过参数配置生成API的API类型，生成API后可以方便后续调用，减少资源操作成本。三方API：统一服务支持创建第三方平台提供的API，通过生成API可以方便后续调用，减少资源操作成本。数据上报...
新建Elastic Service在线类型的节点并运行
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Elastic Service在线类型的节点并运行
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Elastic Service在线类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
新建Flink Vvp Stream类型的公共节点
数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未创建...
新建Elastic Service在线类型的公共节点
输出数据结构 输出表的数据格式，由数据模型定义，在下拉列表中选择，表示该计算资源中输出数据的数据表的结构。当选择数据表时，需保证节点输出的模型与下游节点的输入数据模型相同。当选择星号（*）时，代表数据结构为任意结构，用于对未...
导出至MaxCompute
说明 导出数据到MaxCompute分区表时，需要明确指定待写入的分区，不支持同时导出到多个分区，您可以通过执行多个SQL的方式实现将数据导出到多个MaxCompute分区。MaxCompute最高支持6级分区，其他多级分区的操作步骤类似。一级分区表 CREATE...
独享数据服务资源组
为保证用户创建并封装在数据服务中的API在被外部应用调用时，能达到高QPS以及满足可用性保障，企业需要使用独享数据服务资源以确保调用的高效和可靠。独享数据服务资源给用户提供了专属的计算资源和环境隔离，提升企业高并发接口处理效率，...
批量操作API
注意事项 批量修改API基础配置后，可一键发布API，发布API功能会对已经发布到环境上的API再次发布以更新环境上的API数据，没有发布过的API不会发布到环境。批量删除API操作需保证选中的API已下线。批量授权一次最多授权30个应用（APP）。...
管理模型
单击 开始 菜单栏中的 新建，弹出 新建模型 对话框。选择好目标模型后，单击 确定，在模型树上会创建一个新的模型，您可以在模型中添加表/实体、字段/属性等元素。查看模型 右键单击模型树上的一个模型，选择 打开数据视图，即可快速打开该...
创建同步OSS
同步说明 1）目前DataHub支持将TUPLE和BLOB数据同步到OSS中 TUPLE:采用csv数据格式，每个Record中的column数据以逗号分隔，Record之间采用 换行符' ' 分隔 BLOB:采用Append方式进行数据追加，如果用户需要拆分OSS数据，用户需要自己往...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的...您可以在完成敏感数据规则配置的第二天，进入 导出行为 页签，查看访问人员从MaxCompute中导出数据至外部的情况。包括查询时间段内的数据导出的总量、每天导出的数据量和数据导出总量的前五名。
从OSS批量导入导出
HybridDB for MySQL支持直接从OSS中导入和导出数据，这也是HybridDB for MySQL的功能之一。将数据从OSS导入到HybridDB for MySQL中需要如下四个步骤：准备OSS中真实数据文件的存储目录 在HybridDB for MySQL中建立一张外表映射到OSS中的源...
导出标准OAS定义
概述 本文主要介绍了API网关可以将API资源导出为标准OAS定义，结合API网关的 导入标准OAS定义，您可以：跨平台跨地域迁移数据：借助API网关的导出和导入功能，您可以方便地从其他平台或API网关导出OAS规范的API数据，并在其他地域或账号下...
数据保护机制
说明 如果Alice本身没有表project_test.table_test的SELECT权限，即使设置了Exception Policy，Alice仍然无法导出数据。注意事项 设置Exception Policy可能存在TOCTOU（Time-of-Check to Time-of-Use）数据泄露问题（即Race Condition问题...
数据服务：低成本快速发布API
DataWorks的数据服务功能模块是灵活轻量、安全稳定的数据API构建平台，旨在为企业提供全面的数据共享能力，帮助用户从发布审批、授权管控、调用计量、资源隔离等方面实现数据价值输出及共享开放。功能概述 作为数据仓库与上层应用系统间的...
数据保护伞入门
规则类型 定义数据风险类型，支持数据访问、数据导出、数据操作、其他等类型。本文示例选择数据导出风险，即导出phone类型数据的操作将被认为是风险操作。规则等级 定义该操作的风险等级。本文示例将phone数据的导出定义为高风险。规则定义...
添加API数据源
API指通用的数据接口，如果您已有可用的API接口，可在DataV中使用自己的API数据源连接。前提条件 已准备好待添加的API数据源。操作步骤 登录 DataV控制台。在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 编辑。重要 如果您的 ...
添加API数据源
API指通用的数据接口，如果您已有可用的API接口，可在DataV中使用自己的API数据源连接。前提条件 已准备好待添加的API数据源。操作步骤 登录 DataV控制台。在 我的可视化 页面中，将鼠标移动至需要编辑的可视化应用上，单击 编辑。重要 ...
Tunnel命令常见问题
如果无法更换数据中的分隔符，可以将数据作为单独一行上传，然后使用UDF解析。如下示例数据中包含回车，使用“,”作为列分隔符-rd，使用“@”作为行分隔符-fd，可以正常上传。shopx,x_id,100@shopy,y_id,200@shopz,z_id,300@上传命令示例...
使用DataV可视化应用展示数据返回结果
本文为您介绍如何在DataV中调用DataWorks的数据服务API，并将数据返回结果展示在DataV可视化应用中。前提条件 在开始本案例前，您需要首先完成 准备工作，并已经 生成了数据服务API。背景信息 警告 您必须使用HTTP协议进入DataV控制台，...
统一服务
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”的传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
功能简介
在数据中台建设过程中，搭建核心处理平台，并根据相关标准要求，将源数据或治理后的数据，按照“全面、高效、统筹”的共享原则，“低延时”、“精准化”地传递给用户，方便更多应用消费数据，实现数据价值。协同管控各种组织机构，为智慧化...
操作流程
数据服务API：数据API是一种由云计算资源中的数据通过参数配置生成API的API类型，生成API后可以方便后续调用，减少资源操作成本。上线API 通过上线API操作才能使API被调用。服务调用流程（工作组内）及说明 流程图 流程说明 流程 说明 API...
数据服务
加工后的数据供应用读取：通过数据工具对数据进行加工汇总后，业务应用希望读取这部分加工后的数据进行业务处理，则可通过API的方式快速输出。当需要变更读取的逻辑时，只需要调整API背后的数据逻辑，而不需要重新发布应用。目前API网关...
生成数据API
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
创建数据流
数据库：配置项 描述 数据库类型 选择输出数据的目标数据库类型。数据库 搜索并选择输出数据的目标数据库。说明 如果数据库未登录，在 登录实例 对话框中，输入 数据库账号 和 数据库密码 登录数据库。表名 选择或输入数据流输出数据的目标...
- 产品推荐
- 这些文档可能帮助您