配置VPC数据源
本文介绍在DataV中配置专有网络VPC（Virtual Private Cloud）内数据源的方法。通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是...
数据集成概述
使用限制 数据同步：支持且仅支持结构化（例如RDS、DRDS等）、半结构化、无结构化（OSS、TXT等，要求具体同步数据必须抽象为结构化数据）的数据的同步。即数据集成仅支持传输能够抽象为逻辑二维表的数据同步，不支持同步OSS中存放完全非...
调试实时任务
上传本地数据前需要先下载样例，样例由Dataphin自动识别读写的表和表的schema信息生成的csv格式样例模板，您可根据下载的样例编辑需要上传的数据，单击 上传 后，数据自动填充至 元数据采样 区域。手动输入数据 适用于采集的数据比较少，...
调试实时任务
Session集群调试方式：即通过Session集群进行调试，调试的数据为 线上的真实数据 且为 流式数据（即来源表中写入数据时，将直接输出该条数据的计算结果，与真实线上运行任务的结果一致）。该方式下，Session集群提供Flink任务状态、日志和...
通过缓存优化性能
Delta缓存通过使用快速中间数据格式在节点的本地存储中创建远程文件的副本来加速数据读取。每当需要从远程位置获取文件时，数据都会自动缓存。然后在本地的连续读取上述数据，从而显著提高读取速度。说明 详细内容可参考Databricks官网文章...
使用DataWorks数据服务生成API
本文为您介绍如何通过DataWorks的数据服务，生成并发布数据API，用于在DataV中进行调用并展示。前提条件 在开始本案例前，您需要首先完成 准备工作。背景信息 注意 按照本文档操作后，可以获取到您数据API的AppCode、AppKey和AppSecret，请...
Control
add add(name,value,mode='json')方法描述 添加控件 参数说明 name控件名称 value控件元对象 mode数据格式 可选项：json:json格式 xml:xml格式 调用样例-rpa.ui.ctrl.add-#注意事项：#通过捕捉控件捕捉的控件信息记录在工程文件的.ctrl....
XML 类型
xml 数据类型可以被用来存储 XML 数据。它比直接在一个 text 域中存储 XML 数据的优势在于，它会检查输入值的结构是不是良好，并且有支持函数用于在其上执行类型安全的操作。使用这种数据类型要求在安装时用 configure-with-libxml 选项...
请求结构
使用GET方式向API提交查询，且设置了召回数据格式为XML格式时，可以根据返回的content-type 中定义的格式来解析召回的数据，例如查询返回内容格式为“application/xml”，则本地程序需通过XML格式解析数据。签名参数 每个操作都需在 HTTP ...
聚合支付方案
客户价值 业务可线性拓展 依托Redis缓存和DRDS水平或者垂直拆分数据库技术，解决了高并发、存储容量扩展以及在线计算扩展的难题，使系统具备了存储100TB数据的能力，同时也具备10万TPS（Transactions-per-second）、百万QPS（Queries-per-...
Datagen
您可以指定随机生成数据的最大值和最小值。序列生成器（sequence）：在一定范围内生成有序值，当生成序列达到结束值时结束，因此使用序列生成器将生成有界表。您可以指定序列的起始值和结束值。各种数据类型支持的生成器如下所示。类型 ...
生成数据API
数据服务解决从数仓到应用的“最后一公里”，将数据源中的数据表快速生成数据API，在API网关进行统一管理和发布。实现低成本、易上手、安全稳定的数据共享与开放。背景信息 为了将最终分析的结果加速查询后开放出API接口对接三方服务，本次...
2020年
ST_SetEndDateTime 2020年9月 新增ST_SetDateTime函数，用于设置栅格数据的开始和结束时间以及波段获取时间。ST_SetDateTime 2020年9月 支持栅格数据返回基于流形式的图片格式 新增ST_AsImage函数，用于获取基于流形式的图片格式。ST_...
轨迹层
数据面板 该组件数据为GeoJson格式，关于数据格式以及数据获取方法，请参见 地图数据格式。配置字段说明 字段 说明 geometry 定义 type 类型为"LineString。coordinates 定义两个或多个经纬度坐标位置。properties 定义轨迹起点和终点的...
如何优化数据导入导出
导入导出工具介绍 PolarDB-X 常见的数据导出方法有：mysql-e命令行导出数据 musqldump工具导出数据 select into outfile语句导出数据（默认关闭）Batch Tool工具导出数据（PolarDB-X 配套的导入导出工具）PolarDB-X 常见的数据导入方法有：...
配置config.xml参数
本文介绍了修改 云数据库ClickHouse 集群config.xml配置文件中全局参数的方法。背景信息 云数据库ClickHouse 集群有若干参数，参数默认值通常配置在config.xml和user.xml，您可以修改参数进行实例优化，其中：user.xml配置文件：您可以通过...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
DataV.GeoAtlas概述
DataV.GeoAtlas是一款线上地理小工具，能进行地理范围选择、地理边界生成和层级生成等功能。本文简述DataV.GeoAtlas工具的基本情况。DataV.GeoAtlas工具主要由 范围选择器、边界生成器 和 层级生成器 三个子工具模块组成，您可以通过打开 ...
JindoCache CLI使用说明
jindocache-load-meta-s-R数据缓存：功能说明：数据缓存命令可以备份对应路径的数据至本集群的磁盘，以便于后续可以读取本地数据，无需读取OSS等后端上的数据。命令：jindocache-load-data<options><path>涉及以下参数。参数 说明可选参数...
DataV.GeoAtlas概述
DataV.GeoAtlas是一款线上地理小工具，能进行地理范围选择、地理边界生成和层级生成等功能。本文简述DataV.GeoAtlas工具的基本情况。DataV.GeoAtlas工具主要由 范围选择器、边界生成器 和 层级生成器 三个子工具模块组成，您可以通过打开 ...
Query级别诊断结果
AnalyticDB MySQL版 的SQL诊断功能可以对SQL查询的Query、Stage和算子（Operator）级别的信息分别进行统计，再在统计信息的基础上进行诊断并提供调优建议。本文介绍如何查看和分析Query级别诊断结果。诊断结果类型 说明 查看Query级别诊断...
新建洞察分析
在 自然语言SQL生成 对话框中，下拉选择需要分析的数据表并输入需要查看的结果描述，例如这里的获取门店订单总数和总计销售额，单击 图标。在 自然语言生成 对话框中，确认SQL语句无误后，单击 插入SQL。自动生成的SQL语句会出现在临时查询...
读取OSS数据
背景信息 完成OSS外部表创建后，您可以根据需要选择如下方式之一对OSS外部表进行操作：（推荐）方式一：将OSS的开源格式数据导入MaxCompute内部表，然后再读取OSS的数据。如果直接使用OSS外部表，每次读取数据都涉及OSS的I/O操作，且...
从MyCAT评估导入至PolarDB-X 1.0
在 MyCat信息 页面，填写或上传MyCat相关配置文件（如schema.xml、rule.xml、server.xml等）和业务信息等相关数据后，单击 下一步。说明 所有MyCat相关配置文件仅用来做评估和DDL语句生成使用。在 任务预检 页面，等待 预检结果 显示 成功 ...
开启安全访问代理
数据管理DMS的安全访问代理可以为访问数据库带来更全面的安全保障。实例开启安全访问代理后，您可以使用标准的MySQL、HTTPS协议，通过命令行、数据库管理工具或程序代码直接连接安全访问代理生成的地址，安全地访问目标实例。前提条件 支持...
创建Impala数据源
通过创建Impala数据源能够实现Dataphin读取Impala的业务数据或向Impala写入数据。本文为您介绍如何创建Impala数据源。背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至...
版本发布记录
深度集成的生态 接入融合分析和数据回流能力 目前支持如下数据源的接入融合分析和数据回流能力，包括对象存储OSS上7种以上结构化、半结构化、以及多种压缩格式的数据文件，表格存储，AnalyticDB，云数据库版或自建数据库（MySQL、...
增量查询
Clustering和Compaction操作都会产生新的数据文件，但并没有增加新的逻辑数据行，只是把原有的记录进行了组织编排优化，因此新产生的数据文件中的记录不应该作为新增数据重复输出，为此，增量查询做了专门设计优化，会剔除掉这些记录，也...
配置Log Service输入组件
同步Log Service数据源的数据至其他数据源的场景中，您需要先配置Log Service输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Log Service输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Log Service...
配置Log Service输入组件
同步Log Service数据源的数据至其他数据源的场景中，您需要先配置Log Service输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Log Service输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Log Service...
概述
查询冷数据 对普通表和分区表执行冷数据归档操作后，您可以通过以下方法查询归档后的冷数据：普通表：执行冷数据归档后，查询冷数据的方法和查询热数据的方法一致，不需要修改访问方式。分区表：执行冷数据归档后，查询冷数据的操作方法请...
一键实时同步至Kafka
这样即使源端没有读取到新数据，Kafka中最新数据的时间信息也会持续更新，您可以根据Kafka中读取到的最新数据的时间判断实时同步的进度。源端update变更对应一条Kafka记录 定义当源端进行update操作时，是否同步update源表数据。勾选后，源...
数据服务入门
步骤一：创建数据源并配置网络连通性 使用数据服务创建API前，您需将数据库或数据仓库添加为DataWorks的数据源，并保障数据服务资源组与您的目标数据源网络连通，以便调用API时DataWorks可成功访问数据源。说明 DataWorks工作空间将集群或...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
配置API输出组件
配置API输出组件，可以将外部数据库中读取的数据写入到API，或从大数据平台对接的存储系统中将数据复制推送至API，进行数据整合和再加工。本文为您介绍如何配置API输出组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建API...
ModifyInstanceName
返回数据 名称 类型 示例值 描述 RequestId String 959DA199-54E5-569D-AD46-92BED8515E62 请求ID。示例 请求示例 http(s):/hbase.aliyuncs.com/?Action=ModifyInstanceName &ClusterId=ld-bp150tns0sjxs*&ClusterName=testhbaseone&...
DsgStopSensIdentify
调用DsgStopSensIdentify接口，停止数据保护伞定义的分类分级敏感数据识别任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必...
周期任务基本运维操作
您可以在 运维中心>周期任务 列表查看指定工作空间下的周期任务，并对任务进行运维操作，包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您介绍周期任务的运维操作详情。使用说明 仅生产环境运维中心支持...
开启透明数据加密TDE
TDE所使用的密钥，由 密钥管理服务KMS（Key Management Service）统一生成和管理，云数据库Redis不提供加密所需的密钥和证书。实例回收站 不支持恢复已开启TDE的实例。操作步骤 访问 Redis实例列表，在上方选择地域，然后单击目标实例ID。...
- 产品推荐
- 这些文档可能帮助您