文档修订记录
本文为您介绍DataWorks文档更新的最新动态，基于此您可以及时了解DataWorks的新增特性及功能变更。2024年2月更新记录 时间 特性 类别 描述 产品文档 2024.2.22 新增功能 账单订阅及查询分析 用户中心支持订阅不同类型的账单数据，例如，...
Spring集成
消息类型 发送消息示例代码 订阅消息示例代码 普通消息 ProducerClient.java 同步发送：SyncProducerTest.java 异步发送：AsyncProducerTest.java Tag过滤方式订阅：ConsumerClient.java SQL过滤方式订阅：SqlConsumerClient.java 顺序消息...
DataHub数据源
附录：离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要在任务脚本中按照脚本的统一格式要求编写脚本中的reader参数和writer参数，脚本模式的统一要求请参见 通过脚本模式配置离线同步任务，以下为您介绍脚本...
排行榜
排行榜反映指标在维度中的分布及排名顺序，简洁地展示TOP N的降序排行。例如，排行榜根据销售额从大到小的顺序展示TOP 10城市。本文为您介绍如何为排行榜添加数据并配置样式。前提条件 已创建仪表板，请参见 新建仪表板。图表概述 使用场景...
常见问题
如果在DTS进行增量同步过程中删除了目标库中的某一个库或表，导致任务异常，您可以采取如下两种方案恢复任务：方法一：重新配置任务，待同步对象不选择导致任务失败的库或表。方法二：修改同步对象，移除导致任务失败的库或表。具体操作，...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
SQL常见问题
本文为您介绍实时计算Flink版的SQL常见问题，包括作业常见问题、开发报错、运维报错。为什么使用POJO类作为UDTF返回类型时字段会出现“错位”?为什么数据在LocalGroupAggregate节点中长时间卡住，无输出？运行拓扑图中显示的Low Watermark...
阿里云SDK概览
支持的语言 阿里云SDK（V2.0版本）阿里云SDK（V1.0版本）Java 下载地址：Java同步：kms20160120 Java异步：alibabacloud-kms20160120 参考文档：快速开始 下载地址：aliyun-java-sdk-kms 参考文档：快速开始 Python 下载地址：alibabacloud...
内容检测API
视频审核API无法直接使用视频点播业务中的 VideoID，您可以通过截帧方式上传图片帧序列检测，或者使用视频可访问的URL。更多信息，请参见 异步检测。内容安全视频审核是否支持M3U8类型的文件？不支持 M3U8 格式文件。视频文件支持以下格式...
产品架构
本文为您介绍EMR Serverless StarRocks的架构。StarRocks架构的核心为FE（Frontend）和BE（Backend）两类进程，不依赖任何外部组件，方便部署与维护。FE和BE都可以在线水平扩展，元数据和业务数据都有副本机制，确保整个系统无单点。...
JVM监控内存详情说明
直接缓冲区 Java中的直接缓冲区（Direct Buffer）是一种特殊类型的缓冲区，它直接在操作系统的内存中分配空间，而不是在Java虚拟机的堆内存中分配。直接缓冲区的主要特点是可以提供更快的I/O操作，并且可以避免内存复制的开销，因此在处理...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
本文介绍如何使用数据传输服务DTS（Data Transmission Service）实现 PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步。前提条件 已创建源和目标 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
UDF开发（Java）
SQL中的NULL值通过Java中的NULL表示。Java Primitive Type无法表示SQL中的NULL值，不允许使用。UDF开发流程 开发UDF时通常需进行准备工作、编写UDF代码、上传并注册UDF、调试UDF这几个步骤。同时MaxCompute支持多种工具，以下以常见的...
创建与释放全球多活数据库集群
Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到主键冲突时，直接跳过当前同步语句，继续往下执行，选择使用目标库中的冲突记录。同步任务不会中断。Overwrite（遇到冲突，直接覆盖目标实例中的冲突记录）当数据同步遇到...
概述
本章节介绍Elasticsearch的Java Client的原理、版本兼容性以及使用示例，帮助您快速地使用Java客户端与Elasticsearch集群进行交互，完成检索、分析等相关业务。Transport Client迁移至REST Client Transport Client随着Elasticsearch的第一...
什么是表格存储
分类 数据同步 描述 数据导入 同步MySQL数据 使用DataX、DTS、canal工具或者Tapdata Cloud将MySQL数据库中的数据同步迁移到 表格存储 中。同步Kafka数据 基于Tablestore Sink Connector将Apache Kafka中的数据批量导入到 表格存储 的数据表...
开启辅助DNS
介绍如何开启辅助DNS服务。产品限制 辅助DNS面向 云解析DNS企业旗舰版 用户开放使用。立即购买 云解析DNS目前只能作为 辅DNS 使用，您当前使用的DNS为 主DNS。域名开启辅助DNS后，在云解析的解析设置中不能手动修改解析记录，所有解析记录...
概述
客户端简介 Lindorm搜索引擎支持使用以下两种Java客户端访问：Java High Level REST Client（推荐）：Elasticsearch官方于2017年9月11日（5.6.0版本）发布的“高级”客户端。该客户端基于Low Level客户端，并扩展了Low Level Rest客户端的...
功能特性
RAM和STS介绍 RAM Policy 访问控制RAM中的权限策略（RAM Policy）是一种基于用户的授权策略，可以集中管理您的用户（例如员工、系统或应用程序）以及控制用户访问资源的权限。RAM Policy Control Policy 资源管理Resource Management中的...
通过对接外部LDAP登录云原生AI控制台
说明 通过上述3个操作步骤，LDAP中的用户信息已经同步到IDaaS的 阿里云RAM-用户SSO 应用中，您还需要通过SCIM协议把IDaaS应用中的用户，同步到RAM即可。配置SCIM同步。具体操作，请参见 配置SCIM同步。相关参数配置获取方法：SCIM同步地址=...
OGG插件介绍
Extract：负责从源端数据库表或者事务日志中捕获数据，有初始加载和增量同步两种模式可以配置，初始加载模式是直接将源表数据同步到目标端，而增量同步就是分析源端数据库的日志，将变动的记录传到目标端，本文介绍的是增量同步的模式；...
初始化OTSClient
常见问题 使用表格存储SDK时出现Signature mismatch异常 Java SDK报错：SocketTimeoutException 使用Java SDK时出现The access key id is invalid异常 Java SDK报错：java.lang.IllegalStateException:Request cannot be executed;...
同步 OceanBase 数据库的数据至 DataHub
Java 中的 LONG 大小）FLOAT DECIMAL DOUBLE DECIMAL DECIMAL DECIMAL DATE STRING TIME STRING YEAR BIGINT DATETIME STRING TIMESTAMP TIMESTAMP（使用毫秒级时间戳展示）VARCHAR STRING TINYBLOB STRING（Base64 编码）TINYTEXT STRING ...
Java API Client(8.x)
Java API Client主要包含三个部分：ElasticsearchClient类：Java API Client的核心类，提供与Elasticsearch服务器进行通信的方法。该类封装了底层的Transport通信，并提供了同步和异步调用、流式和函数式调用等方法。JSON object mapper：...
概述
PSQL客户端 JDBC JDBC（Java Data Base Connectivity，java数据库连接）是一种用于执行SQL语句的Java API，可以为多种关系数据库提供统一访问，它由一组用Java语言编写的类和接口组成。全SQL执行，更适用于有JDBC开发经验的开发者。JDBC ...
实时同步常见问题
本文为您介绍实时同步的相关问题。文档概述 问题分类 相关文档 实时同步任务配置须知 实时同步任务支持哪些数据源？为什么实时同步任务延迟较大？实时同步任务延迟解决方案 实时同步任务为什么不建议使用公网？实时同步字段格式问题 实时...
Commons Pool 连接 OceanBase 数据库示例程序
本文将介绍如何使用 Commons Pool、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入数据、更新数据、删除数据、查询数据和删除表等。点击下载 commonpool-mysql-client 示例工程 前提条件...
Java
本文介绍了如何使用阿里云视觉智能开放平台的Java SDK，具体包括SDK的安装方法以及SDK代码示例。说明 阿里云视觉智能开放平台各类目视觉AI能力SDK接入、接口使用或问题咨询等，请通过钉钉群（23109592）加入阿里云视觉智能开放平台咨询群...
通过OpenTelemetry上报Java应用数据
java-opentelemetry-demo 方法一：使用OpenTelemetry Java Agent自动埋点 OpenTelemetry Java Agent 提供了无侵入的接入方式，支持上百种Java框架自动上传Trace数据，详细的Java框架列表，请参见 Supported Libraries and Versions。...
导入与导出
本文介绍AnalyticDB MySQL中导入导出的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何停止异步导入导出任务？如何使用SQL查看当前库里RUNNING的导入...
通过OpenTelemetry上报Java应用数据
java-opentelemetry-demo 方法一：使用OpenTelemetry Java Agent自动埋点 OpenTelemetry Java Agent 提供了无侵入的接入方式，支持上百种Java框架自动上传Trace数据，详细的Java框架列表，请参见 Supported Libraries and Versions。...
方案概述
本章节介绍了一键升级RDS MySQL至 PolarDB MySQL版 的方案简介、两种升级方式及其优势和对比、升级前提条件、使用限制、收费规则等。升级方案概述 PolarDB 支持将RDS MySQL一键升级至 PolarDB MySQL版，整个过程中将自动为您创建目标端...
AnalyticDB for MySQL 3.0数据源
AnalyticDB for MySQL 3.0数据源为您提供读取和写入 AnalyticDB for MySQL 3.0双向通道的功能，本文为您介绍DataWorks的AnalyticDB for MySQL 3.0数据同步的能力支持情况。使用限制 ADB湖仓版数据源不支持在公共资源组配置以及运行同步任务...
LDAP配置
本文介绍如何进行LDAP（Lightweight Directory Access Protocol 轻量级目录访问协议）配置，配置完成后，阿里云盘企业版 可同步LDAP内的组织结构及用户，用户可使用LDAP账号直接登录 阿里云盘企业版，实现便捷管理网盘内的用户和团队。...
扫描上报和合并代码模型
上报编辑中的文件及依赖 适用场景：把当前模型类的所有内容上报到平台，适用于当前类有较多修改且需要同步到平台的情况下使用。在当前模型类单击右键，选择 BizWorks>上报当前类及依赖到平台。在Tool Window扫描本地模型 打开IDEA，您可以...
C3P0 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 C3P0 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 c3p0-mysql-jdbc 示例工程 前提条件 您已安装 OceanBase 数据库...
Amazon S3数据源
Simple Storage Service（简称S3）是一种专为从任意位置存储和检索任意数量的数据而构建的对象存储，DataWorks数据集成支持使用Amazon S3 Reader插件从S3数据库读取数据，本文为您介绍DataWorks的Amazon S3数据读取能力。支持的Amazon S3...
Java上传SDK
本文为您介绍了阿里云Java上传SDK在不同更新时间对应的更新功能。说明 下载最新版上传SDK，请参见 SDK简介与下载。2022-11-03 日期 版本 修改内容 2022-11-03 1.4.15 fastjson升级到1.2.68.noneautotype版本。点播服务端SDK升级到2.16.11...
通过SkyWalking上报Java应用数据
2.4.x NoSQL Redis Jedis 2.x Redisson Easy Java Redis client 3.5.2+Lettuce 5.x MongoDB MongoDB Java Driver 2.13-2.14,3.3+Memcached Client Spymemcached 2.x Xmemcached 2.x Elasticsearch transport-client 5.2.x-5.6.x transport...
通过SkyWalking上报Java应用数据
2.4.x NoSQL Redis Jedis 2.x Redisson Easy Java Redis client 3.5.2+Lettuce 5.x MongoDB MongoDB Java Driver 2.13-2.14,3.3+Memcached Client Spymemcached 2.x Xmemcached 2.x Elasticsearch transport-client 5.2.x-5.6.x transport...
- 产品推荐
- 这些文档可能帮助您