读写吞吐量
当用户对单个数据表的预留读/写吞吐量需求超出100000时，可以 提交工单 提高预留读/写吞吐量。预留读/写吞吐量更新规则 通过UpdateTable接口可以动态修改表的预留读/写吞吐量配置。预留读/写吞吐量的更新规则如下：每个自然日内（UTC时间00...
运维监控
Java写日志 package example;import com . aliyun . fc . runtime . Context ;import com . aliyun . fc . runtime . StreamRequestHandler ;import java.io.IOException;import java.io.InputStream;import java.io.OutputStream;public ...
二级索引计量计费
如果此行数据所在的列建有索引，并且可以根据此行数据创建有效的索引（即此行会生成索引行），则每张索引表产生的写CU如下：如果生成了有效的索引行，索引表写CU的个数计量与数据表相同，按4 KB向上取整，否则不产生写CU。覆盖写场景（此行...
SQL使用限制
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
SQL使用限制
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
SQL使用限制项
单表分区数 60000个 数量限制 单表的分区个数最多为60000个。表的分区层级 6级 数量限制 在表中创建的分区层次不能超过6级。屏显 10000行 数量限制 SELECT语句屏显最多输出10000行。INSERT 目标个数 256个 数量限制 MULTI-INSERT 场景，...
通过HBase Java API连接并使用宽表引擎
Lindorm宽表引擎支持通过HBase Java API读写数据。本文介绍如何通过HBase Java API访问Lindorm宽表引擎。前提条件 已安装Java环境，要求安装JDK 1.8及以上版本。已将客户端IP地址添加至Lindorm白名单。添加方法请参见 设置白名单。已完成...
CreateTable
如果需要提高单实例下表数目的上限，请 提交工单。请求消息结构 message CreateTableRequest { required TableMeta table_meta=1;required ReservedThroughput reserved_throughput=2;optional TableOptions table_options=3;optional ...
Hive作业异常排查及处理
报错日志：FAILED:Execution ERROR,return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.org.apache.thrift.transport.TTransportException:java.net.SocketTimeoutException: Read timeout 原因分析：作业异常的可能原因是表分区...
CDC问题
建议您使用可写实例或者升级RDS MySQL至更高版本。MySQL全量数据读取完后一直卡住。MySQL CDC全量阶段读取时间过长，导致最后一个分片数据量过大，出现OOM问题，作业Failover后卡住。增加MySQL Source端的并发，加快全量读取的速度。在...
通过历史数据启动实例
3.如果您通过MaxCompute上传历史数据，三张表同时导入，不支持单表更新。IV 配置实时数据源 当您选择通过MaxCompute启动实例时，您增量的行为数据、物品数据、用户数据均需要通过服务端SDK进行数据推送，通过服务端SDK推送数据详见：推送...
StartLocalTransaction
重要 使用Java SDK 5.11.0及以上版本时，您可以在创建数据表时开启局部事务。更多信息，请参见 数据表操作。主键自增列功能和局部事务功能不能同时使用。请求消息结构 message StartLocalTransactionRequest { required string table_name=...
上下游存储
其他 上游Connector单partition无数据进入，导致Watermark无法推进，窗口输出延迟 报错：Caused by:java.lang.IllegalArgumentException:Listener with name jobmaster already registered 报错：org.apache.flink.util....
术语表
授权 项目管理员或者项目Owner可以授予其他角色对MaxCompute中的对象（例如表、任务、资源等）进行某种操作的权限，包括读、写、查看等。更多授权信息，请参见 用户规划与管理。沙箱（Sandboxie）沙箱是一种按照安全策略限制程序行为的执行...
版本更新记录
本文为您介绍Java SDK近期版本的更新说明，基于此您可以了解Java SDK对应版本的变更点。Java SDK近期版本的更新说明如下，详细信息请单击对应版本链接获取。版本 变更类型 描述 v0.45.2-public 功能增强 支撑新版控制台发布。修复...
UDT概述
new java.util.ArrayList(java.util.Arrays.asList('1','2'))的结果是 java.util.ArrayList类型，而 new java.util.ArrayList(java.util.Arrays.asList('1','2'))的结果是 java.util.ArrayList类型。所有的运算符都是MaxCompute SQL的语义...
通过Hive连接并使用宽表引擎
已获取宽表引擎的HBase Java API专有网络连接地址。如何获取，请参见 查看连接地址。注意事项 如果您想要 通过公网访问或您的 实例类型为Lindorm单节点，在执行本文操作前，需要先升级SDK并更改配置。具体操作，请参见 通过HBase Java API...
Tunnel命令常见问题
使用Tunnel Upload命令上传数据时，需要上传很多数据文件到一个表中，是否有方法写一个脚本就可以把文件夹下的所有数据文件上传上去？使用Tunnel Upload命令上传数据时，如何实现批量上传一个目录下的多个文件到同一张表，并且每个文件放在...
概述
本文为您介绍使用MaxCompute Studio开发Java程序的流程以及相关目录。开发流程 通过MaxCompute Studio开发Java程序的流程如下：创建MaxCompute Java Module。开发Java程序。您可以参考如下示例开发不同的Java程序：开发UDF 开发MapReduce ...
查询非结构化数据
MaxCompute 2.0支持通过外部表的方式直接访问OSS、OTS等。MaxCompute Studio对此提供了一些代码模板方便您快速进行非结构化数据查询开发。本文为您介绍如何使用MaxCompute Studio查询非结构化数据。前提条件 您需要完成以下操作：管理项目...
搭建Linux开发环境
export JAVA_HOME=usr/lib/jvm/java-1.8.0-openjdk-1.8.0.322.b06-1.1.al7.x86_64 export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export PATH=$JAVA_HOME/bin:$PATH#按ESC退出编辑，按:wq退出配置文件。执行如下命令...
局部事务
为数据表开启局部事务后，使用局部事务功能，您可以创建数据范围在一个分区键值内的局部事务并对局部事务中的数据进行读写操作。通过使用局部事务您可以实现单行或多行读写的原子操作。场景 使用局部事务功能，可以实现单行或多行读写的...
使用冷存储
建表和修改表属性均可以使用Java API和HBase Shell完成，在使用Java API前请按照 使用Java API访问增强版集群 文档完成Java SDK安装和参数配置。在使用HBase Shell前，请按照 使用HBaseue Shell访问增强版集群 文档完成Shell的下载和配置。...
采集部署
如不能全部提供则可以不写，后续在阿里云Adam分析页面进行过滤设置。`profiler.classpath.whitelist=com.alibaba.javaagent,com.alibaba.adam` 如上面白名单已填写，此处可忽略；如果不清楚白名单列表，填写黑名单也可过滤无用的调用栈信息...
性能测试工具-图形工具
步骤三：配置测试任务 必填配置 Lindorm 参数 参数说明 获取路径 cluster_addr Lindorm实例宽表引擎的HBase Java API访问地址。Lindorm控制台 的 数据库连接 页面，单击 宽表引擎，可查看HBase Java API访问地址。如果AHBench-jenkins部署...
日志配置
客户端日志配置项 客户端日志的配置项及说明如下表所示。客户端启动后，会按照系统默认配置生成日志文件；您也可以自定义配置项，修改日志参数，具体操作，请参见本文中的 自定义配置客户端日志。配置项 系统默认配置 是否支持自定义配置 ...
日志配置
客户端日志配置项 客户端日志的配置项及说明如下表所示。客户端启动后，会按照系统默认配置生成日志文件；您也可以自定义配置项，修改日志参数，具体操作，请参见本文中的 自定义配置客户端日志。配置项 系统默认配置 是否支持自定义配置 ...
MapReduce常见问题
FAILED:ODPS-0123131:User defined function exception-Traceback:java.lang.ExceptionInInitializerError.Caused by:java.security.AccessControlException:access denied("java.lang.RuntimePermission""getProtectionDomain")at java....
SQL脚本模式
脚本模式下，如果一个表先被写再被读，则会发生报错，如下。INSERT OVERWRITE table src2 SELECT*FROM src WHERE key>0;a:=SELECT*FROM src2;SELECT*FROM@a;所以，为避免因表的先写后读产生的报错，应修改SQL脚本如下。a:=SELECT*FROM src ...
初始化OTSClient
OTSClient是 表格存储 服务的客户端，它为调用者提供了一系列的方法，可以用来操作表、读写单行数据、读写多行数据等。如果要使用宽表模型的操作数据表、读写单行数据、读写多行数据等功能，您需要初始化一个OTSClient实例，并可以根据需要...
使用Aliyun Log Java Producer写入日志数据
本文介绍日志服务Aliyun Log Java Producer类库的使用方法。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请...
性能测试工具-图形工具
Lindorm Lindorm实例宽表引擎的HBase Java API访问地址。控制台页面>数据库连接>宽表引擎（注意区分专有网络和外网地址）。专有配置说明（可选）不同配置方式中的参数说明如下表所示。配置方式 参数说明 HBase标准版 cluster_version：...
SQL常见问题
85)at org.apache.flink.table.factories.FactoryUtil.createTableSource(FactoryUtil.java:134).30 more 报错原因 实时计算引擎vvr-3.0.7-flink-1.12及以前的版本，CDC Source只能单并发运行。但在实时计算引擎vvr-4.0.8-flink-1.13版本后...
OGG插件介绍
为了简单起见，先不考虑分区表的情况，以2016-12-06这天的增量数据为例，假设前一天的全量数据在表orders_base里面，datahub同步过来的增量数据在orders_log表中，将orders_base与orders_log做合并操作，可以得到2016-12-06这天的最终全量...
SELECT TRANSFORM
单线程。性能 select transform 支持的部分工具，例如AWK是Native代码实现的。理论上，与Java相比，使用 select transform 会更有性能优势。性能不高。使用限制 由于MaxCompute计算集群上未部署PHP和Ruby，所以不支持调用这两种脚本。命令...
SELECT TRANSFORM
单线程。性能 select transform 支持的部分工具，例如AWK是Native代码实现的。理论上，与Java相比，使用 select transform 会更有性能优势。性能不高。使用限制 由于MaxCompute计算集群上未部署PHP和Ruby，所以不支持调用这两种脚本。命令...
插件概览
云监控插件版本的详细说明如下表所示。语言 版本号 说明 参考文档 C++（推荐）3.X 最新版本，推荐使用。安装和卸载云监控插件 Go 2.X 推荐使用C++版本，Go版本插件不再维护。云监控Go语言版本插件介绍 云监控Go语言版本插件安装 Java 1.X ...
常见报错
可能原因：当前Lua脚本已执行写命令，此时 SCRIPT KILL 命令无法生效。解决方法：在控制台的实例列表页面，找到对应实例，单击 操作 列的 重启，更多信息请参见 重启实例。UNKILLABLE The busy script was sent by a master instance in ...
常见报错
可能原因：当前Lua脚本已执行写命令，此时 SCRIPT KILL 命令无法生效。解决方法：在控制台的实例列表页面，找到对应实例，单击 操作 列的 重启，更多信息请参见 重启实例。UNKILLABLE The busy script was sent by a master instance in ...
概述
实时计算Flink版支持在Flink SQL作业中使用Java自定义函数，本文介绍Flink Java自定义函数的分类、参数传递及调用注意事项。注意事项 为了避免JAR包依赖冲突，在开发自定义函数时您需要注意以下几点：SQL开发页面选择的Flink版本，请和Pom...
- 产品推荐
- 这些文档可能帮助您