管理自定义函数（UDF）
为了避免JAR包依赖冲突，在开发自定义函数时您需要注意以下几点：作业开发页面选择的Flink版本，请和Pom依赖中的Flink版本保持一致。Flink相关依赖，scope请使用provided，即在依赖中添加<scope>provided。其他第三方依赖请采用Shade方式...
提交Spark作业
注意事项 在本文的示例中，JAR包已经直接打包在了镜像中。如果您使用的是自己的JAR包，您可以将其上传到阿里云OSS。上传操作请参见 简单上传。此时，需要您修改命令中的 local:/opt/spark/examples/spark-examples.jar 为您OSS上存放JAR包...
元数据性能测试
NNbench的jar包位于${HADOOP_HOME}/share/hadoop/mapreduce目录下，${HADOOP_HOME}为测试机器中的Hadoop 安装目录，NNbench的jar包名为hadoop-mapreduce-client-jobclient-x.x.x-tests.jar，使用方法如下。本文所有命令均在${HADOOP_HOME}/...
MapReduce常见问题
lib文件夹中也包含了SDK的JAR包，建议您在导入包的时候把最新的客户端工具lib文件夹中的JAR包全部导进来。上传JAR包。将在本地测试通过的MapReduce程序，打成JAR包并上传，假设此JAR包的名称是 mr.jar。更多上传资源操作，请参见 资源操作...
使用说明
因此，在执行示例程序时，-resources 及-classpath 的参数中都出现了JAR包，但二者意义不同：resources 引用的是Graph作业，运行于分布式环境中。classpath 引用的是main函数，运行于本地，指定的JAR包路径也是本地文件路径。包名之间使用...
离线任务（JAVA）zip包制作指南
其中elastic-test-1.0-SNAPSHOT.jar是由mvn 打包出来的（jar包名称根据实际情况替换），其main class可以参照如下，pom自行编写即可，生成对应elastic-test-1.0-SNAPSHOT.jar即可。（备注：在数据开发配置了输入输出参数时，可以通过环境...
离线任务（JAVA）zip包制作指南
其中elastic-test-1.0-SNAPSHOT.jar是由mvn 打包出来的（jar包名称根据实际情况替换），其main class可以参照如下，pom自行编写即可，生成对应elastic-test-1.0-SNAPSHOT.jar即可。（备注：在数据开发配置了输入输出参数时，可以通过环境...
Sleep示例
测试准备 准备好测试程序的JAR包，假设名字为 mapreduce-examples.jar，本地存放路径为 data\resources。准备好SleepJob的测试资源。add jar data\resources\mapreduce-examples.jar-f;测试步骤 在MaxCompute客户端中执行Sleep。jar-...
DataHub
本文档假设您下载以下模拟测试代码到本地，并执行以下命令运行jar包来发送数据到 spark_test 下的 topic01。下载模拟测试代码到本地。wget ...
实时Spark Streaming消费示例
编译运行#编译命令 mvn clean package-DskipTests#编译完后，作业JAR包位于target目录下。提交执行 spark-submit-master yarn-cluster-executor-cores 2-executor-memory 1g-driver-memory 1g-num-executors 2-jars/opt/apps/SPARK-...
编写Graph
说明 本示例将部署到MaxCompute项目的JAR包命名为odps-graph-example-sssp.jar。在MaxCompute客户端，执行如下命令运行SSSP。jar-libjars odps-graph-example-sssp.jar-classpath<LOCAL_JAR_PATH>/odps-graph-example-sssp.jar SSSP 1 sssp...
Java SDK使用示例
下载完成后解压，并复制SDK配置文件 connection-profile-standard.yaml 到 java-sdk-demo 中，最终目录结构如下：安装依赖 示例程序中已经包含了fabric-sdk-java的jar包和对应的源码包。可以通过如下命令进行安装：java-sdk-demo-1.4.5 ...
集群吞吐性能测试
TestDFSIO的jar包位于开源Hadoop版本的${HADOOP_HOME}/share/hadoop/mapreduce目录下，其中${HADOOP_HOME}为测试机器中的Hadoop安装目录，jar包名为hadoop-mapreduce-client-jobclient-x.x.x-tests.jar，您可通过执行以下命令，查看...
配置扩展文件
阿里云PolarDB O引擎提供了兼容Java 6、Java 7和Java 8三个Java版本的JDBC驱动，分别对应以下三个JAR包：polardb-jdbc16.jar polardb-jdbc17.jar polardb-jdbc18.jar 您可以根据应用使用的JDK版本选择合适的JDBC。PostgreSQL JDBC driver ...
常见问题
代码示例中的为输入文件的路径，为输出文件的目录，x.x.x 为JAR包的具体版本号。share/hadoop/mapreduce/hadoop-mapreduce-examples-x.x.x.jar 和<PATH_TO_ALLUXIO>/client/alluxio-x.x.x.-client.jar 均为示例。
Java SDK 快速开始
(3)编译打包 运行命令编译打包：mvn package 即可在 target 得到下面 3 个 jar 包：batchcompute-job-log-count-1.0-SNAPSHOT-Split.jar batchcompute-job-log-count-1.0-SNAPSHOT-Count.jar batchcompute-job-log-count-1.0-SNAPSHOT-...
Maven开发常见问题
本文介绍如何解决无法下载JAR包的问题。无法下载JAR包 如果出现本地开发环境无法找到需要依赖的JAR包，请按以下步骤排查解决。确认 pom.xml 文件中是否已经添加了Maven依赖。例如：<dependency><groupId>...
技术栈使用指南
即脚本需要部署在 fat JAR 包（即可部署模块）中的 classpath 根目录下。调用时机：在 hook.sh 脚本中声明待被调用的函数，不同函数名对应不同的调用时机：before_appstart_hook：应用启动前 after_appstart_hook：应用启动后 其他名字的...
使用Flink访问
此处使用Apache Hadoop 2.7.3自带的JAR包 hadoop-mapreduce-examples-2.7.3.jar 中的randomtextwriter方法在文件引擎上生成测试数据。usr/local/hadoop-2.7.3/bin/hadoop jar/usr/local/hadoop-2.7.3/share/hadoop/mapreduce/hadoop-...
安装Java SDK
背景信息 阿里云开发者中心为您提供了Java SDK以及阿里云核心库的Maven项目依赖及JAR包，您可以编写代码调用相关阿里云SDK来实现对阿里云的产品和服务的访问。本文示例中，客户端为macOS 11.4操作系统，使用的Java开发工具为IntelliJ IDEA...
本地运行和调试包含连接器的作业
步骤二：配置运行所需要的ClassLoader JAR包 为了使Flink能够加载连接器的运行类，还需添加ClassLoader JAR包。首先下载 ververica-classloader-1.15-vvr-6.0-SNAPSHOT.jar 至本地。以Inteillij IDEA为例，对作业的本地运行配置进行修改。...
UNI_HASH
描述 使用UNI_HASH分库时，根据分库键的键值直接按分库数取余。如果键值是字符串，则字符串会被计算成哈希值再进行计算，完成路由计算，例如UNI_HASH('8')等价于8%D（D 是分库数目）。说明 按照键值或者哈希值取余时，不会对键值会哈希值...
UNI_HASH
分库和分表都使用同一个拆分键进行UNI_HASH时，先根据分库键键值按分库数取余，再均匀散布到该分库的各个分表上。使用场景 适合于需要按用户ID或订单ID进行分库的场景。适合于拆分键是整数或字符串类型的场景。两张逻辑表需要根据同一个...
创建TDH Inceptor计算源
在UDF工程中，手动添加Hive等JAR包依赖时，需要保证添加的依赖包来自于运行此UDF JAR包的集群。通过MySQL元数据库获取元数据信息时，不支持获取：全景、数据板块、项目的数据量信息。资产目录中表数据量、分区数据量、分区记录数。资源治理...
DataFlow集群通过Hive Catalog连接数据湖元数据DLF
具体版本请根据您实际情况下载，本示例下载的JAR包为jackson-core-2.12.1.jar、jackson-databind-2.12.1.jar和jackson-annotations-2.12.1.jar。执行以下命令，启动SQL客户端。sql-client.sh-j/opt/apps/FLINK/flink-current/opt/catalogs/...
快速入门视频
构建.jar包命令：mvn install-Dmaven.test.skip=true Dockerfile文件内容：FROM maven:3.5-jdk-8 COPY target/iot-demo-0.0.1-SNAPSHOT.jar/iot-demo.jar EXPOSE 8080 ENTRYPOINT["/bin/bash","-c","java-jar/iot-demo.jar-server.port=...
使用控制台金丝雀发布应用（K8s）
适用于JAR包和WAR包部署的应用 文件上传方式 与上一次的部署包类型（WAR包或JAR包）保持一致，不可更改。上传方式可以根据实际需求选择上传部署包或输入部署包地址两种方式。上传JAR包/上传WAR包：选择下载好的JAR包/WAR包并上传。JAR包...
使用控制台金丝雀发布应用（K8s）
适用于JAR包和WAR包部署的应用 文件上传方式 与上一次的部署包类型（WAR包或JAR包）保持一致，不可更改。上传方式可以根据实际需求选择上传部署包或输入部署包地址两种方式。上传JAR包/上传WAR包：选择下载好的JAR包/WAR包并上传。JAR包...
使用控制台金丝雀发布应用（K8s）
适用于JAR包和WAR包部署的应用 文件上传方式 与上一次的部署包类型（WAR包或JAR包）保持一致，不可更改。上传方式可以根据实际需求选择上传部署包或输入部署包地址两种方式。上传JAR包/上传WAR包：选择下载好的JAR包/WAR包并上传。JAR包...
打包、上传及注册
当您完成Java程序开发及调试后，您需要将Java程序打包为JAR包并以资源形式上传至MaxCompute项目后，才可以注册MaxCompute UDF，供后续在数据开发中调用。本文为您介绍在MaxCompute Studio中一键完成Java程序打包为JAR包、上传JAR包为...
应用身份识别
操作完成后，数据库审计系统会根据您的配置自动生成JAR包。单击应用身份识别配置 操作 列的 下载，下载生成的JAR包。操作完成后，应用身份识别的JAR包会被保存在您浏览器的默认下载路径下。单击 下载说明文档 并选择您需要的中间件类型，...
质量校验函数jar包源代码
在创建质量校验函数时，请先使用Java工具将文中示例代码打包成jar包。本文提供质量校验函数jar包源代码示例内容。示例代码 运行Java开发工具，生成一个文件名称为“PhoneNumberChecker”jar包。package com.aliyun.odps.udf.examples;...
设置启动命令
应用托管概述 设置镜像部署应用的启动命令 设置JAR包部署应用的启动命令 设置WAR包部署应用的启动命令 设置ZIP包部署应用的启动命令 设置镜像部署应用的启动命令 以创建Java应用为例，在 应用部署配置 配置向导页面选择 应用部署方式 为 ...
安装第三方插件
前提条件 已获取第三方插件的JAR包。已创建集群，并且选择了Flume服务，详情请参见 创建集群。操作步骤 支持以下方式：方式一：修改 FLUME_CLASSPATH 参数来添加JAR包。在E-MapReduce控制台Flume服务的 配置 页面，在搜索框中输入参数 ...
编译部署代码包
Java运行时依赖库 要创建部署代码包，请将函数代码和依赖库共同编译并打包为ZIP包或JAR包。函数计算 平台为Java运行时提供以下依赖库：com.aliyun:fc-java-core ：定义了请求处理程序中使用的handler接口和context对象等信息。...
编译部署代码包
Java运行时依赖库 要创建部署代码包，请将函数代码和依赖库共同编译并打包为ZIP包或JAR包。函数计算 平台为Java运行时提供以下依赖库：com.aliyun:fc-java-core ：定义了请求处理程序中使用的handler接口和context对象等信息。...
创建和部署应用概述（K8s）
Java应用 Spring Cloud、Dubbo或HSF应用开发完成后，可通过WAR包、JAR包或镜像的方式部署至K8s集群。部署方式 介绍 运行环境 监控及治理方案 示例文档 镜像部署 适用于在K8s集群中使用自定义的镜像部署应用。自定义 默认自动挂载Java Agent...
获取 SDK
下载下列链接中的 JAR 包：httpasyncclient-4.1.3 httpclient httpcore httpcore-nio fastjson slf4j-api 下载 TSDB-Client 的 JAR 包（推荐选择最新版本）:请到 SDK 版本说明 中下载最新版本的 JAR 包。将这些 JAR 包放到工程下即可使用 ...
部署配置：通过EDAS部署
云效对EDAS进行了集成，可以把在云效上打出来的 war 包或者 jar 包部署到EDAS中。为了在云效上集成EDAS，需要保证您的应用可以在云效上打出 war 包或者 jar 包。详见 使用EDAS部署时的构建配置。云效支持 多种研发模式，及部署回滚等功能。...
镜像辅助打包
Linux镜像打包 Linux镜像打包支持两种应用类型的打包：JAR包、WAR包。JAR应用 对于JAR应用，您可以上传JAR包，选择对应的JRE版本，设置好启动参数之后，点击确定构建镜像。当前支持j dk7、jdk8、jdk9、jdk10 的JRE版本。值得注意的是...
- 产品推荐
- 这些文档可能帮助您