Hadoop使用JindoSDK访问OSS-HDFS服务
export JAVA_HOME=usr/lib/jvm/java-1.8.0-openjdk export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/jre/lib/rt.jar export PATH=$PATH:$JAVA_HOME/bin 使环境变量生效。source/etc/profile 启用SSH服务。...
限定条件下载
假设Object最后修改时间为2023年9月26日13:27:04，当填写早于该时间的Data对象时（例如Tue Sep 25 13:27:04 CST 2023），将满足If-Modified-Since的限定条件，并触发下载行为。request.setModifiedSinceConstraint(new Date("Tue Sep 25 13...
SSL接入点PLAIN机制收发消息
本文以Java SDK为例介绍如何在公网环境下使用SDK接入 云消息队列 Kafka 版 的SSL接入点并使用PLAIN机制收发消息。前提条件 步骤三：创建资源 安装1.8或以上版本JDK 安装2.5或以上版本Maven 安装Java依赖库 在 pom.xml 中添加以下依赖。...
OSS中如何在分片上传中实现MD5校验
表示上传文件到OSS时需要指定包含文件后缀在内的完整路径，例如 abc/efg/123.jpg。String objectName="objectname;String localFile="localfile;创建OSSClient实例。OSS ossClient=new OSSClientBuilder().build(endpoint,accessKeyId,...
分片上传
单次ListParts请求返回的Part最大数量 1,000个 单次ListMultipartUploads请求返回的Multipart Upload事件最大数量 1,000个 注意事项 文件上传性能调优 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现...
授权访问
从环境变量中获取从STS服务请求返回的的临时访问凭证。运行本代码示例之前，请确保已设置环境变量OSS_ACCESS_KEY_ID、OSS_ACCESS_KEY_SECRET以及OSS_SESSION_TOKEN。EnvironmentVariableCredentialsProvider credentialsProvider=...
简单上传
当您上传的Object在OSS中存在同名Object时，该Object会上传失败，并返回 FileAlreadyExists 错误。当不携带此参数或此参数的值为 false 时，同名Object会被覆盖。上传性能调优 如果您在上传大量Object时，在命名上使用了顺序前缀（如时间戳...
编写处理GetObject请求的函数
通过对象FC接入点访问GetObject API时，将触发您所绑定的函数计算服务中的函数，并在函数中配合WriteGetObjectResponse接口实现自定义返回数据和响应标头。前提条件 已创建对象FC接入点。具体操作，请参见 创建对象FC接入点。OSS Java SDK...
数据校验
如何配置访问凭证，请参见 Java配置访问凭证。本文以OSS域名新建OSSClient为例。如果您希望通过自定义域名、STS等方式新建OSSClient，请参见 新建OSSClient。MD5校验 如果上传文件时设置了Content-MD5，OSS会根据接收的内容计算MD5。OSS...
iOS SDK和Android SDK如何开启日志记录功能
日志会记录OSS操作行为中的请求数据返回数据和异常信息/例如requestId,response header等，下面是一个日志记录case。android_version：5.1 android版本/mobile_model：XT1085 android手机型号/network_state：connected 网络状况/network_...
拷贝文件
如何配置访问凭证，请参见 Java配置访问凭证。本文以OSS域名新建OSSClient为例。如果您希望通过自定义域名、STS等方式新建OSSClient，请参见 新建OSSClient。拷贝文件时，您必须拥有源文件的读权限及目标Bucket的读写权限。拷贝文件时，您...
拷贝文件
当您拷贝的文件在目标Bucket中存在同名文件时，该文件将拷贝失败，并返回 FileAlreadyExists 错误。操作步骤 使用图形化管理工具ossbrowser 通过ossbrowser仅支持拷贝小于5 GB的文件。关于如何使用ossbrowser拷贝文件的具体操作，请参见 ...
服务端SDK
下载地址 iGraph Java SDK 让 Java 开发人员可以非常方便地使用 Java 程序操作特征存储引擎服务。开发者可以直接使用 Maven依赖添加SDK，也可以下载包到本地。目前，SDK 支持 J2SE 8.0 及以上版本。下载地址1 下载地址2 下载地址3 使用步骤...
重命名文件
使用场景 命名规范实施：在实施新的文件命名规范以提高数据管理效率和一致性时，需要重命名现有的对象以符合这些规范。数据迁移和重组：在组织架构调整、系统迁移或应用程序升级时，可能需要移动或重组存储在OSS中的数据，这通常伴随着对象...
拷贝文件
填写源Object的完整路径，完整路径中不能包含Bucket名称。String sourceKey="srcexampleobject.txt;填写与源Bucket处于同一地域的目标Bucket名称。String destinationBucketName="desexamplebucket;填写目标Object的完整路径。Object完整...
管理文件访问权限
如何配置访问凭证，请参见 Java配置访问凭证。本文以OSS域名新建OSSClient为例。如果您希望通过自定义域名、STS等方式新建OSSClient，请参见 新建OSSClient。要设置Object访问权限，您必须具有 oss:PutObjectAcl 权限；要获取Object访问...
使用实例接入点收发消息
java.security.auth.login.config JAAS配置文件所在路径，将Demo工程中的kafka_client_jaas.conf文件另存至本地路径，用本地路径替换示例代码中的xxxx。例如：/home/ssl/kafka_client_jaas.conf。重要 如果是默认接入点实例，该参数不需要...
外部表常见问题
FAILED:ODPS-0123131:User defined function exception-Traceback:java.lang.OutOfMemoryError:Java heap space 设置如下参数后运行时间增加但依然报错。set odps.stage.mapper.mem=2048;set odps.stage.mapper.jvm.mem=4096;产生原因 外部...
默认接入点收发消息
本文以Java SDK为例介绍如何在VPC环境下使用SDK接入 云消息队列 Kafka 版 的默认接入点并收发消息。前提条件 步骤三：创建资源 安装1.8或以上版本JDK 安装2.5或以上版本Maven 安装编译工具。本文以 IntelliJ IDEA Ultimate 为例。安装Java...
获取Request ID
对象存储OSS为接收到的每个请求分配唯一的服务器请求ID，作为关联各类日志信息的标识符。当您在使用OSS过程中遇到错误且希望阿里云技术支持提供协助时，需要提交失败请求的Request ID，以便技术支持快速定位并解决问题。本文介绍获取...
Check节点
DataWorks的Check节点可用于检查目标对象（MaxCompute分区表、FTP文件或OSS文件）是否可用，当Check节点满足检查策略后会返回运行成功状态。如果某任务的运行依赖目标对象，您可使用Check节点检查目标对象，并设置该任务为Check节点的下游...
泛化调用
构造函数中指定全路径类名。genericObject.putField("name","Lilei");调用 putField，指定field值。genericObject.putField("age",15);2.2 进行调用，不指定返回类型，返回结果类型为 GenericObject。Object obj=genericService.$...
数据库采集器问题
采集端运行时会优先选择本地的 jdk 运行，如果 jdk 低于 1.8 版本会提示版本不支持，请将运行脚本 collect_.sh 中 JAVA_PATH 强制指定为安装目录 jdk（将 JAVA_PATH=`which java` 换成 JAVA_PATH=''）。如何在Mac OS上面运行采集器？需要...
服务端签名直传
服务端签名直传是指在服务端生成签名，将签名返回给客户端，然后客户端使用签名上传文件到OSS。由于服务端签名直传无需将访问密钥暴露在前端页面，相比客户端签名直传具有更高的安全性。本文介绍如何进行服务端签名直传。请求流程 服务端...
授权第三方上传
在服务端对每个分片生成签名URL，并将签名URL返回给客户端，会增加与服务端的交互次数和网络请求的复杂性。另外，客户端可能会修改分片的内容或顺序，导致最终合并的文件不正确。更多信息，请参见 签名版本1。重要 由于STS临时账号以及签名...
JDBC
例如您的JDBC驱动放置的路径为/usr/local/polardb/share/java/，在 CLASSPATH 中添加JDBC驱动路径的命令如下：export CLASSPATH=$CLASSPATH:/usr/local/polardb/share/java/<安装的Jar包名.jar>示例：export CLASSPATH=$CLASSPATH:/usr/...
简单上传
当您上传的Object在OSS中存在同名Object时，该Object会上传失败，并返回 FileAlreadyExists 错误。当不携带此参数或此参数的值为 false 时，同名Object会被覆盖。授权上传 为了防止第三方用户未经授权在您的Bucket中上传数据，OSS提供了...
HTTP API 入门
响应参数：即网关向订阅者发送响应时的返回值类型和错误码等。详见 API 属性说明>响应参数。单击 下一步，进入后端配置页面，您需要选择 后端配置类型 并输入后端配置信息。根据本示例，需选择 系统集群 并配置具体集群信息。协议类型：必...
服务编排设计器内节点说明
java.lang.Object","java.lang.String","java.lang.Boolean","java.lang.StringBuffer","java.lang.StringBuilder","java.lang.Byte","java.lang.Float","java.lang.Integer","java.lang.Long","java.lang.Math","java.lang.Short"除去...
限定条件下载
假设Object最后修改时间为2023年9月26日13:27:04，当填写早于该时间的Data对象时（例如Tue Sep 25 13:27:04 CST 2023），将满足If-Modified-Since的限定条件，并触发下载行为。request.setModifiedSinceConstraint(new Date("Tue Sep 25 13...
查询文件
您可以使用SelectObject对目标文件执行SQL语句，返回执行结果。说明 无地域属性的存储空间不支持使用SelectObject。背景信息 目前Hadoop 3.0已经支持OSS在EMR上运行Spark、Hive、Presto等服务，同时阿里云MaxCompute以及Data Lake ...
JDBC
本文将介绍如何在Java应用中使用JDBC连接 PolarDB PostgreSQL版（兼容Oracle）数据库。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的内核小版本包括：Oracle语法兼容1.0 版本和 Oracle语法兼容2.0 版本。已经在 PolarDB 集群创建...
查看实例系统配置
通过云助手，您无需逐一登录ECS实例进行运维操作，只需编写可以查询系统配置的云助手命令，并根据系统返回信息做出应对机制，例如是否继续下载或者更新软件。本文以适用于Linux系统的Shell命令为例，介绍如何查看实例的系统配置。背景信息 ...
上传回调
对象存储OSS在完成文件（Object）上传时可以提供回调（Callback）给应用服务器。您只需要在发送给OSS的请求中携带相应的Callback参数，即可实现回调。使用场景 上传回调的一种典型应用场景是结合授权第三方上传时使用。适当使用上传回调...
ST_SharedPaths
返回一个包含两个输入Geometry共享的路径的集合。语法 geometry ST_SharedPaths(geometry lineal1,geometry lineal2);参数 参数名称 描述 lineal1 路径1。lineal2 路径2。描述 方向相同的对象在返回集合的第一个元素中，方向相反的对象在...
ST_SharedPaths
返回一个包含两个输入Geometry共享的路径的集合。语法 geometry ST_SharedPaths(geometry lineal1,geometry lineal2);参数 参数名称 描述 lineal1 路径1。lineal2 路径2。描述 方向相同的对象在返回集合的第一个元素中，方向相反的对象在...
使用Amazon S3 SDK访问OSS
对象存储OSS提供了兼容Amazon S3的API。当您将数据从Amazon S3迁移到OSS后，只需简单的配置修改，即可让您的客户端应用轻松兼容OSS服务。本文主要介绍如何通过不同开发平台的S3 SDK完成初始化配置，然后使用S3 SDK接口访问OSS资源。前提...
StartK8sAppPrecheck-开始K8s应用变更预检
2 Envs string 否 部署环境变量，格式需要符合 JSON 对象数组。支持三种类型的环境变量，分别是普通环境变量，K8s ConfigMap 环境变量，K8s Secret 环境变量。普通环境变量格式如下所示：{"name":"x","value":"y"} ConfigMap 环境变量配置...
ST_SharedPaths
返回一个包含两个输入Geometry共享的路径的集合。语法 geometry ST_SharedPaths(geometry lineal1,geometry lineal2);参数 参数名称 描述 lineal1 路径1。lineal2 路径2。描述 方向相同的对象在返回集合的第一个元素中，方向相反的对象在...
CubeEngineConfig
返回值：返回值 类型 说明 getResourcePath 对象 String 本地资源包路径。setResourcePath/*设置本地资源包路径*@param resourcePath*/public void setResourcePath(String resourcePath)声明：public void setResourcePath(String ...
- 产品推荐
- 这些文档可能帮助您