隔离功能扩展
element 里面的内容为扩展的定义，此处需要传入 Element 对象，通过从 XML 中读取，示例内容如下：<clientValue><value>SOFABoot Extension Client Test</value></clientValue>通过 com.alipay.sofa.runtime.api.client.ExtensionClient 的...
SDK示例
从指定的core-site.xml文件中读取配置 conf.addResource(new Path(PATH_TO_CORE_SITE_XML));fileSystem=FileSystem.get(conf);} 未配置core-site.xml文件，使用以下代码加载 文件存储 HDFS 版 相关配置进行初始化操作。private void init()...
标准 UI 下使用扫码功能
} 在工程的 AndroidManifest.xml 中添加读写权限和网络访问权限。uses-permission android:name="android.permission.INTERNET"/>在工程主 Module 下的 build....
管理Hive Catalog
从Hive表中读取数据 INSERT INTO${other_sink_table} SELECT.FROM `${catalog_name}`.`${db_name}`.`${table_name}`;写入结果数据至Hive表 INSERT INTO `${catalog_name}`.`${db_name}`.`${table_name}` SELECT.FROM${other_source_table};...
Hive
df 存入到Hive,表名为用户传进来的tableName,列名为welcome_col val df=Seq(welcome).toDF("welcome_col")df.write.format("hive").mode("overwrite").saveAsTable(tableName)/从Hive中读取表 tableName val dfFromHive=sparkSession.sql(s...
ST_ImportOSGB
默认从 metadata.xml 中 ModelMetadata/SRS 节点读取，若在 options/srid 中指定则会覆盖读取值。ref_point geometry 项目锚定的三维点位。默认从 metadata.xml 中 ModelMetadata/SSRSOrigin 节点读取，类型为 Point3DZ。extent geometry ...
ST_ImportOSGB
默认从 metadata.xml 中 ModelMetadata/SRS 节点读取，若在 options/srid 中指定则会覆盖读取值。ref_point geometry 项目锚定的三维点位。默认从 metadata.xml 中 ModelMetadata/SSRSOrigin 节点读取，类型为 Point3DZ。extent geometry ...
Apache HDFS透明缓存加速
Apache HDFS透明缓存加速可以利用计算集群的闲置存储资源对远端HDFS集群...步骤四：访问HDFS 您通过hdfs:/前缀读取HDFS上的数据后，在数据缓存开关打开时，会自动缓存到JindoFSx存储加速系统中，后续通过hdfs:/访问相同的数据就能够命中缓存。
新建Paimon数据源
通过新建Paimon数据源能够实现Dataphin读取Paimon的业务数据或向Paimon写入数据。本文为您介绍如何新建Paimon数据源。权限说明 仅支持具备新建数据源权限的账号进行新建。更多信息，请参见 数据源权限说明。使用限制 Paimon数据源不支持以...
Spark对接OSS
Spark RDD接入OSS示例 本示例为您展示，Spark如何以免AccessKey方式读取OSS中数据，并将处理完的数据写回至OSS。在 spark-shell 中执行如下代码。val conf=new SparkConf().setAppName("Test OSS")val sc=new SparkContext(conf)val pathIn...
通过数据湖元数据DLF读写Hudi
EMR-3.38.3及后续版本的DataFlow集群，可以通过数据湖元数据DLF（Data Lake Formation）作为元数据读取DataLake集群或自定义集群中的数据。本文为您介绍Dataflow集群如何连接DLF，并读取Hudi全量数据。前提条件 已在E-MapReduce控制台上...
使用Hadoop作为元仓计算引擎进行元仓初始化
Dataphin元数据仓库（简称：元仓），是统一管理Dataphin内部业务元数据和相应计算引擎元数据的数据仓库，存在于Dataphin元仓租户中（OPS租户）的一个Dataphin项目空间中，由一系列的周期性数据集成节点、SQL脚本节点、Shell节点组成。...
基本概念
每个挂载点都对应一个域名，您需要修改 core-site.xml 中的配置来访问 文件存储 HDFS 版 中的文件。权限组 权限组是若干访问文件系统的权限规则的集合。包括授权地址、读写权限、用户权限等。说明 每个挂载点都必须与一个权限组绑定。权限...
开启HBase ACL
操作权限 名称 描述 Read（R）读取某个Scope资源的数据。Write（W）写数据到某个Scope的资源。Execute（X）在某个Scope执行协处理器。Create（C）在某个Scope创建或删除表等操作。Admin（A）在某个Scope进行集群相关操作，如balance、...
其他常见问题
如何显示自动配置的详细信息 加上 JVM 运行参数-Ddebug，可以显示启动过程中的详细信息，并通过 Debug 级别的日志显示已启动的自动配置的 bean 服务。如何使用 dependencyManagement 添加 SOFABoot 依赖 工程原型中是用 parent 标签引入 ...
创建Hive数据源
通过创建Hive数据源能够实现Dataphin读取Hive的业务数据或向Hive写入数据。本文为您介绍如何创建Hive数据源。背景信息 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供SQL查询功能。Hive用于转化...
在非EMR集群中部署JindoSDK
本文为您介绍在非EMR集群中部署JindoSDK的具体步骤。前提条件 已连接ECS实例。具体操作，请参见 连接ECS实例。部署JindoSDK 执行以下命令，下载4.6.2版本的JindoSDK JAR包。wget ...
缓存 Tomcat session 变量
在/Tomcat/conf/context.xml 中编辑连接到 Memcache 的配置，在元素下增加下述的配置描述即可。下面分别是 TOMCAT 的两种配置模式：STICKY 模式的地址:11211"username="Memcache 实例名"password="Memcache 密码"memcachedProtocol="binary...
创建Impala数据源
通过创建Impala数据源能够实现Dataphin读取Impala的业务数据或向Impala写入数据。本文为您介绍如何创建Impala数据源。背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至...
0024-00000106
问题描述 加速器管理请求中的XML格式或参数不正确。问题原因 您发起了加速器相关的管理请求，请求中XML格式或参数不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 该功能为邀测功能，如果发现此错误，请联系...
0024-00000501
问题描述 元数据转换请求中的XML格式或参数不正确。问题原因 您发起了元数据转换相关的管理请求，请求中XML格式或参数不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 该功能为邀测功能，如果发现此错误，请...
0024-00000401
问题描述 加速器异步预热请求中的XML格式或参数不正确。问题原因 您发起了加速器异步预热相关的管理请求，请求中XML格式或参数不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 该功能为邀测功能，如果发现此...
0017-00000606
问题描述 请求体XML中节点为空。问题原因 您的请求中请求体XML格式不正确，主要是某个不应为空的节点值为空。问题示例 以PutBucket作为示例，请求体XML格式需正确。PUT/...
DML差异
LOAD XML 不支持 将数据从XML文件读取到表中。REPLACE 支持，详情请参见 REPLACE INTO。REPLACE的运行与INSERT完全相同，不同之处在于，如果表中的旧行与PRIMARY KEY或UNIQUE索引的新行具有相同的值，则在插入新行之前删除该旧行。SELECT，...
Tomcat 连接池连接 OceanBase 数据库示例程序
说明 当使用 IntelliJ IDEA 导入项目时，IntelliJ IDEA 会自动检测项目中的 pom.xml 文件，并根据文件中描述的依赖关系自动下载所需的依赖库，并将它们添加到项目中。查看项目情况。步骤二：获取 OceanBase 数据库连接信息 联系 OceanBase ...
lo-interfaces
从大对象描述符 fd 中读取最多 len 字节到 buf（大小必须是 len）中。参数 fd 必须是已经由前面的 lo_open 返回的大对象描述符。实际读出的字节数将被返回，如果先到达了大对象的末尾返回值可能会小于 len。出错时返回值为-1。尽管参数 len...
0004-00000106
问题描述 请求体中提交的XML节点 ExtranetUploadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 ExtranetUploadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不...
0032-00000004
问题描述 PutBucketLogging请求中的XML配置有误，存储日志的目标Bucket不存在。问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，您提供...
0032-00000008
问题描述 PutBucketLogging请求中的XML配置有误，存储日志的目标Bucket不存在。问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标Bucket，您提供...
inventory（清单）
ossutil先从本地文件中读取清单配置，然后将读取到清单配置添加到指定的Bucket。命令格式./ossutil64 inventory-method put oss:/bucketname local_xml_file 参数说明如下：参数 说明 bucketname 添加清单规则的存储空间名称。local_xml_...
0032-00000009
问题描述 PutBucketLogging请求中的XML配置有误，您不是指定的存储日志目标Bucket的所有者。问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示日志转存的目标...
0032-00000010
问题描述 PutBucketLogging请求中的XML配置有误，您指定的存储日志目标Bucket不在日志源Bucket所属的地域。问题原因 您发起了PutBucketLogging请求，但是请求体XML配置有误，/BucketLoggingStatus/LoggingEnabled/TargetBucket 节点表示...
0004-00000104
问题描述 请求体中提交的XML节点 TotalUploadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 TotalUploadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例...
0004-00000107
问题描述 请求体中提交的XML节点 TotalDownloadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 TotalDownloadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供...
0004-00000108
问题描述 请求体中提交的XML节点 IntranetDownloadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 IntranetDownloadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂...
0004-00000109
问题描述 请求体中提交的XML节点 ExtranetDownloadBandwidth 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 ExtranetDownloadBandwidth 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂...
0004-00000206
问题描述 请求体中提交的XML节点 MaxDayIntranetSendFlow 值不正确。问题原因 您发起了针对Bucket的UserQoS配置请求，但是您请求中提交的XML中 MaxDayIntranetSendFlow 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不...
0004-00000110
问题描述 请求体中提交的XML节点 TotalQps 值不正确。问题原因 您发起了针对Bucket的QoS配置请求，但是您请求中提交的XML中 TotalQps 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不提供示例。解决方案 确认请求提供...
0004-00000205
问题描述 请求体中提交的XML节点 MaxHourIntranetSendFlow 值不正确。问题原因 您发起了针对Bucket的UserQoS配置请求，但是您请求中提交的XML中 MaxHourIntranetSendFlow 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂...
0004-00000204
问题描述 请求体中提交的XML节点 MaxDayExtranetSendFlow 值不正确。问题原因 您发起了针对Bucket的UserQoS配置请求，但是您请求中提交的XML中 MaxDayExtranetSendFlow 节点的值不正确。问题示例 该功能为邀测功能，未对全部用户开放，暂不...
- 产品推荐
- 这些文档可能帮助您