函数功能发布记录
HQE IF 2.1.0 数组函数 array[]array_append 性能优化 HQE支持数组取下标函数array[]、数组添加元素函数array_append。HQE 数组函数 2.1.0 字符串函数 regexp_split_to_table 性能优化 HQE支持字符串分割函数regexp_split_to_table。HQE ...
Superset（仅对存量用户开放）
使用Superset访问Hive数据库 Superset提供了SQLAlchemy以多种语言支持各种各样的数据库，包括MySQL、Oracle、PostgreSQL和Microsoft SQL Server等关系型数据库，以及Hive、Presto和Druid等大数据查询引擎。这里以E-MapReduce Hadoop集群...
用自然语言实时查看BI报表
背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，简称 NL2SQL）能力。PolarDB for AI会将用户输入的自然语言（中文或英文）自动...
NL2BI：用自然语言实时查看BI报表
背景 为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI联合达摩院推出自研的自然语言到数据库查询语言转义（Nature Language To SQL，简称 NL2SQL）能力。PolarDB for AI会将用户输入的自然语言（中文或英文）自动...
云数据库MongoDB版（分片集群架构）同步至云数据库...
databasesToProcess：待清理孤立文档的数据库名称数组。在 cleanupOrphaned.js 脚本所在的目录下，执行以下命令清理孤立文档。mongo-host<Mongoshost>-port<Primaryport>-authenticationDatabase<database>-u<username>-p<password>...
如何清理孤立文档
databasesToProcess：待清理孤立文档的数据库名称数组。MongoDB 4.2及以前版本 说明 该脚本用于清理多个Shard节点中 指定数据库下指定集合的孤立文档。如需清理数据库中多个集合的孤立文档，您可以修改 fullCollectionName 参数并多次执行...
控制结构
利用PL/SQL的控制结构，你可以以非常灵活而且强大的方法操纵本数据库的数据。从一个函数返回 有两个命令让我们能够从函数中返回数据：RETURN 和 RETURN NEXT。RETURN RETURN expression;带有一个表达式的 RETURN 用于终止函数并把 ...
CREATE SCHEMA
不同数据源的语法示例 创建hive数据库 CREATE DATABASE oss_log_schema with DBPROPERTIES(catalog='hive',location='oss:/analyticdb-bucket/log/');创建MySQL数据库 CREATE SCHEMA mysql_db WITH DBPROPERTIES(CATALOG='mysql',LOCATION=...
元数据管理常见问题
java.net.UnknownHostException: *”问题分析：由于在之前的集群上创建了Hive的数据库，并且数据库的位置是落在之前集群的HDFS之上，但是在集群释放的时候，没有清理掉对应的Hive Database，导致新建集群之后，无法访问到之前已经释放集群...
pg_db_role_setting
目录 pg_db_role_setting 为每一个角色和数据库组合记录被设置到运行时配置变量的默认值。和大部分系统目录不同，pg_db_role_setting 是在集簇的所有数据库之间共享的：在一个集簇中只有一份 pg_db_role_setting 拷贝，而不是每个数据库一...
Hive采集字段
简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集，当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点，采集的字段重点举例为：Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数...
管理自助取数
自助取数创建完成后，您可以在自助取数管理页面对自助取数进行编辑、查询、分享、移动、删除等操作。仅专业版的群空间支持自助取数功能。进入自助取数页面 登录 Quick BI控制台。按照下图指引，进入 自助取数 管理界面。编辑自助取数 进入...
创建与管理下载任务
自助取数创建完成后，您可以创建并管理下载任务对数据进行下载。进入自助取数页面 登录 Quick BI控制台。在Quick BI产品首页，单击 工作台。在左侧导航栏单击 自助取数。创建取数任务 通过自取数据编辑页创建取数任务。单击要下载的自助取...
访问Hive数据
云原生多模数据库 Lindorm 计算引擎提供完善的Hive数仓能力，支持用户通过Hive或Spark SQL定义数仓生产处理逻辑并开发相关作业。本文介绍如何使用SQL访问Hive数据。前提条件 已开通Lindorm实例的计算引擎服务，具体操作请参见 开通与变配。...
Hive连接器
该元数据存储在数据库（例如，MySQL）中，并通过Hive Metastore Service（HMS）访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架（例如，MapReduce或Tez）上执行。前提条件 已创建EMR-3.45.0及后续版本和EMR-5.11.0及后续版本...
自助取数
权限管理员可以为自助取数资源授予编辑自助取数的权限、导出或查看自助取数的权限。背景信息 权限管理员授予用户权限时，在协同状态和私密状态下的权限属性有所不同，见下图。其中，协同权限之间存在以下关系：编辑权限：当用户拥有 编辑 ...
项目
项目（Project）是MaxCompute的基本组织单元，它类似于传统数据库的Database或Schema的概念，是进行多用户隔离和访问控制的主要边界。项目中包含多个对象，例如表（Table）、资源（Resource）、函数（Function）和实例（Instance）等，您...
GetDatabaseObjects-查询数据库信息
查询数据库信息。接口说明 地域的公网接入地址：adb.<region-id>.aliyuncs.com 。示例：adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址：adb-vpc.<region-id>.aliyuncs.com 。示例：adb-vpc.cn-hangzhou.aliyuncs.com 。调试 您可以...
Hive数据源
通过连接Hive Metastore，云数据库 SelectDB 版 可以自动获取Hive的库表信息，进行数据查询、分析。除了Hive外，例如Iceberg、Hudi等其他系统也会使用Hive Metastore存储元数据。通过Hive Catalog，能轻松集成Hive及使用Hive Metastore作为...
Hive连接器
该元数据存储在数据库（例如，MySQL）中，并通过Hive Metastore Service（HMS）访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架（例如，MapReduce或Tez）上执行。本文为您介绍Hive连接器相关的内容和操作，具体如下：修改Hive...
使用限制
操作 时间限制（ms）超时说明 创建集群 600000 无 删除集群 300000 无 扩容集群 600000 无 创建数据库 10000 无 删除数据库 10000 无 创建表或视图 10000 无 删除表或视图 10000 无 清空表（TRUNCATE TABLE）60000 无 新增列 10000 无 删除...
Dataphin离线管道中Hive输出组件配置后报错“获取...
问题原因 Hive元数据meta的mysql数据库的连接数达到了设置的最大连接数量，导致新的hive连接无法连接到meta库，从而报错获取元数据失败。解决方案 将Hive的meta mysql库的最大连接数上限调大一些，一般建议设置为1000（通常默认值是200）。...
访问增强版HBase数据
云原生多模数据库 Lindorm 支持通过Lindorm计算引擎访问云数据库HBase增强版集群中的数据。前提条件 已开通Lindorm计算引擎。如何开通，请参见 开通与变配。已阅读并了解通过Lindorm计算引擎访问数据时的使用须知。详细内容，请参见 使用...
普通模式和Hive兼容模式下SQL的差异
本文为您介绍MaxCompute中运算符、类型转换和内建函数分别在普通模式和Hive兼容模式下使用的区别。运算符 BITAND（&）当输入参数是BIGINT类型的时候，如果BITAND的计算结果是LONG_MIN(-2 63)，在普通模式下会返回NULL，而Hive模式仍然是...
MongoDB数据库大版本升级说明
迁移数据的方法如下：云数据库MongoDB版（单节点架构）全量迁移至云数据库MongoDB版（所有架构）云数据库MongoDB版（副本集架构）迁移至云数据库MongoDB版（副本集架构或分片集群架构）自建数据库MongoDB版（分片集群架构）迁移至云数据库...
smlar
您可以通过在数据库内使用smlar插件来高效计算数据相似度，smlar插件还提供了支持GiST和GIN索引的相似度运算符。简介 smlar是 PolarDB PostgreSQL版（兼容Oracle）的一款开源第三方插件，提供了可以在数据库内高效计算数据相似度的函数，并...
smlar
您可以通过在数据库内使用smlar插件来高效计算数据相似度，smlar插件还提供了支持GiST和GIN索引的相似度运算符。注意事项 由于smlar插件的%操作符与RUM插件的%操作符冲突，因此smlar与RUM两个插件无法同时创建在同一个schema中。简介 smlar...
smlar
您可以通过在数据库内使用smlar插件来高效计算数据相似度，smlar插件还提供了支持GiST和GIN索引的相似度运算符。注意事项 由于smlar插件的%操作符与RUM插件的%操作符冲突，因此smlar与RUM两个插件无法同时创建在同一个schema中。简介 smlar...
smlar
您可以通过在数据库内使用smlar插件来高效计算数据相似度，smlar插件还提供了支持GiST和GIN索引的相似度运算符。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.0及以上）PostgreSQL 11（内核小版本1....
Iceberg概述
为了便于理解数仓和Iceberg数据湖在系统架构、业务价值和成本方面的差异，选择了业界流行的Clickhouse实时数仓、Hive离线数仓和Iceberg数据湖三种具体的技术架构，为您进行了对比，详细信息如下表。对比项 子项目 开源Clickhouse实时数仓 ...
Hive数据按行过滤
test-row-filter Hive Database 添加Hive中的数据库。default Hive Table 添加表。test_row_filter Select User 选择配置按行过滤的用户。testc Access Types 选择授予的权限。select Row Level Filter 填写过滤的函数。id>=10 单击 Add。...
Iceberg
hive_sync.db 同步到Hive的数据库名称 String 否 当前Table在Catalog中的数据库名 无。hive_sync.table 同步到Hive的表名称 String 否 当前Table名 无。dlf.catalog.region DLF服务的地域名 String 否 无 详情请参见 已开通的地域和访问...
使用E-Mapreduce访问
Hive的元数据存储在MySQL中，进入存储Hive元数据的MySQL数据库hivemeta中，修改DBS表和SDS表，如下所示。MariaDB[(none)]>use hivemeta;修改表“DBS”MariaDB[hivemeta]>select*from DBS;DB_ID|DESC|DB_LOCATION_URI|NAME|OWNER_NAME|OWNER...
概述
PolarDB for AI 功能通过一系列MLOps和内置的模型解决了数据、特征和模型的割裂状态，实现了基于数据库的数据智能的一站式服务。本文介绍了 PolarDB for AI 功能的相关特性。背景信息 随着数据的累积，数据驱动的智能应用（例如：搜索、...
Hive数据脱敏
test_mask Hive Database 添加Hive中的数据库。testdb Hive Table 添加表。testtb1 Hive Column 可添加列名。a Select User 指定添加此策略的用户。test Access Types 选择授予的权限。select Select Masking Option 选择脱敏方式。Partial...
数组函数
Hologres从 V1.1.46版本开始支持text类型数组，且text数组将会被转为int8数组进行排序，返回排序后的text数组。Hologres从 V1.3.18版本开始支持int4、int8、float4、float8、boolean类型数组，且对text类型数组按字典序排序。array_sort...
配置E-MapReduce服务使用文件存储 HDFS 版
Hive的元数据存储在MySQL，进入存储Hive元数据的MySQL数据库hivemeta，修改CTLGS表、DBS表和SDS表相应的值。执行 use hivemeta 命令，进入存储Hive元数据的MySQL数据库hivemeta。修改表CTLGS中的数据。执行 select*from CTLGS 命令，查询表...
SFMESH
meshgeoms：所有引用到的meshgeom对象的数组，可以为引用对象。meshes：所有基于Node引用导的sfmesh的对象的数组，可以为引用对象。textures：所用的texture的对象数组。materials：所有材质的对象数组。primitives：所有的元组信息的数组...
SFMESH
meshgeoms：所有引用到的meshgeom对象的数组，可以为引用对象。meshes：所有基于Node引用导的sfmesh的对象的数组，可以为引用对象。textures：所用的texture的对象数组。materials：所有材质的对象数组。primitives：所有的元组信息的数组...
DatabaseInput
名称 类型 描述 示例值 object 数据库对象 Description string 元数据库描述文本 this is a hive database LocationUri string 元数据库保存路径，例如可填写 HDFS 路径/hdfs/hivedb/data Name string 元数据库名称，校验长度 128，不支持...
- 产品推荐
- 这些文档可能帮助您