DeleteAccount-删除数据库账号
请检查实例状态及数据库的连接池 400 GdnRole.NotSupport Specified gdn role is not support.gdn角色不允许删除账号。400 IncorrectAccountStatus Current account status does not support this operation.当前账号状态不支持此操作。400...
连续查询
说明 连续查询归属于指定的数据库，当数据库删除时，该数据库下的所有连续查询也将被自动删除。如果不指定数据库，则在当前数据库（对应USE DATABASE语句指定的数据库）下创建连续查询。连续查询的删除 从指定的Database下删除一个已存在的...
DeleteAccount-删除数据库账号
请检查实例状态及数据库的连接池 400 GdnRole.NotSupport Specified gdn role is not support.gdn角色不允许删除账号。400 IncorrectAccountStatus Current account status does not support this operation.当前账号状态不支持此操作。400...
DeleteAccount-删除数据库账号
请检查实例状态及数据库的连接池 400 GdnRole.NotSupport Specified gdn role is not support.gdn角色不允许删除账号。400 IncorrectAccountStatus Current account status does not support this operation.当前账号状态不支持此操作。400...
常用操作及兼容性说明
删除数据库 DROP DATABASE testdb;Schema操作 创建Schema CREATE SCHEMA sch_demo;查看Schema SELECT*FROM sys.schemas AS sch WHERE sch.name='sch_demo';创建Schema下表 CREATE TABLE sch_demo.tb_demo(id int);SELECT sch.name AS ...
Dataphin中CSV文件集成到hive运行报“Code:[Hdfs...
概述 解决数据集成到hive库中时任务运行报“Code:[HdfsWriter-02],Description:[您填写的参数值不合法.].-仅仅支持单字符切分,您配置的切分为:[SOH]”错误的问题 问题描述 将CSV文件集成到hive数据库，运行报错：经Dlink智能分析,该任务最...
库表
您可以删除数据库前需要先删除库中的所有表，此时使用 drop table 语句删除很麻烦，建议您使用新版DMS进行批量删除。登录 数据管理DMS 5.0，选择已登录实例，单击实例名，右键单击库名，选择单库查询。右键单击任意表名，然后选择批量操作...
概述
使用限制 开启SQL防火墙功能后，Proxy会在您当前的集群中创建一个数据库 database:proxy_auditing 和两张表，其中，sql_list 表用于保存黑白名单规则中的参数化SQL语句，org_sql_list 表用于保存黑名单规则中具体的SQL语句。且每张表最多...
基础用户权限
DATABASE LEVEL 数据库级权限 通过GRANT语句授予的 ctl.db.*上的权限。被授予的权限适用于指定数据库中的任意表。TABLE LEVEL 表级权限 通过GRANT语句授予的 ctl.db.tbl 上的权限。被授予的权限适用于指定数据库中的指定表。资源的权限分为...
表回收站
Recycle Bin原理介绍 回收和清理机制 回收机制 当执行 DROP TABLE 语句来删除数据表，或执行 DROP DATABASE 语句来删除数据库时，PolarDB 只会保留相关的表对象，并将表对象移动到专门的Recycle Bin目录中。其它对象的删除策略如下：与表...
创建集群
内置MySQL（不推荐）：该方式的元数据存储在集群本地环境的MySQL数据库中。说明 测试场景：推荐使用 DLF统一元数据。生产场景：可以使用 DLF统一元数据 或 自建RDS。集群存储根路径 当您在可选服务区域选择了OSS-HDFS服务时，需要配置该...
EMR Hive数据整库离线同步至MaxCompute
Hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。数据集成支持从Hive同步数据到其他目标端，也支持从其他目标端同步数据到Hive。添加数据源 新建MaxCompute数据源 ...
EMR Hive数据整库离线同步至MaxCompute
Hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。数据集成支持从Hive同步数据到其他目标端，也支持从其他目标端同步数据到Hive。添加数据源 新建MaxCompute数据源 ...
GetDatabase-获取元数据库详情
操作 访问级别 资源类型 条件关键字 关联操作 dlf:GetDatabase READ 全部资源*无 无 请求语法 GET/api/metastore/catalogs/databases 请求参数 名称 类型 必填 描述 示例值 CatalogId string 否 数据库分类命名空间，默认填写主账号 Uid ...
管理Databases
database=db.create_database("<yourDbname>")为待创建的数据库名称。本文以 milvus_demo 为例，您可以根据实际情况更改。使用Database 通常情况下，Milvus实例默认会自动创建一个名为“default”的预设数据库。除非在创建Collection时另有...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。权限说明 仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据...
Impala概述
注意事项 如果使用Impala组件，请勿直接通过系统文件删除hive表分区目录，请使用Impala或者Hive命令删除，否则会导致该表不可用。优点 为了避免延迟，Impala没有使用MapReduce，而是使用分布式查询引擎直接访问数据，该引擎与RDBMS中的查询...
资源清单
调研/采集源端 进入资源清单的资源 AWS EC2,RDS,ELB,NAT,S3,ES,DocumentDB,KAFK IDC SERVER,DATABASE,NETWORK,MIDWARE,STORE,BIGDATA 阿里云 ECS,RDS,SLB,VSwitch,Redis VMware vm Hive DB 资源详情查看 在 控制台->准备->资源清单 中点击...
创建Hudi数据源
背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的插入更新和删除数据的能力。更多信息，请参见 Apache Hudi官网。权限说明 仅支持 超级管理员、数据源管理员、...
使用E-Mapreduce访问
Hive的元数据存储在MySQL中，进入存储Hive元数据的MySQL数据库hivemeta中，修改DBS表和SDS表，如下所示。MariaDB[(none)]>use hivemeta;修改表“DBS”MariaDB[hivemeta]>select*from DBS;DB_ID|DESC|DB_LOCATION_URI|NAME|OWNER_NAME|OWNER...
配置E-MapReduce服务使用文件存储 HDFS 版
Hive的元数据存储在MySQL，进入存储Hive元数据的MySQL数据库hivemeta，修改CTLGS表、DBS表和SDS表相应的值。执行 use hivemeta 命令，进入存储Hive元数据的MySQL数据库hivemeta。修改表CTLGS中的数据。执行 select*from CTLGS 命令，查询表...
Search-搜索元数据
True DatabaseResult object 返回的 db 结果 Databases object[]返回的 DatabaseList Database Database 返回的 Database HighLightList array 返回高亮文本 HighLight 返回高亮文本 TotalCount long 满足匹配条件的总的 Database 个数 ...
Hive服务异常排查及处理
解决方案：需要手动初始化Hive Meta数据库。具体步骤，请参见 Metastore初始化。HiveMetaStore问题 常见异常：org.apache.hadoop.hive.ql.metadata.HiveException:MetaException(message:Could not connect to meta store using any of the...
配置Hive输入组件
Hive输入组件用于读取Hive数据源的数据。同步Hive数据源的数据至其他数据源的场景中，您需要先配置Hive输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Hive输入组件。使用限制 Hive输入组件支持数据格式为 orc、...
SearchAcrossCatalog-跨Catalog搜索元数据
db 结果 Databases object[]返回的 DatabaseList Database Database 返回的 Database HighLightList array 返回高亮文本 HighLight 返回高亮文本 TotalCount long 满足匹配条件的总的 Database 个数 11000 TableResult object 返回的 table...
配置Hive输出组件
Hive输出组件用于向Hive数据源写入数据。同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 ...
配置自建RDS
DataLake和Custom集群在创建过程中会自动根据所提供的数据库连接参数初始化Hive Meta数据库，因此无需执行该步骤。步骤一：元数据库准备 创建数据库。具体操作，请参见 创建数据库 中的创建数据库。创建普通用户并授权读写权限。具体操作，...
配置CDH6使用文件存储 HDFS 版
命令，进入存储Hive元数据的MySQL数据库。修改表DBS中的数据。执行 SELECT*FROM DBS LIMIT 5;命令，查询表DBS中的数据。返回结果示例如下：+-+-+-+-+-+-+-+|DB_ID|DESC|DB_LOCATION_URI|NAME|OWNER_NAME|OWNER_TYPE|CREATE_TIME|+-+-+-+-+-...
管理数据库
数据库 待访问的Hive数据库名称。可选参数。访问方式 支持以下访问方式：LDAP：需设置用户名和密码。EMR集群中设置的用户，详情请参见 管理用户。免密登录：仅需设置用户名。网络检测 单击 测试连通性，可以测试网络连通性。StarRocks 参数...
查看集群日报与分析
Hive库信息 Hive库信息包含以下部分：Hive库详细信息 Hive库文件大小分布Top信息 Hive库冷热数据分布Top信息 Hive库存储格式分布Top信息 Hive库详细信息提供以下数据：存储使用量排名：名称、存储量，日环比和日增量。文件数量排名：名称、...
ListDatabases-获取元数据库列表
获取数据湖元数据库列表，分页查询，可以根据数据库名称匹配。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，...
CDH6与文件引擎集成
三、安装HIVE服务 安装MySQL数据库，并创建用来存储hive元数据信息的数据库。登入CDH6任意的一台机器，执行如下指令，进行安装。切换到 root sudo su-#下载 MySQL的rpm 源 root@cdhlindorm001~/tool$wget ...
Dataphin集成任务同步数据到Hive报错“GSS initiate ...
问题描述 Dataphin集成任务同步数据到Hive报错“GSS initiate failed”。问题原因 Hive数据源kerberos认证没有成功。解决方案 检查Hive数据源的连通性以及集群认证的相关票证是否正常。适用于 Dataphin
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
CREATE DATABASE
删除数据库时，系统会同时删除数据库中的表或数据等对象。说明 开通Hologres实例后，系统自动创建 postgres 数据库。该数据库分配到的资源较少，仅用于管理，开发实际业务建议您新建数据库。Superuser可以为其他用户创建数据库，并授权该...
独立RDS元数据库
数据库名称>为 hive元数据库 名称。数据库用户名 填写hive元数据库中账号的用户名。数据库密码 填写hive元数据库中账号的密码。Metastore初始化 1.连接RDS元数据库，首先需要打通Databricks集群与MySQL实例的VPC和vSwitch网络。详情参见 ...
EMR-3.23.x版本说明
Hive 删除老版本的hive hook。添加支持多个count distinct字段的数据倾斜处理优化。解决join不同bucketversion的表时丢数据的问题。Flink 升级至1.8.2。Bigboot 更新小文件工具。更新OSS JAR，解决非daemon线程问题。Kafka 新增感知...
Iceberg
catalog-database 数据库名称 String 是 default 对应在DLF上创建的数据库名称，例如dlf_db。说明 如果您没有创建对应的DLF数据库，请创建DLF数据库，详情请参见 创建元数据库。io-impl 分布式文件系统的实现类名 String 是 无 固定值为 ...
外表统计信息
本文介绍 云数据库 SelectDB 版 中外表统计信息收集功能，包括 使用方法和实现原理，为您进行查询性能优化提供参考。外表统计信息的收集方式、内容基本与内表统计信息一致，更多信息请参见 统计信息。注意事项 目前支持收集Hive、Iceberg和...
DeleteDatabase-删除元数据库
Uid 1344371 Name string 否 元数据库名称 database_test Cascade boolean 否 是否级联删除数据 false Async boolean 否 是否异步执行 true Cascade：true：删除 db 下的表，false：不删除 db 下的表，如果 db 还存在表，那么删除失败 返回...
- 产品推荐
- 这些文档可能帮助您