数据Hive

前提条件 请确保您的网络连通性:您通过公网连接Quick BI与Hive数据库,请添加 Quick BI的IP地址 至数据库白名单,请参见 添加安全组规则。您通过内网连接Quick BI与Hive数据库,请搭建跳板机,并通过SSH隧道访问登录并访问数据库。已创建...

CREATE DATABASE

CREATE DATABASE语句用于创建数据库,并可以指定数据库的默认属性(如数据库默认字符集,校验规则等)。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...

Hive

Hive数据仓库工具能将存储在HDFS系统中的结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成Map/Reduce任务来执行。操作步骤 初始化Spark。val spark:SparkSession=SparkSession.builder().config("hive.metastore...

DROP DATABASE

删除指定数据库。语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名,用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE ...

HiveMetastore

database 指定需要访问的数据库为用户HiveMetastore的HiveServer中的库名。location 指定需要访问的连接点为用户HiveMetastore的HiveServer地址。vpc_id 指定需要访问的HiveMetastore所在的vpc。hdfs_properties 指定需要访问的...

Schema探索

示例二:运行不带有ON子句的SHOW RETENTION POLICIES查询 使用 USE<database_name>指定数据库>USE NOAA_water_database Using database NOAA_water_database>SHOW RETENTION POLICIES name duration shardGroupDuration replicaN default-...

Superset(仅对存量用户开放)

使用Superset访问Hive数据库 Superset提供了SQLAlchemy以多种语言支持各种各样的数据库,包括MySQL、Oracle、PostgreSQL和Microsoft SQL Server等关系型数据库,以及Hive、Presto和Druid等大数据查询引擎。这里以E-MapReduce Hadoop集群...

API概览

自动空间优化 API 标题 API概述 UpdateAutoResourceOptimizeRulesAsync 设置空间碎片自动回收功能的配置参数 调用UpdateAutoResourceOptimizeRulesAsync接口,采用异步方式,批量设置指定数据库实例空间碎片自动回收功能的配置参数。...

自建Hive数据仓库迁移到阿里云E-MapReduce

可靠性 使用阿里云数据库RDS保存Hive的元数据信息,可以提升数据可靠性和服务可用性,免除客户运维自建MySQL数据库的工作。架构图 方案详情 请参见 阿里云自建Hive数据仓库跨版本迁移到阿里云EMR。icmsDocProps={'productMethod':'created'...

内表数据

可选:执行以下命令,切换到指定数据库。USE<db_name>;指定Catalog名称 USE default_catalog.<db_name>;查询内部数据。SELECT*FROM;如果在以上步骤中未指定数据库,则可以在查询语句中直接指定。不指定Catalog SELECT*FROM<db_name>.;指定...

DLF统一元数据

切换为MySQL(包括集群内置MySQL、统一meta数据库和自建RDS):设置 hive.imetastoreclient.factory.class 的值为 org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClientFactory。切换为DLF统一元数据:设置 hive....

Hive采集字段

简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集,当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点,采集的字段重点举例为:Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数...

CREATE DATABASE

指定数据库属性 创建数据库DB1,其中数据存满30天后转入冷存储,存满60天后会被清除。CREATE DATABASE DB1 WITH(cold_boundary=30,ttl=60);结果验证 您可以通过 SHOW DATABASES;语句,查看数据库是否创建成功。通过 DESCRIBE DATABASE DB1;...

RDS for SQL Server如何回收表空间

如果需要收缩一个SQL Server的数据文件,必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小,或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件,所以收缩...

通过Mongo Shell连接MongoDB单节点实例

鉴权数据库名称,用于指定数据库账号所属的数据库。当数据库账号为root时,对应的数据库为admin。如果您希望指定其他数据库,请先在该数据库中使用 db.createUser()命令创建账号,然后再使用该账号进行连接。...

RDS for SQL Server如何回收表空间

如果需要收缩一个SQL Server的数据文件,必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小,或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件,所以收缩...

USE

目标数据库database_identifier)database_identifier必须是当前实例中已存在的数据库。您可以通过 SHOW DATABASES 语法查看当前实例下所有的数据库。SHOW DATABASES 的使用方式,请参见 SHOW DATABASES。默认数据库(DEFAULT)USE语句中...

管理Databases

db.list_database()删除Database 在删除指定数据库之前,请务必确保该数据库内所有关联的Collection已被彻底清除。否则,由于存在未清理的Collection,数据库的删除请求将无法成功执行。db.drop_database("milvus_demo")相关文档 关于管理...

GetDatabase-获取指定数据库的详细信息

获取指定数据库的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值...

ACL权限体系

以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限:Database(库),即 db_name.*或*(默认数据库),指定数据库或数据库上所有表/表组。TableGroup(表组),即 db_name.table_group_name 或 table_group_name,特定表组。Table...

用户管理

LIST USERS 数据库创建者也可以查询指定数据库中的所有用户(包括子账号)LIST USERS ON db_name.*示例 数据库创建者通过 LIST USERS 查看用户列表。LIST USERS+-+|USERS|+-+|ALIYUN$dt*_docs|RAM$dt*_docs:adb_account|新增用户 注意:...

快速使用EMR Notebook

数据库 待访问的Hive数据库名称。访问方式 支持以下访问方式:LDAP:EMR集群中设置的用户名和密码,详情请参见 管理用户。免密登录:仅需设置用户名。网络检测 单击 测试连通性,可以测试网络连通性。单击 添加数据库。步骤三:新建...

API概览

GetDatabase 获取指定数据库的详细信息 获取指定数据库的详细信息。ListDatabases 查询指定堡垒机实例下的数据库列表 查询指定堡垒机实例下的数据库列表。DeleteDatabase 删除单个数据库实例 删除单个数据库实例。网络域(仅支持V3.2.40及...

通过Mongo Shell连接MongoDB副本集实例

鉴权数据库名称,用于指定数据库账号所属的数据库。当数据库账号为root时,对应的数据库为admin。如果您希望指定其他数据库,请先在该数据库中使用 db.createUser()命令创建账号,然后再使用该账号进行连接。...

Dataphin即席查询报错:"Can not read value at 0 in ...

问题描述 Dataphin集成任务同步成功,在即席查询中查询目标表报错:"java.io.IOException:parquet.io.ParquetDecodingException:Can not read value at 0 in...解决方案 hive数据库作为输出组件时,表中所有字段必须全部映射。适用于 Dataphin

Hive连接器

该元数据存储在数据库(例如,MySQL)中,并通过Hive Metastore Service(HMS)访问。一种称为HiveQL的查询语言。该查询语言在分布式计算框架(例如,MapReduce或Tez)上执行。前提条件 已创建EMR-3.45.0及后续版本和EMR-5.11.0及后续版本...

在EMR集群运行TPC-DS Benchmark

hive-e"desc database tpcds_bin_partitioned_orc_$SF"(可选)清理已经存在的Hive数据库。重要 如果Hive数据库tpcds_bin_partitioned_orc_$SF已经存在,需要执行下面的命令清理数据库,否则后续流程会报错。如果不存在,则跳过该步骤。...

用户和权限管理

拥有DATABASE层级GRANT权限的用户,可以授予任意用户对指定数据库的权限。拥有TABLE层级GRANT权限的用户,可以授予任意用户对指定数据库中指定表的权限。ADMIN_PRIV权限只能在GLOBAL层级授予或撤销。拥有GLOBAL层级GRANT_PRIV实际等同于...

副本集实例连接说明

authSource=(可选):该参数用于指定数据库账号所属的数据库。为鉴权数据库名称。如果不配置该参数,<database>会作为鉴权数据库。重要 数据库账号必须在所属的数据库下进行鉴权,才能鉴权成功。示例:mongodb:/root:*@dds-bp19f409d7512*...

配置连接器

连接器 功能 对应文档 hive 使用Hive连接器可以查询存储在Hive数据仓库中的数据Hive连接器 kudu 使用Kudu连接器可以查询、插入和删除存储在Kudu里的数据。Kudu连接器 iceberg 使用Iceberg连接器可以查询Iceberg格式的数据文件。Iceberg...

如何使用RPA操作MySQL数据库

P test>test.py 指令各部分说明如下:指令文本 含义说明 说明 python-m pwiz 通过命令行形式运行pwiz.py文件 必填-e mysql 指定数据库引擎(操作MySQL需要先安装PyMySQL库)必填-H 4x.xxx.xxx.xx 指定数据库服务host地址(IP或域名)连接非...

PolarPlus

PolarPlus提供了如下功能:查询指定数据库对象 执行存储过程 格式化SQL命令的输出 执行批处理脚本 执行操作系统命令 记录输出内容 以下步骤将指导您如何下载并配置PolarPlus。说明 该工具依赖如下:Java的jdk1.8环境(x64)。OpenSSL 1.1...

API概览

DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...

AUTO模式数据库与DRDS模式数据库

通过MODE参数指定数据库模式 PolarDB-X 在创建数据库时引入了MODE参数,以决定创建的数据库是AUTO模式还是DRDS模式。关于MODE参数的作用及其描述,如下表所示:说明 数据库创建完成后,MODE不允许修改。参数 取值类型 作用 建库语法 建表语...

元数据管理常见问题

java.net.UnknownHostException: *”问题分析:由于在之前的集群上创建了Hive数据库,并且数据库的位置是落在之前集群的HDFS之上,但是在集群释放的时候,没有清理掉对应的Hive Database,导致新建集群之后,无法访问到之前已经释放集群...

基础用户权限

拥有DATABASE层级GRANT权限的用户,可以授予或撤销任意用户对指定数据库的权限。拥有TABLE层级GRANT权限的用户,可以授予或撤销任意用户对指定数据库中指定表的权限。SET PASSWORD 拥有ADMIN权限,或者GLOBAL层级GRANT权限的用户,可以设置...

通过LOCALITY指定存储位置(DRDS模式)

PolarDB-X 支持通过LOCALITY关键字来指定数据库或单表的存储位置,以实现数据隔离或数据的均匀分布。本文介绍了DRDS模式数据库中使用LOCALITY的方法。本语法仅适用于DRDS模式数据库。前提条件 实例版本需为5.4.10或以上。关于如何查看实例...

将自建ClickHouse数据迁移到云ClickHouse中

导出自建实例中指定数据库下所有表的建表DDL。clickhouse-client-host="<old host>"-port="<old port>"-user="<old user name>"-password="<old password>"-query="SELECT concat(create_table_query,';')FROM system.tables WHERE database='...

恢复

仅支持恢复指定数据库,不支持恢复指定表。不支持恢复视图(VIEW)。不支持恢复超过100 GB的单表数据。不支持恢复 postgres、rdsadmin、template 开头的数据库。开启库表恢复 若您需要使用库表恢复功能,您需要先参考如下步骤开启库表恢复...

Tomcat 连接池连接 OceanBase 数据库示例程序

通过 db.app.pool.maxWaitMillis 指定数据库连接的超时时间为 5000ms,即在获取数据库连接时,如果超过 5000ms 仍未获取到连接,则抛出超时异常。通过 db.app.pool.validationQuery 指定用于验证数据库连接的 SQL 查询语句为 select 1,即...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 DBS 云数据库 Redis 版 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用