创建Hudi数据源
本文为您介绍如何创建Hudi数据源。背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并...同步到Hive的数据库名称：填写同步到Hive的数据库名称。单击 确定，完成Hudi数据源的创建。
创建Hudi数据源
同步到Hive的数据库名称：填写同步到Hive的数据库名称。单击 确定，完成Hudi数据源的创建。重要 创建Hudi数据源时不支持测试数据源是否可以和Dataphin进行正常的连通，因此需要您确保连接信息的正确性。您可根据 网络连通解决方案 自行排查...
元数据管理常见问题
mysql-h${DBConnectionURL}-u${ConnectionUserName}-p 登录Hive数据库后，修改Location为该Region真实存在的OSS路径即可。如何登录内置的MySQL？通过SSH方式连接集群。详情请参见 登录集群。执行以下命令，登录内置的MySQL。mysql-uroot-...
使用Hive查询JindoFS上的数据
例如，创建名为database_on_jindofs，location为 jfs:/emr-jfs/warehouse/database_on_jindofs 的Hive数据库。CREATE DATABASE database_on_jindofs LOCATION 'jfs:/emr-jfs/hive/warehouse/database_on_jindofs';修改Database的Location到...
SHOW（2.0版）
查询用户的数据库列表。指定 EXTRA 参数，输出关于数据库的更多信息，例如创建者ID、数据库连接信息等。SHOW DATABASES 查询用户的数据库列表。指定 EXTRA 参数，输出关于数据库的更多信息，例如创建者ID、数据库连接信息等。SHOW ...
Superset（仅对存量用户开放）
使用Superset访问Hive数据库 Superset提供了SQLAlchemy以多种语言支持各种各样的数据库，包括MySQL、Oracle、PostgreSQL和Microsoft SQL Server等关系型数据库，以及Hive、Presto和Druid等大数据查询引擎。这里以E-MapReduce Hadoop集群...
DescribeAccountAuthority-查看账号权限
string db.dict 形式，代表某数据库的某字典 test1.range_key_dict 示例 正常返回示例 JSON 格式 {"RequestId":"F5178C10-1407-4987-9133-DE4DC9119F75","Data":{"DBInstanceId":"cc-bp100p4q1g9z3*","Account":"test1","DmlAuthority":0,...
DescribeAccountAuthority-查看账号权限
F5178C10-1407-4987-9133-DE4DC9119F75 TotalDatabases array 所有数据库列表。string 所有数据库列表。db1,db2 TotalDictionaries array 所有字典列表。string 所有字典列表。dt1,dt2 AllowDictionaries array 已授权的字典列表。string ...
管理数据库
数据库 待访问的Hive数据库名称。可选参数。访问方式 支持以下访问方式：LDAP：需设置用户名和密码。EMR集群中设置的用户，详情请参见 管理用户。免密登录：仅需设置用户名。网络检测 单击 测试连通性，可以测试网络连通性。StarRocks 参数...
管理实例
查看只读实例的数据库列表 只读实例的数据库是从主实例复制而来，只读实例数据库下的 PolarDB-X 1.0存储资源实例 与主实例下数据库的 PolarDB-X 1.0存储资源实例 是同一套实例。为了不影响主实例数据库的业务，建议为只读实例选择不在主...
Iceberg
hive_sync.db 同步到Hive的数据库名称 String 否 当前Table在Catalog中的数据库名 无。hive_sync.table 同步到Hive的表名称 String 否 当前Table名 无。dlf.catalog.region DLF服务的地域名 String 否 无 详情请参见 已开通的地域和访问...
在EMR集群运行TPC-DS Benchmark
hive-e"desc database tpcds_bin_partitioned_orc_$SF"（可选）清理已经存在的Hive数据库。重要 如果Hive数据库tpcds_bin_partitioned_orc_$SF已经存在，需要执行下面的命令清理数据库，否则后续流程会报错。如果不存在，则跳过该步骤。...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
hive-e"desc database tpcds_bin_partitioned_orc_$SF"（可选）清理已经存在的Hive数据库。重要 如果Hive数据库tpcds_bin_partitioned_orc_$SF已经存在，需要执行下面的命令清理数据库，否则后续流程会报错。如果不存在，则跳过该步骤。...
DescribeDrdsDBs
调用DescribeDrdsDBs接口查看指定实例的数据库列表。请求参数 参数名 类型 是否必须 说明 Action String 是 系统规定参数，取值：DescribeDrdsDBs。DrdsInstanceId String 是 PolarDB-X实例ID。返回值 参数名 类型 描述 Items List<DrdsDB>...
DescribeDbInstanceDbs
调用DescribeDbInstanceDbs接口查看目标存储实例下的数据库列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
如何清理孤立文档
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
DescribeDatabases-查询数据库列表
对于 MySQL 模式，角色为数据库（Database）级别，其有以下几类：ReadWrite：读写权限，包括 ALL PRIVILEGES；ReadOnly：只读权限，包括 SELECT；DDL:DDL 权限，包括 CREATE,DROP,ALTER,SHOW VIEW,CREATE VIEW；DML:DML 权限，包括 SELECT,...
API概览
本产品（云数据库 OceanBase 版/2019-09-01）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据库列表 var databasesToProcess=["database1","database2","database3"];shardNames.forEach(function(shardName){/遍历指定的数据库列表 databasesToProcess.forEach(function(dbName){ var dbInstance=db.getSiblingDB(dbName);获取...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
API概览
本产品（云数据库 RDS/2014-08-15）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可...
接口说明
在指定的数据库database下进行DDL等操作，比如在指定的database下创建表 Result execute(String database,String sql);其中，Result对象表示SQL的执行结果，比如提交数据库的列表语句（"SHOW DATABASES"）后，可以通过Result获取到已经存在...
RAM资源授权
CreateDrdsDB acs:drds:$regionid:$accountid:instance/$instanceid/db/*创建 PolarDB-X 1.0 数据库 DescribeDrdsDbList acs:drds:$regionid:$accountid:instance/$instanceid/db/*查看 PolarDB-X 1.0 实例的数据库列表 DescribeDrdsDb acs...
DescribeBackupDatabase-查询备份集数据库列表
查询备份集下的数据库列表，已下线。接口说明 说明 该 API 已下线。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
DescribeBackupDatabase-查询备份集数据库列表
查询备份集下的数据库列表，已下线。接口说明 说明 该 API 已下线。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
DescribeBackupDatabase-查询备份集数据库列表
查询备份集下的数据库列表，已下线。接口说明 说明 该 API 已下线。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
DescribeBackupDatabase-查询备份集数据库列表
查询备份集下的数据库列表，已下线。接口说明 说明 该 API 已下线。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
DescribeBackupDatabase-查询备份集数据库列表
查询备份集下的数据库列表，已下线。接口说明 说明 该 API 已下线。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
Hudi
hive_sync.db 同步到Hive的数据库名称。String 否 default 无。hive_sync.table 同步到Hive的表名称。String 否 当前table名 hudi同步到Hive的表名不能使用中划线（-）。dlf.catalog.region DLF服务的地域名。String 否 无 详情请参见 已...
将自建ClickHouse数据迁移到云ClickHouse中
当您计划将自建数据库ClickHouse迁移到云数据库ClickHouse提升业务的可扩展性和可靠性时，本文档将为您提供实际操作指南以及如何处理可能遇到的问题。参考本文档迁移策略，您将能够高效、安全地完成数据迁移，并最大化云端环境的利益。说明...
Dataphin资产中物理表的描述出现乱码
问题描述 本文主要描述了Dataphin...问题原因 Hive meta数据库编码问题。解决方案 在即席查询执行show create table 查看表名，确认结果的COMMENT是不是乱码，如果是乱码，需要确认下修改下Hive meta的数据库编码。适用于 Dataphin v.2.9.7
Hive数据按行过滤
test-row-filter Hive Database 添加Hive中的数据库。default Hive Table 添加表。test_row_filter Select User 选择配置按行过滤的用户。testc Access Types 选择授予的权限。select Row Level Filter 填写过滤的函数。id>=10 单击 Add。...
Hive数据脱敏
test_mask Hive Database 添加Hive中的数据库。testdb Hive Table 添加表。testtb1 Hive Column 可添加列名。a Select User 指定添加此策略的用户。test Access Types 选择授予的权限。select Select Masking Option 选择脱敏方式。Partial...
OpenAPI 导航
API 名称 API 描述 CeateDrdsDB 创建数据库 DescribeDrdsDB 查询数据库 DeleteDrdsDB 删除数据库 ModifyDrdsDBPasswd 重置数据库密码 DescribeDrdsDBs 查询数据库列表 ModifyDrdsIpWhiteList 修改数据库白名单 DescribeDrdsDBIpWhiteList ...
（可选）创建数据库账号并添加权限
命令如下：db.createUser({user:"test",pwd:"123456Aa",roles:[{role:"read",db:"admin"}]})说明 更多权限说明，请参见 数据库账号的角色说明。返回结果中 ok 取值为 1.0 时，表示创建成功，其他取值表示创建失败。创建成功后，您可以在DMS...
（可选）创建数据库账号并添加权限
命令如下：db.createUser({user:"test",pwd:"123456Aa",roles:[{role:"read",db:"admin"}]})说明 更多权限说明，请参见 数据库账号的角色说明。返回结果中 ok 取值为 1.0 时，表示创建成功，其他取值表示创建失败。创建成功后，您可以在DMS...
（可选）创建数据库账号并添加权限
命令如下：db.createUser({user:"test",pwd:"123456Aa",roles:[{role:"read",db:"admin"}]})说明 更多权限说明，请参见 数据库账号的角色说明。返回结果中 ok 取值为 1.0 时，表示创建成功，其他取值表示创建失败。创建成功后，您可以在DMS...
- 产品推荐
- 这些文档可能帮助您