新建数据库
操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：Hologres管控台新建数据库 Hologres管控台 支持以可视化的方式新建数据库，在Hologres管控台进入对应实例的详情页，选择 数据库管理，单击 新增数据库 进行创建。说明 当前版本的...
Bloom过滤器索引
在读取表文文件之前，Databricks会检查索引文件，根据上面的步骤判断表文件中是否包含需要查询的数据，如果不包含则直接跳过，否则再进行处理。布隆过滤器索引的使用 创建布隆过滤器索引 CREATE BLOOMFILTER INDEX ON TABLE table_name FOR...
概述
回收站实际上是一个数据字典表，用于放置用户删除的数据库对象信息，包括用户删除的数据库和表等信息。背景信息 在对数据库对象进行删除操作时：如果回收站为开启状态，则该对象会进入回收站。在回收站中可以查询到被删除的对象，并可进行...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
跨库操作（dblink、postgres_fdw）
创建数据库 postgres=>\c<数据库名>/切换数据库 示例 postgres=>create database db1;CREATE DATABASE postgres=>\c db1 新建postgres_fdw插件。db1=>create extension postgres_fdw;新建用于连接远端目标数据库的服务器对象。db1=>CREATE ...
离线数仓构建流程概述
步骤一：开发维度逻辑表 步骤二：开发事实逻辑表 步骤三：开发原子指标 步骤四：开发业务限定 步骤五：开发指标 运维补数据 对任务进行数据回刷，包括管道任务、维度逻辑表、事实逻辑表以及指标。步骤七：运维补数据 验证数据 您可以通过...
离线数仓构建流程概述
步骤一：开发维度逻辑表 步骤二：开发事实逻辑表 步骤三：开发原子指标 步骤四：开发业务限定 步骤五：开发指标 运维补数据 对任务进行数据回刷，包括管道任务、维度逻辑表、事实逻辑表以及指标。步骤七：运维补数据 验证数据 您可以通过...
EMR+DLF数据湖解决方案
步骤六（可选）：使用生命周期对数据湖存储进行合理规划，节省存储成本 您可以通过生命周期管理对数据湖中的数据库、数据表配置数据管理规则，可以基于分区/表创建时间、分区/表最近修改时间、分区值三种规则类型，对数据定期进行OSS存储...
索引数据可见性
solrconfig.xml中的配置 创建索引时需要指定配置集 config set，配置集中的 solrconfig.xml 文件可以用来控制索引数据的可见性。如何获取 solrconfig.xml，请参见 更新配置集。soft commit<autoSoftCommit><maxTime>${solr.autoSoftCommit....
表结构发布流程化
设计结构（Dev）测试（Test）生产发布（Product）对应数据库实例名称 Schema_Design-dev Schema_Design-test Schema_Design-product 环境类型 dev test product 数据库名称 dev_database test_database product_database 步骤一：配置研发...
MyBatis 连接 OceanBase 数据库
本文介绍 MyBatis 连接示例的配置依赖和配置文件。配置依赖<dependency><groupId>...
一键实时同步至AnalyticDB for MySQL 3.0
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
MyBatis 连接 OceanBase 数据库
本文介绍 MyBatis 连接示例的配置依赖和配置文件。配置依赖<dependency><groupId>mysql</groupId><artifactId>mysql-connector-java</artifactId><version>8.0.25</version></dependency><dependency><groupId>org.mybatis</groupId>...
索引数据可见性
配置solrconfig.xml 创建索引时需要指定配置集 config set，配置集中的 solrconfig.xml 文件可以用来控制索引数据的可见性。soft commit<autoSoftCommit><maxTime>${solr.autoSoftCommit.maxTime:15000}</maxTime></autoSoftCommit>数据...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
MySQL分库分表同步至MaxCompute
操作流程 步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步...
构建
构建依赖 Maven仓库 使用阿里云公共代理库和云效私有仓库 云效会默认使用构建代码库的根目录下Maven的settings.xml文件中配置的依赖库。如果用户项目代码库的根目录没有Mavensettings.xml文件，那么云效构建时会为用户自动生成一个settings...
逻辑表表达式
本文介绍在新建逻辑表时，输入逻辑表表达式的规则。简单规则 规则 举例说明 自然序 test_[0-7]：创建8张表。...数据库下不均等表 db_01.test_[1-7],db_02.test_[10-15]：在数据库db_01下创建7张表，在数据库db_02下创建6张表。
Maven仓库
用户可以通过该页面下载完整的settings.xml文件,也可以根据自己的需求在settings.xml文件中添加公共仓库的镜像地址。上传二方库 用户可以通过UI上传二方库。目前支持通过GAV的模式进行上传，单个二方库的大小限制为300M。检索 对二方库的...
审计经典网络数据库实例
如果需要审计经典网络数据库实例，您需要先通过ClassicLink功能实现经典网络的ECS与VPC中的数据库审计系统互通，并在经典网络的ECS上部署Agent程序。前提条件 VPC中启用ClassicLink时，需要满足限定条件，具体请参见ClassicLink概述的 使用...
整库离线同步至MaxCompute
编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标表时，将自动为源端字段匹配目标端可写入的字段类型。...
整库离线同步至MaxCompute
编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型时，同步任务在自动创建目标表时，将自动为源端字段匹配目标端可写入的字段类型。...
API概览
云原生数据湖分析DLA提供以下相关API接口。Serverless Spark API 描述 SubmitSparkSQL 提交SparkSQL作业。SubmitSparkJob 提交Spark作业。...AlterTable 修改表的数据库名、表名、表属性以及列信息。DropTable 删除给定表。
access-monitor（访问跟踪）
如果您希望配置基于最后一次访问时间（Last Access Time）策略的生命周期规则来自动监测Bucket中Object的访问模式并识别冷数据，然后将识别出来的冷数据进行存储类型转换，最终降低存储成本。您需要先通过 access-monitor 命令为Bucket开启...
快速开始
工程配置 配置 AndroidManifest 在 AndroidManifest.xml 文件中添加以下权限：在 AndroidManifest.xml 文件中添加以下配置。将通配符${applicationId} 替换为真实的包名。例如，将${applicationId}.fileprovider 替换为 ...
支持的数据库
通过 云数据库专属集群MyBase 创建的数据库实例，可以通过 云实例 的 接入方式 被DTS正常读取，您可以参考下表中的相应数据库链路文档进行配置。数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾...
mysqldump
db-tables test_table-no-data 导出test_db1、test_db2数据库中所有表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-databases test_db1 test_db2 导出所有数据库和表：mysqldump-h127.0.0.1-P9030-uroot-no-tablespaces-all-...
工作原理
数据库网关提供私网数据库远程访问的连接服务。通过数据库网关，您可以使用云服务访问并管理本地IDC或其他云厂商的数据库。工作原理 本地安装一个数据库网关代理（database gateway agent）。数据库网关代理负责与数据库网关云端服务...
GRANT
GRANT语法用于给授予指定权限，例如表的读写权限、数据库的所有权限等。适用引擎 GRANT语法适用于宽表引擎和时序引擎。无版本限制。语法 grant_permission_statement:=GRANT privilege_definition ON resource_definition TO user_...
一键实时同步至MaxCompute
NAME_DEST：目的端数据库名称 TABLE_NAME_DEST：目的端表名称 TABLE_NAME_SRC：源端表名称 编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型...
一键实时同步至MaxCompute
NAME_DEST：目的端数据库名称 TABLE_NAME_DEST：目的端表名称 TABLE_NAME_SRC：源端表名称 编辑目标表结构 目前 自动建表 生成的MaxCompute表生命周期默认只有30天，并且可能存在字段类型映射，即若目标端数据库中没有与源端一致的数据类型...
动态文件剪枝
创建一个Notebook，在该Notebook中进行试验，先创建数据库，并在数据库中基于以上生成的数据创建表，对表store_sales的 ss_item_sk 列做ZOrdering优化：%sql-创建数据库 CREATE DATABASE dfp;使用刚创建的数据库 USE dfp;基于上述生成的...
本地开发环境准备
IDEA 配置方式：将 settings 文件保存到任意方便使用的位置，比如/example/abc/，修改自己的 IDE（集成开发环境），配置 maven settings 文件地址到/example/abc/settings.xml，使得 IDE 能够使用这个 settings 文件作为运行 Maven 时使用...
resource-group（资源组）
local_xml_file 用于添加资源组配置的本地文件名称，例如 config.xml。使用示例 在本地XML文件中设置Bucket所属资源组。xml version="1.0"encoding="UTF-8?ResourceGroupId>rg-aekz*...
性能优化最佳实践
您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件中增加或修改如下配置，同步到所有依赖hadoop-common的节点上并重启集群服务。...
停止网关
本文主要介绍如何在控制台停止网关。操作步骤 登录 数据库网关控制台。在左侧导航栏单击 网关列表。鼠标停留到网关对应右侧 操作 栏里面的 更多 按钮，然后单击 停止。
CREATE DATABASE
CREATE DATABASE 用于创建数据库。创建数据库 说明 每个集群最多可以创建2048个数据库。语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及...
配置客户端CA证书
步骤四：（可选）配置证书吊销文件 如果您不再使用某一客户端证书时，可以将客户端证书吊销，数据库将拒绝此客户端登录。说明 配置证书吊销文件后，实例的 运行状态 将会变更为 修改SSL中，该状态将持续三分钟左右，请耐心等待运行状态变更...
约束和限制
数据湖管理使用限制 限制 描述 元数据发现支持发现的数据源 OSS SLS Tablestore 元数据发现OSS数据源的文件格式 只支持识别CSV、JSON、Parquet、ORC格式的文件 元数据发现OSS数据源目录结构 按照库/表/分区布局的路径 元数据发现OSS数据源...
SDK示例
本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例，您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储...
- 产品推荐
- 这些文档可能帮助您