步骤三：创建实时计算表
本文为实时研发基本流程的创建实时计算表步骤，在准备工作中，订单系统MySQL中的oms_order包含了订单的信息，实时任务就需要从这张表中实时的抽取增量数据来计算GMV。现在我们需要创建一个订单表对应的实时元表，可以从订单表中读取增量...
通过Kafka导入数据
database.server.name=test123#需要同步的数据库和表，默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 ...
步骤一：准备工作
使用flink_dataphin数据库/订单表 CREATE TABLE `oms_orders`(`id` bigint(20)NOT NULL AUTO_INCREMENT COMMENT '订单id',`buyer_id` bigint(20)DEFAULT NULL COMMENT '用户ID',`sku_type` char(32)DEFAULT NULL COMMENT '商品类型',`sku_...
步骤一：准备工作
使用flink_dataphin数据库/订单表 CREATE TABLE `oms_orders`(`id` bigint(20)NOT NULL AUTO_INCREMENT COMMENT '订单id',`buyer_id` bigint(20)DEFAULT NULL COMMENT '用户ID',`sku_type` char(32)DEFAULT NULL COMMENT '商品类型',`sku_...
离线同步能力说明
示例：创建一个离线同步任务，每天从源MySQL订单表中同步前一天新产生的订单数据到MaxCompute目标表的当天分区，原表订单的创建时间字段为 gmd_created,目标odps表的分区字段为 ds，可以将任务配置如下：同步任务配置：调度参数配置：订单...
功能特性
DB：从 DB 中读取数据的配置，需要您输入数据库访问配置信息，建议使用备库来进行核对。离线：离线数据仓库访问的配置信息。数据源管理 您可以在产品中添加多种不同类型的数据源，每个数据源代表一个核对系统在后续核对工作中可以用来读取...
步骤一：准备工作
创建dataphin数据库/产品表 CREATE TABLE product(product_id INT PRIMARY KEY COMMENT '产品ID',product_name VARCHAR(100)COMMENT '产品名称',product_category VARCHAR(100)COMMENT '产品类别',product_price DECIMAL(10,2)COMMENT '...
步骤一：准备工作
创建dataphin数据库/产品表 CREATE TABLE product(product_id INT PRIMARY KEY COMMENT '产品ID',product_name VARCHAR(100)COMMENT '产品名称',product_category VARCHAR(100)COMMENT '产品类别',product_price DECIMAL(10,2)COMMENT '...
rds_dbsync迁移或同步PostgreSQL数据到AnalyticDB ...
开源rds_dbsync的pgsql2pgsql是一个用于迁移PostgreSQL数据库的工具，常用于数据库备份、迁移、复制和同步等操作，可实现PostgreSQL、PPAS、Greenplum Database、AnalyticDB PostgreSQL版 数据库间相互迁移。pgsql2pgsql支持的功能 pgsql2...
RANGE_HASH
使用示例 假设 PolarDB-X 里已经分了8个物理库，现在需要按买家ID和订单ID对订单表进行分库；查询时条件仅有买家ID或订单ID，那么您可以使用如下DDL语句构建订单表：create table test_order_tb(id int,buyer_id varchar(30)DEFAULT NULL,...
RANGE_HASH
示例 假设 PolarDB-X 1.0 里已经分了8个物理库，现在需要按买家ID和订单ID对订单表进行分库；查询时条件仅有买家ID或订单ID，那么您可以使用如下DDL语句构建订单表：create table test_order_tb(id int,buyer_id varchar(30)DEFAULT NULL,...
概述
适用场景 使用订单表或日志表等业务场景 对于在使用订单表或日志表等业务场景下创建的分区表，通常会选择按照时间进行RANGE分区，但一般只对最新的一到两个分区进行频繁的查询，从需求角度来讲，仅在查询频繁的分区上创建对应的二级索引...
V4.6.1版本说明
优化了基于用户行为表、订单明细表创建自定义标签操作，请参见 偏好类标签 等文档。优化了基于订单明细表创建RFM模型操作，请参见 RFM模型。说明 基于订单明细表筛选人群、创建自定义标签、RFM模型时需要用到订单状态字段。存量订单明细表...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
分区表自动冷存
postgres 数据库中执行以下 SQL，为 db01 数据库创建一个名为 task1 的任务，该任务为每分钟检查子分区表数据，并自动将超过3个子分区的历史子分区转为冷存，并返回任务 ID：每分钟执行 postgres=>SELECT cron.schedule_in_database('task1...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db][dbName]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
数据方案概览
环境构建 数据库克隆 支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化。测试数据构建 提供根据字段类型按照多种规则，自动化构建数据的能力。数据追踪/提供数据库Binlog日志的解析处理...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
JindoTable使用说明
jindo table-showPartition-t db1.t1-p date=2020-10-12-listTables 语法 jindo table-listTables[-db]功能 展示指定数据库中的所有表。不指定[-db]时默认展示default库中的表。示例：展示default库中的表。jindo table-listTables 列出...
aggregate
示例 下面这个示例通过披萨订单表 orders 来演示 aggregate pipeline 的用法：生成演示数据 首先，打开 云数据库控制台，新建并选中 orders 表，选择 高级模式。插入以下演示数据：db.insertMany([{ name:"Pepperoni",size:"small",price:...
冷热分层
使用Tablestore SDK的BatchWrite接口写入订单数据，订单的时间戳的时间范围为最近90天（本示例的模拟时间范围为2020-02-26~2020-05-26），共计写入3112400条。在模拟订单写入时，对应Tablestore表属性列的版本号也会被设置为相应的时间戳。...
全局二级索引
PolarDB-X 使用分布式事务维护主表和索引表之间数据强一致。全局二级索引还支持以下特性：支持选择覆盖列，减少回表操作开销。在线表结构变更，添加GSI不锁主表。支持通过HINT指定索引，自动判断是否需要回表。示例1：增加拆分维度。例如，...
通过UPDATE实现列更新
本文介绍如何在 云数据库 SelectDB 版 实例中，使用 UPDATE 命令进行 列更新。概述 SelectDB在进行UPDATE更新时，利用查询引擎自身的WHERE过滤逻辑，从待更新表中筛选出需要被更新的行，再利用Unique模型提供的Value列中新数据替换旧数据的...
同步方案概览
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为TiDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）...
MongoDB 4.4功能概览
例如，某个业务上对订单数据按表拆分存储到不同的集合中，第二季度有如下数据：db.orders_april.insertMany([{_id:1,item:"A",quantity:100 },{_id:2,item:"B",quantity:30 },]);db.orders_may.insertMany([{_id:1,item:"C",quantity:20 },...
概述
回收站实际上是一个数据字典表，用于放置用户删除的数据库对象信息，包括用户删除的数据库和表等信息。背景信息 在对数据库对象进行删除操作时：如果回收站为开启状态，则该对象会进入回收站。在回收站中可以查询到被删除的对象，并可进行...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
库表恢复：按备份集恢复
若您要恢复至的时间点是某个备份集（快照）的时间点，可通过按备份集（快照）恢复的方式恢复误操作的数据库或者表的数据。前提条件 已存在备份集（快照）。版本要求和使用限制 版本要求 说明 您可以通过 查询版本号 来确认集群版本。当前 ...
基本概念
数据库 database 表示数据访问代理的逻辑数据库。以这个作为访问的入口，通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表，应用访问数据访问代理时 SQL 中的表即数据表。一个...
通过Hive访问云数据库HBase
如果云数据库HBase表已存在，可在Hive中云数据库HBase外表进行关联，外部表在删除时不影响云数据库HBase已创建表。在云数据库HBase中创建HBase表，并执行put命令测试数据。create 'hbase_table','f' put 'hbase_table','1122','f:col1','...
Smartbi
本文列出了Smartbi与 AnalyticDB MySQL版 在连通性、列举数据库、查询表数据等方面的兼容性。测试环境 Smartbi试用地址为 登录Smartbi。如何通过Smartbi连接 AnalyticDB MySQL版 集群，请参见 Smartbi。测试范围 连接 AnalyticDB MySQL版 ...
库表恢复方式1：从备份集恢复
库表恢复是指仅恢复指定的部分库或部分表到原集群。例如游戏业务中有时仅需恢复某个或某些玩家的数据，此时可使用库表恢复方式。...RestoreTable-恢复PolarDB实例的某些数据库或表到原实例 调用RestoreTable恢复 PolarDB 库表。
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
5.6/5.7/8.0版功能对比
❌ 设置透明数据加密TDE ✔️ ❌ SQL防火墙 ✔️ ❌ 动态脱敏 ✔️ ❌ 数据库管理 功能 集群版 多主集群（库表）管理数据库 ✔️ ✔️ 数据库代理企业版 功能 集群版 多主集群（库表）管理连接地址 ✔️ ✔️ 连接数据库集群 ✔️ ✔️ ...
- 产品推荐
- 这些文档可能帮助您