数据湖投递概述

表格存储 数据湖投递可以全量备份或实时投递数据数据湖OSS存储,以满足更低成本的历史数据存储,以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求:冷热数据分层 数据湖投递结合 表格存储 的 ...

DROP DATABASE

DROP DATABASE语句用于删除数据库。语法 drop_database_stmt:DROP DATABASE[IF EXISTS]database_name;参数说明 参数 说明 IF EXISTS 用于防止当数据库不存在时发生错误。database_name 指定待删除的数据库名。示例 删除数据库test。drop ...

数据备份概述

背景信息 云备份(Cloud Backup)作为阿里云统一灾备平台,是一种简单易用、敏捷高效、安全可靠的公共云数据管理服务,可以为阿里云ECS整机、ECS数据库、文件系统、NAS、OSS、Tablestore 以及自建机房内的文件、数据库、虚拟机、大规模NAS...

应用场景

表格存储 有互联网应用架构(包括数据库分层架构和分布式结构化数据存储架构)、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活广泛应用...

创建数据库

您可以使用DMS(Data Management Service)、客户端(Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J)、业务系统的程序代码或者MySQL命令行工具连接 云原生数据仓库AnalyticDB MySQL版 集群,然后通过CREATE DATABASE语句...

CREATE DATABASE

语法 CREATE DATABASE[IF NOT EXISTS][catalog_name.]db_name[COMMENT database_comment]参数说明 参数 是否必选 说明 catalog_name 否 指定该数据库的Catalog。db_name 是 数据库名。database_comment 否 数据库的注释信息。示例 创建一个...

将Oracle数据同步到表格存储

在页面左侧,将Oracle和表格存储数据库拖拽到右侧画布,然后将其连接起来。单击Oracle数据库,根据下表说明在右侧面板配置参数。参数 描述 节点名称 默认为连接名称,请根据实际设置。DDL事件采集 暂不支持对表格存储执行DDL语句同步,...

使用Tapdata Cloud导入MySQL数据

通过Tapdata Cloud的可视化界面,您可以将自建MySQL、阿里云RDS MySQL、第三方云数据库的数据实时同步到表格存储。前提条件 使用Tapdata Cloud同步MySQL数据到表格存储前,需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储...

概述

Tablestore的增量数据及全量数据可以通过DataWorks的数据集成同步到MaxCompute。背景信息 表格存储(Tablestore)面向海量结构化数据提供Serverless表存储服务,同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量...

CREATE DATABASE

CREATE DATABASE语句用于创建数据库,并可以指定数据库的默认属性(如数据库默认字符集,校验规则等)。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...

如何修改表格存储已存在的表名称

不支持直接修改表名称。您可以通过新建一个表,然后将当前表数据迁移到新表实现。请使用DataX、通道服务等工具进行数据迁移。具体操作,请参见 将表格存储数据中数据同步到另一个数据表。

表格

使用说明 将 表格 拖入画布后,需要绑定一个类型为List的变量,其中Structure为表格中每行数据对应的类型。配置表格变量的步骤既可以在表格刚拖入时进行,也可暂时跳过。把表格拖入画布后,您可以在表格的属性设置中重新对变量进行绑定和...

方案背景

背景信息 云数据库RDS MySQL基于阿里巴巴的MySQL源码分支,经过双十一高并发、大数据量的考验,拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理、备份恢复、白名单、透明数据加密以及数据迁移等基本功能。更多信息,请参见 ...

使用Go语言驱动

本文介绍如何使用Go语言驱动连接表格存储。注意事项 目前支持使用SQL查询功能的地域有华东1(杭州)、华东2(上海)、...表格存储字段数据类型 Go语言字段数据类型 Integer int64 Binary[]byte String string Double float64 Boolean bool

迁移工具

将MySQL数据同步到表格存储 将Oracle数据同步到表格存储 DataWorks/DataX 使用DataWorks/DataX不仅可以将数据库迁移同步到表格存储,也可以实现表格存储表数据的跨实例或者跨账号的迁移同步。将数据库数据迁移到表格存储 DataWorks/DataX...

使用UDF处理数据

如果您在表格存储数据有着独特的结构,希望自定义开发逻辑来处理每一行数据,例如解析特定的JSON字符串,您可以使用用户自定义函数UDF(User Defined Function)来处理表格存储数据。操作步骤 在IntelliJ安装MaxCompute-Java/...

CREATE[PUBLIC]DATABASE LINK

CREATE[PUBLIC]DATABASE LINK创建一个数据库连接。语法 CREATE[PUBLIC]DATABASE LINK<name>CONNECT TO { CURRENT_USER|<username>IDENTIFIED BY"<password>"} USING {()|'<oracle_connection_string>' } 参数说明 参数 说明 PUBLIC 创建...

功能概述

实例 实例(Instance)是使用和管理 表格存储 服务的实体,每个实例相当于一个数据库表格存储 对应用程序的访问控制和资源计量都在实例级别完成。更多信息,请参见 实例。服务地址 每个实例对应一个服务地址(EndPoint),应用程序在进行...

准备工作

用于访问表格存储服务,将原始数据和聚合结果写入表格存储的数据。说明 在表格存储通过控制台或者SDK创建存储电商数据的原始订单表OrderSource,OrderSource表有两个主键UserId(用户ID)和OrderId(订单ID)和两个属性列price(价格...

通过控制台投递数据到OSS

通过表格存储控制台创建投递任务,将表格存储数据数据投递到OSS Bucket存储。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket,详情请参见 开通OSS服务。说明 数据湖投递支持投递到和表格存储相同地域的任意OSS Bucket...

数据导出到OSS概述

表格存储 的全量数据以及增量数据可以通过DataWorks数据集成同步到 对象存储 备份和使用。实现原理 DataWorks数据集成的离线同步功能将不同数据源的同步抽象为从来源数据源读取数据的Reader插件以及向目标数据源写入数据的Writer插件,...

概述

基于Tablestore Sink Connector,您可以将Apache Kafka数据批量导入到表格存储(Tablestore)的数据表或者时序表。背景信息 Kafka是一个分布式消息队列系统,不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取...

Tablestore HBase Client 支持的功能

表格存储与 HBase 的 API 区别 作为 NoSQL 数据库服务,表格存储为您屏蔽了数据表分裂、Dump、Compact、Region Server 等底层相关的细节,您只需要关心数据的使用。因此,虽然与HBase在数据模型及功能上相近,Tablestore HBase Client 与...

缓存数据持久化

当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时,阿里云为您提供了缓存数据持久化的高效方案,该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作,确保数据的高速访问和持久化存储,具备高吞吐、低...

数据展示

表格存储对接Grafana后,您可以通过Grafana可视化展示表格存储数据。前提条件 首次使用表格存储时,请开通表格存储服务以及创建实例和数据表等。具体操作,请参见 通过控制台使用 或者 通过命令行工具使用。已为表格存储的数据表或者...

对接Grafana

表格存储对接Grafana后,您可以通过Grafana可视化展示表格存储数据。前提条件 首次使用表格存储时,请开通表格存储服务以及创建实例和数据表等。具体操作,请参见 通过控制台使用 或者 通过命令行工具使用宽表模型。已为表格存储的数据...

数据类型

了解Spark数据类型、Scala的值类型、表格存储多元索引数据类型和表格存储表中数据类型的对应关系。使用过程请确保Spark、Scala和表格存储字段或值的数据类型相匹配。基础数据类型 基础数据类型的支持情况请参见下表。Spark数据类型...

创建投递任务

通过创建投递任务,您可以将表格存储数据数据投递到OSS Bucket存储。注意 请确保已安装支持数据湖投递功能的表格存储Java SDK。关于表格存储Java SDK版本的更多信息,请参见 Java SDK历史迭代版本。前提条件 已开通OSS服务且在表格...

创建投递任务

通过创建投递任务,您可以将表格存储数据数据投递到OSS Bucket存储。注意 请确认已安装支持数据湖投递功能的表格存储Go SDK。前提条件 已开通OSS服务且在表格存储实例所在地域创建Bucket。具体操作,请参见 开通OSS服务。已通过...

将HBase数据同步到表格存储

使用DataX将HBase数据库中的全量数据同步到表格存储(Tablestore)。准备工作 开通表格存储服务,并创建实例和数据表。具体操作,请参见 通过控制台使用宽表模型 或者 通过命令行工具使用宽表模型。说明 创建数据表时建议使用HBase原主键...

如何将高性能实例改为容量型实例

高性能实例当前无法直接调整为容量型实例,需要您自行通过数据迁移实现。您可以使用DataX、通道服务等工具进行数据迁移。具体操作,请参见 将表格存储数据中数据同步到另一个数据表。

表格存储的增量数据转换为全量数据格式

通过DataWorks控制台,您可以在MaxCompute使用merge_udf.jar包将 表格存储 的增量数据转换为全量数据格式。前提条件 已导出 表格存储 全量数据到MaxCompute,且已配置同步 表格存储 增量数据到MaxCompute。具体操作,请分别参见 全量导出...

SQL查询介绍

基本概念 SQL的使用会涉及到很多传统数据库中的概念,此处介绍下相关概念以及与现有表格存储概念的映射关系。数据库概念 表格存储概念 描述 数据库 实例 按照数据结构来组织、存储和管理数据的仓库。一个数据库中可以包含一个或者多个表。...

MatchAllQuery

表示全匹配查询配置。MatchAllQuery可以匹配所有行,常用于查询表中数据总行数,或者随机返回几条数据数据结构 message MatchAllQuery { }

产品架构

数据库分层架构 在数据库分层架构,使用 Tablestore 配合MySQL来完成应用系统的业务需求,利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作,利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...

计量计费项

使用表格存储数据读写,索引的写入、查询、分析,通道服务等操作均会消耗VCU的计算资源。重要 SQL本身不会有额外的费用,但是使用SQL查询数据过程涉及到的表扫描、索引查询等操作会消耗VCU的计算资源。数据存储量 说明 当数据量较大...

环境准备

使用Flink访问表格存储的表前,您需要开通实时计算Flink服务并创建Flink全托管实例以及开通表格存储Tablestore服务并创建Tablestore实例。背景信息 阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台,提供...

宽表模型介绍

说明 如果现有业务对数据库的并发读写、扩展性和可用性要求较高,或者需要复杂的数据检索和大数据分析,原有数据架构已不能满足业务需求,您可以将MySQL、Oracle、Kafka、HBase、MaxCompute等数据源的数据迁移到表格存储的数据表使用。...

方案背景

数据计算场景:推荐系统,订单类业务等 实时数据计算场景:监控系统,电商数字大屏等 样例场景 某电商公司为了完成电商运营数据的分析和展示,使用表格存储统一存储电商数据,通过Spark的流批处理离线聚合或实时统计电商数据,最终在...

MatchPhraseQuery

短语匹配查询采用近似匹配的方式查询表数据,但是分词后多个词的位置关系会被考虑,只有分词后的多个词在行数据中以同样的顺序和位置存在时,才表示行数据满足查询条件。数据结构 message MatchPhraseQuery { optional string field_...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 云数据库 Redis 版 表格存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用