外部表概述
外部表示例 您可以通过以下示例，深入了解通过MaxCompute外部表功能处理各种非结构化数据的方法：访问OSS和TableStore（OTS）非结构化数据，请参见 访问OSS非结构化数据 和 访问OTS非结构化数据。外部表访问OSS的账号，在RAM中自定义授权...
大数据安全治理的难点
通常，大数据系统中的工作流涉及多部门、多责任人且跨系统的数据，如何才能协调好这些业务系统准时、保质保量地产出数据，避免出现因业务系统宕机/脏数据导致数据延时产出、产出脏数据，关乎到企业数据业务的连续性问题甚至高层的信任问题...
云数据库 Memcache 版支持的数据结构？
云数据库 Memcache 版目前仅支持 Key-Value 的数据结构，暂不支持 List 等数据结构。
什么是云数据库MongoDB版
MongoDB的数据结构 MongoDB是面向文档的NoSQL（非关系型）数据库，它的数据结构由字段（Field）和值（Value）组成，类似于JSON对象，示例如下：{ name:"张三",sex:"男性",age:30 } MongoDB的存储结构 MongoDB的存储结构区别于传统的关系型...
Tair扩展数据结构概览
Tair扩展数据结构与Redis Stack模块（Modules）类型 Tair扩展数据结构 Redis Stack Server（对比项）说明 String增强 exString Redis String命令增强 无 TairString是一种带版本号的string类型数据结构，同时还在Redis String加减功能的...
Tair命令概览
Tair扩展数据结构 Tair 集成了多个自研的数据结构，包括 exString（包含 Redis String命令增强）、exHash、GIS、Bloom、Doc、TS、Cpc、exZset、Roaring、Vector 和 Search，从多方面扩展Redis的适用性，降低复杂场景下业务的开发难度，同时...
Tair扩展数据结构
本文汇总了部分 Tair 扩展数据结构的性能测试报告。TairRoaring性能白皮书 TairSearch性能白皮书 TairVector性能白皮书 TairDoc性能白皮书
列存索引技术架构介绍
技术背景 MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP型场景设计的开源数据库，开源社区的研发方向侧重于加强其事务处理能力。如提升单核性能、多核扩展性和增强集群能力，以提升可用性等。在处理大数据量下复杂查询所需要的能力...
应用场景
相比较云数据库Redis版，云原生内存数据库Tair 提供了更加丰富的数据结构，不仅适用于云数据库Redis版支持的应用场景，更适用于高并发且带有一定计算需求的场景，已广泛应用于多个行业。自动驾驶 云原生内存数据库Tair 提供了时序数据结构 ...
PolarDB HTAP实时数据分析技术解密
MySQL生态HTAP数据库解决方案 MySQL是一款主要面向OLTP场景设计的开源数据库。开源社区的研发方向侧重于加强其事务处理的能力，例如：提升单核性能、多核扩展性能、增强集群能力以提升可用性等。在处理大数据量下复杂查询所需要的能力方面...
内存型
云原生内存数据库Tair 内存型（简称内存型）适合并发量大、读写热点多、高性能场景，内存型重点增强了多线程性能并集成多个自研扩展数据结构。购买方式 创建实例 主要优势 类别 说明 兼容性 100%兼容原生Redis，无需修改业务代码，提供 ...
Tair（Redis企业版）简介
提供丰富的自研增强型数据结构：包括 exString（包含 Redis String命令增强）、exHash、GIS、Bloom、Doc、TS、Cpc、exZset、Roaring、Vector 和 Search，帮助您精简代码并提高业务整体性能，使您专注于业务创新。支持诸多企业级特性：通过...
索引加速
SelectDB的数据存储在类似SSTable（Sorted String Table）的数据结构中。该结构是一种有序的数据结构，可以按照指定的列进行排序存储。在这种数据结构上，以排序列作为条件进行查找，会非常的高效。在Aggregate、Unique和Duplicate三种数据...
基本概念
数据库实例：数据库实例是在云中运行的独立数据库环境。一个数据库实例可以包含多个由数据库用户创建的数据库，并且...索引：索引是数据库管理系统对数据库表中一个或多个列的值进行排序的数据结构，使用索引可快速访问数据库表中的特定信息。
资产全景
为您清晰展示同一业务板块下的数据结构。全局模式 在Dataphin首页，单击顶部菜单栏的 资产。默认进入 目录 页面。按照下图操作指引，进入 全局 页面。在 全局 页面，右下角会展示各个业务板块的名称、数据量、占总数据量比，以及系统内的 ...
资产全景
为您清晰展示同一业务板块下的数据结构。全局模式 在Dataphin首页，单击顶部菜单栏的 资产。默认进入 目录 页面。按照下图操作指引，进入 全局 页面。在 全局 页面，右下角会展示各个业务板块的名称、数据量、占总数据量比，以及系统内的 ...
主备方案介绍
A：存储的是数据D1和数据D2中时间戳更大的数据，数据在LTS同步过程中不会改变数据原有的时间戳，一般情况下存储的是数据D2，但是由于主备实例不同可能存在时间戳毫秒级的时间差异造成数据D2的时间戳比数据D1的时间戳小，在这种情况下存储的...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
数据同步
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
引擎简介
Lindorm文件引擎是面向海量非结构化数据的分布式文件存储服务，与多模引擎共享存储，LindormDFS支撑，充分利用了对象存储的低成本与高可靠、块存储的高性能等优势，并通过高低速分层存储、副本共享去重、智能冷热转存等技术，面向用户提供...
生成测试数据
下载模拟数据 在 任务中心 的模拟数据列表中，单击操作列中的 下载 按钮下载创建的模拟数据到本地磁盘，用户可以从本地磁盘中查看导出的数据结构文件。相关文档 SQL 编辑和执行 PL 编译和调试口 结果编辑与导出 执行分析 数据库对象 分区...
Sqoop概述
将HDFS数据导入MySQL 创建好对应HDFS中的数据结构的MySQL表后，在集群的Master节点上执行如下命令。sqoop export-connect<dburi>/<dbname>-username<username>-password<password>-table<tablename>-export-dir参数 描述 dburi 数据库的...
大数据用户画像解决方案
方案总览 作为面向大数据场景的半结构化、结构化存储系统，Lindorm可以很好的满足用户画像：没有强事务要求，大数据量、高并发读写场景这样的业务特征。其架构如下图所示：方案优势 1.低成本：集群内单表冷热分离能力、独有的压缩优化能力...
外部数据
不管使用什么外部数据包装器，本数据库会要求外部数据包装器从外部数据源获取数据，或者在更新命令的情况下传送数据到外部数据源。访问远程数据可能需要在外部数据源的授权。这些信息通过一个用户映射提供，它基于当前的本数据库角色提供了...
导出结构和数据
导出任务生成后会自动弹出 工单 面板，在 导出 列表中可以查看任务审批状态、任务信息并下载导出的数据结构文件。导出 任务列表中包含如下信息：信息项 说明 编号 导出任务编号。类型 显示新建任务时指定的任务类型。工单描述 显示发起任务...
表结构发布流程化
保障数据结构的规范性 安全规则 的研发规范包含新建表、修改表字段、修改表索引等多方面的近40条规范，方便研发同学自助设计满足企业研发规范的表结构，可避免因不满足规范的结构发布上线而导致的生产故障。同时，该功能可节省运维人员因...
通过HTTP接口清除实例数据
清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议您不要执行数据更新操作（执行数据更新操作，可能会导致更新的数据被清理）。准备工作 如果客户端为ECS实例，您需要确保图数据库GDB实例和ECS实例满足以下条件，以...
概述
数据集是数据的结构化形态，一切逻辑、权限、服务等都是从数据集展开。仪表盘是数据分析和数据展示的画布，在仪表盘中可以做实时的数据分析，也可以将数据制作为报表进行展示或分享。大屏是针对大屏幕的特殊数据展示画布，支持灵活自定义的...
2022年
2022-11-01 全部地域 计算抵扣包和存储抵扣包 2022-10 功能名称 功能描述 发布时间 发布地域 相关文档 支持数据结构由 project.table 升级为 project.schema.table，方便与三层结构数据的数据源对接。MaxCompute项目（Project）作为基本...
创建数据迁移任务时报获取结构连接超时
问题描述 创建数据迁移任务时，报“获取结构连接超时”错误。问题原因 报错的可能如下。原因一：您的源数据库设置了白名单，导致DTS服务器不能连接上。原因二：您提供的迁移账号对应的主机名为localhost，导致DTS服务器不能从远程连接上。...
查询结果不符合预期的常见原因
只要写入过程中没有出现报错，相应的数据一定会写入成功，即使遇到机器宕机等情况，都可以通过恢复WAL的方式恢复数据，保障数据的持久性，不会出现数据写入后非预期不可见的情况。但是由于宽表引擎的特性比较多，例如数据版本号、时间戳、...
云数据库Redis版产品选型必读
快速推荐 业务场景 推荐规格 购买链接 超高性能场景、全球多活、按时间点恢复数据，可使用自研增强型数据结构等。Tair内存型（兼容Redis 6.0）4 GB高可用、不启用集群版 购买链接 开发测试 Redis 6.0经济版1 GB 购买链接 通用缓存 Redis 6....
Tair选型指南
选择存储介质 云原生内存数据库Tair 从访问延时、持久化需求、整体成本这三个核心维度考量，推出了DRAM、NVM和ESSD云盘存储介质，为您提供更强的性能、更多的数据结构和更灵活的存储方式，满足不同场景下的业务需求。场景 推荐 特点 以性能...
什么是EMR Serverless StarRocks
实例具有自愈能力，可弹性恢复，节点的宕机、下线和异常都不会影响StarRocks实例服务的整体稳定性。StarRocks采用分布式架构，存储容量和计算能力可近乎线性水平扩展。StarRocks单实例的节点规模可扩展到数百节点，数据规模可达到10 PB级别...
如何基于LSM-tree架构实现一写多读
LSM-tree数据库引擎 LSM-Tree全称是Log Structured Merge Tree，是一种分层、有序，面向磁盘设计的数据结构，其核心思想是利用磁盘批量的顺序写要比随机写性能高的特点，将所有更新操作都转化为追加写方式，提升写入吞吐。LSM-tree类的存储...
云数据库Redis开发运维规范
推荐使用扩展数据结构（数据结构模块集成）实现复杂功能，避免使用Lua脚本。Lua脚本会占用较多的计算和内存资源，且无法被多线程加速，过于复杂或不合理的Lua脚本可能导致资源被占满的情况。合理使用管道（pipeline）降低链路的往返时延RTT...
行业趋势与背景
从用户角度来看，需要满足用户使用云的一些期望，比如用户的数据库数据永远不会丢，即使主机异常宕机，这里需要有数据强一致以及高可用容灾等能力；比如随着移动互联网和IoT的普及，数据层面会有爆炸式的增长，以及疫情之后有更多的企业会...
基本概念
数据结构多样时，可以选择将结构化数据存储在Lindorm，将非结构化数据存储在MongoDB，满足业务的多样化存储需求。更多信息，请参见 什么是云数据库MongoDB版。O OSS 对象存储服务（Object Storage Service，简称OSS）是阿里云提供的海量、...
东软案例
目前，东软在物联网、互联网等新场景下面临的IT系统运维主要问题与挑战有：多模型数据融合分析困难，面向海量数据采集终端同时写入数据的并发能力弱，数据量大且价值密度低导致存储成本高，基于开源软件自建数据存储集群稳定性低运维成本...
- 产品推荐
- 这些文档可能帮助您