快速入门
mysql-h127.0.0.1-P 9031-uroot 执行以下命令，创建数据库并选择数据库。CREATE DATABASE IF NOT EXISTS load_test;USE load_test;执行以下命令，创建表。CREATE TABLE insert_wiki_edit(event_time DATETIME,channel VARCHAR(32)DEFAULT '...
Iceberg数据源
Iceberg Catalog是一种External Catalog。通过Iceberg Catalog，您可以直接...查看 Iceberg 表数据 您可以通过SELECT查询目标数据库中的目标表。SELECT*FROM<catalog_name>.<database_name>.;相关文档 Iceberg更多介绍，请参见 Iceberg概述。
TableStore数据源
仅向数据库写入数据时生效。catalog TableStore表字段说明，JSON格式。本示例定义了一个TableStore表table1的Schema，Catalog配置示例如下所示。{"columns":{"col0":{"cf":"cf0","col":"col0","type":"string"},"col1":{"cf":"cf1","col":...
管理向量Indexes
db_name="default"#待连接的数据库名称，本文示例为默认的default。schema=MilvusClient.create_schema(auto_id=False,enable_dynamic_field=True,)schema.add_field(field_name="id",datatype=DataType.INT64,is_primary=True)schema.add_...
免费体验Lindorm宽表性能&价格力
背景 云原生多模数据库Lindorm面向海量泛时序数据、半结构化数据和非结构化数据提供低成本存储、在线查询和检索、离线分析、AI 推理等一站式数据服务，支持MySQL协议，兼容HBase、Elasticsearch、Hive、Spark、HDFS 等开源标准。...
性能测试
本文介绍Ganos时空服务与开源GeoMesa（HBase）、云数据库MongoDB分片集群在处理时空轨迹数据时的性能测试对比。测试环境 本次性能测试中需要准备以下测试数据库，具体配置如下表：数据库 配置说明 云原生多模数据库 Lindorm Ganos引擎（即...
登录数据库
您需要登录图数据库GDB才能对数据库内的数据进行查询和分析，本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门完成创建账号步骤，具体操作请参见 创建账号。操作步骤 登录 DMS数据管理服务控制台。单击页面左侧 数据库实例 旁...
AI开源项目
阿里云开源的AI及大数据相关开源项目，如用于全自动分布式深度学习系统TePDist、NLP 开发和应用工具包EasyNLP等，您可以根据需要选择AI及大数据开源项目。PAI相关的开源项目信息请前往 阿里云大数据&AI开源项目。
Sqoop概述
Sqoop是一款Apache社区的开源软件，支持在Hadoop生态软件和结构化数据集（例如数据库）之间进行高效的批量数据传输。背景信息 常见数据传输场景如下：将MySQL数据导入HDFS 将HDFS数据导入MySQL 将Hive数据导入MySQL 将MySQL数据导入Hive 将...
DBeaver
背景信息 DBeaver是一款免费、开源（GPL）的专门为开发人员和数据库管理员提供的通用数据库工具。DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行...
产品概述
EMR还可以与阿里云其他的云数据存储系统和数据库系统（例如，阿里云OSS和RDS等）进行数据传输。阿里云EMR提供了on ECS、on ACK和Serverless形态，以满足不同用户的需求。形态 描述 EMR on ECS EMR负责将开源Hadoop生态的组件安装部署在ECS...
产品简介
EMR还可以与阿里云其他的云数据存储系统和数据库系统（例如，阿里云OSS和RDS等）进行数据传输。产品介绍 阿里云EMR提供了on ECS、on ACK和Serverless形态，以满足不同用户的需求。形态 描述 EMR on ECS EMR负责将开源Hadoop生态的组件安装...
什么是EMR Serverless Milvus
企业级运维及易用性 云上全托管的向量数据库服务，不仅极大地缩减了集群维护成本，而且开箱即用，内置配置管理、安全管理等功能，并通过云原生架构实现高性能、可扩展性，支持按需节点化伸缩能力；同时，还提供了全面可视化的监控告警链路...
管理用户及数据授权
通过用户管理功能，您可以对数据库进行用户权限控制，这样可以确保只有授权的用户能够管理相关的数据库。前提条件 已创建实例，详情请参见 创建实例。使用限制 普通用户无法执行本文操作。添加用户 进入StarRocks Manager页面。登录 E-...
使用须知
了解开源Spark SQL 通过开源Spark SQL访问数据库的数据分为以下三个级别：Catalog：用来标识用户不同的数据源。Namespace：与数据库中的Database或者Schema相对应。Table：与数据库中的表相对应。了解Lindorm计算引擎SQL 根据您已开通的...
管理数据目录
数据目录是数据湖构建（Data Lake Formation）的元数据最上层实体，可以包含若干个数据库。在EMR Serverless Spark中，您可以通过该功能来查看绑定的数据目录中的数据库和表，还可以添加已有的数据目录。该功能适用于需要实现元数据隔离的...
Lindorm for Cassandra应用实践
Lindorm 是一款适用于任何规模、多种模型的云原生数据库服务，支持海量数据的低成本存储处理和弹性按需付费，提供宽表、时序、搜索、文件等多种数据模型，兼容HBase、Cassandra、Phoenix、OpenTSDB、Solr、SQL等多种开源标准接口，...
Hive概述
Hive是一个基于Hadoop的数据仓库框架，在大数据业务场景中，主要用来进行数据提取、转化和加载（ETL）以及元数据管理。背景信息 E-MapReduce（简称EMR）版本中，Hadoop、Hive版本和EMR集群的配套情况，请参见 版本概述。Hive结构 名称 说明...
快速使用EMR Notebook
在新建Cell的数据库下拉列表中，选择目标数据库（本示例为demo_hive）。输入SQL语句。本文示例如下。SHOW TABLES;DROP TABLE myHiveTable;CREATE TABLE IF NOT EXISTS myHiveTable(id int,score int);INSERT INTO TABLE myHiveTable SELECT...
查看元数据
元数据管理功能主要为您展示当前实例的所有数据库，数据表，分区及各种任务等信息。本文为您介绍如何通过EMR StarRocks Manager查看元数据。前提条件 已创建StarRocks实例，详情请参见 创建实例。使用限制 普通用户无法查看数据库大小、...
Workflow商业化发布
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。产品文档 ...
Trino概述
Schema 相当于一个数据库实例，一个Schema包含多张数据表。Table 数据表，与一般意义上的数据库表相同。Connector Trino通过各种Connector来接入多种外部数据源。Trino提供了一套标准的 SPI 接口，用户可以使用这套接口开发自己的Connector...
配置自建RDS
DataLake和Custom集群在创建过程中会自动根据所提供的数据库连接参数初始化Hive Meta数据库，因此无需执行该步骤。步骤一：元数据库准备 创建数据库。具体操作，请参见 创建数据库 中的创建数据库。创建普通用户并授权读写权限。具体操作，...
HBase版本选择
云数据库HBase标准版 HBase标准版使用的是社区的开源HBase分支，并在此基础上定制部分能力，同时优化了稳定性和运维能力。这些能力主要来源包括：内部分支（增强版）的优化。开源新版本中的patch。测试及生产中发现的bug修复、体验优化。...
Presto概述
Schema：相当于一个数据库实例，一个Schema包含多张数据表。Table：数据表，与一般意义上的数据库表相同。Connector Presto通过内置的各种Connector来接入多种外部数据源。Presto提供了一套标准的 SPI 接口，您可以使用这套接口开发自己的...
通过DMS连接StarRocks实例
背景信息 DMS是由阿里云提供的数据库管理Web终端，为您管理Windows系统和Linux系统下的数据库。您只需在数据管理控制台上录入StarRocks实例信息，即可使用数据管理功能，例如新建数据库、新建表等。更多信息，请参见 什么是数据管理DMS。...
通过Quick BI连接StarRocks实例
添加StarRocks数据源用于连通StarRocks数据库与Quick BI，连接成功后，您可以在Quick BI上进行数据的分析与展示。本文为您介绍如何通过Quick BI连接StarRocks实例。背景信息 Quick BI是由阿里云提供的一款全场景数据消费式的BI平台，无缝...
Delta Lake概述
Delta数据湖方案如下：在大数据存储层之上提供了数据管理层，该数据管理层等同于数据库中的元数据管理，其元数据随着数据一起存放并对用户可见（例如 图 1 所示）。Delta基于元数据管理引入了ACID，解决了因数据导入失败而产生脏数据和数据...
管理网络配置
参数 说明 专有网络 选择用于工作空间机器与待绑定的EMR集群、待添加数据库连通专有网络，需与后续添加使用的EMR集群、数据库专有网络保持一致。交换机 选择用于工作空间机器与待绑定的EMR集群、待添加数据库连通的交换机，仅支持选择特定...
快速使用EMR StarRocks Manager
操作流程 步骤一：进入StarRocks Manager页面 步骤二：新建连接 步骤三：查看数据库或数据表 步骤四：诊断与分析 步骤五：新增用户 步骤一：进入StarRocks Manager页面 您可以通过以下方式进入StarRocks Manager页面。登录EMR Serverless...
开源软件迁移
sudo yum install mysql-y Redis Redis是一个依据BSD（Berkeley Software Distribution，伯克利软件套件）开源协议发行的高性能Key-Value存储系统，可以用作数据库、缓存、消息代理和流引擎。您可以直接在倚天云服务器上安装部署Redis。...
什么是云原生多模数据库Lindorm
本文介绍 云原生多模数据库 Lindorm 的产品概要。产品介绍 Lindorm是面向物联网、互联网、车联网等设计和优化的云原生多模超融合数据库，支持宽表、时序、文本、对象、流、空间等多种数据的统一访问和融合处理，并兼容SQL、HBase/Cassandra...
产品架构
从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件也会相应的升级，详情请参见 版本概述 下各版本的版本说明。注意 已经创建好的EMR集群不支持组件升级。...
产品优势
阿里云E-MapReduce（简称EMR）为您提供相对方便可控的企业级开源大数据服务。您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。稳定可靠的开源组件 100%采用社区开源组件，随开源版本升级迭代，详情请参见 版本...
Kafka兼容说明
例如数据库default中一个名为t1的流表，对应的Kafka Topic的名称为-LINSTREAM-default.t1。重要 如果Database或流表名称中含有下划线（_），则需要将下划线替换为短横线（-）。将流表中的数据写入Kafka Topic。具体操作，请参见 通过开源...
使用限制
实例名、数据库名、表名、逻辑视图名、列名、分区名、用户名、角色名：只能由数字(0-9)、字母(a-z或A-Z)，以及下划线(_)组成。用户名(username)可以使用纯数字命名。名称长度不能超过64个字符。列名不能超过1023个字符。列名、数据库名、表...
使用StarRocks Console
数据库功能 在数据库功能页中，会按数据库展示该数据库下的表详情和任务详情。表 展示当前数据库下的所有表（包括物化视图）单击对应的名称，可以逐层查看相关的表信息、分区信息、节点分片情况、分片信息。任务 展示当前数据库下的所有...
DTS_BINLOG_PARSER
DTS_BINLOG_PARSER用于SELECT语句中，表示对数据传输服务（Data Transmission Service，简称DTS）传输的数据库binlog数据进行解析。背景信息 注意 当前只支持解析DTS同步的RDS binlog数据。DTS_BINLOG_PARSER解析结果是一个STRUCT类型，...
什么是EMR on ECS
产品优势 EMR为您提供了相对方便可控的企业级开源大数据服务。您可以快速搭建开源大数据服务，例如Hadoop、Spark、Flink、Kafka和HBase服务。100%采用社区开源组件，适配并优化开源组件，性能远高于开源版本。基于时间的弹性伸缩能力，抢占...
通过客户端方式连接StarRocks实例
使用开源MySQL客户端连接StarRocks 步骤一：下载MySQL客户端并安装数据库 下载 MySQL客户端。执行以下命令，解压缩安装包。tar-zxvf mysql-5.6.40-linux-glibc2.12-i686.tar.gz 执行以下命令，复制解压后的mysql目录到系统的本地软件目录。...
- 产品推荐
- 这些文档可能帮助您