导入结构和数据
单表导入时支持导入 CSV 文件，CSV 文件是.csv 或.txt 结尾的支持自定义分割符的数据文件。注意事项 Web 版 ODC 对导入上传的文件大小有限制，最大支持导入 2GB（压缩后）的文件，超出部分无法上传。如需导入大量数据，请使用导数工具 ...
功能特性
透明数据加密TDE 对数据文件执行实时I/O加密和解密，数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，您无需更改任何应用程序，即可使用TDE功能，详情请参见 设置透明数据加密TDE。自动备份 支持 设置...
新建离线物理表
参数 描述 上传文件 单击 选择文件，上传需导入的数据文件。仅支持.txt,.csv类型的文件，文件不超过10MB。分隔符 数据的分隔符，支持逗号（，）、水平制表符（\t）、竖划线（｜）、斜线（/）。也可以输入指定其他分隔符。字符集编码 选择...
通过外表导入至数仓版
HDFS数据文件格式需为CSV、Parquet或ORC。已创建HDFS集群并在HDFS文件夹中准备需要导入的数据，本文示例中所用文件夹为 hdfs_import_test_data.csv。已在HDFS集群中为 AnalyticDB MySQL 集群配置如下服务访问端口：namenode：用于读写文件...
使用OSS Foreign Table进行数据湖分析
OSS FDW支持多种格式的数据文件，适用不同的业务场景，具体文件格式如下：支持访问CSV、TEXT、JSON、JSONLINE格式的非压缩文本文件。支持访问CSV、TEXT格式的GZIP压缩、标准SNAPPY压缩文本文件。支持访问JSON、JSONLINE格式的GZIP压缩文本...
调试实时任务
上传数据方式包括手动 上传样例数据文件、手动输入数据、自动抽样数据。手动上传样例数据文件 您可以通过上传数据的方式，手动上传本地数据。上传本地数据前需要先下载样例，样例由Dataphin自动识别读写的表和表的schema信息生成的csv格式...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
设置列索引的排序键
总体流程如下：按照主键索引遍历并将读取到的完整数据保存至数据文件，然后将排序列添加到排序缓存区，其中每个线程使用不同的数据文件，累积达到一定数据后再写入；不断遍历并插入到排序缓存区，当排序缓存区满时，在内存中根据排序键组合...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
使用MaxCompute控制台（离线）
仅支持上传一个CSV文件或XLSX文件：CSV文件：最大支持上传5 GB数据，文件里的数据以半角逗号（,）分隔。XLSX文件：最大支持上传100 MB数据。默认仅上传XLSX文件中首个Sheet页的数据，如果有多个Sheet，则其他Sheet的数据将被忽略。阿里云...
运行SQL命令并导出结果数据
数据文件的导出路径有两种选择：您可以直接将数据以文件形式导出至MaxCompute客户端的 bin 目录中，导出路径为 文件名.后缀名；也可以导出至其他路径下，例如D盘的test文件夹，导出路径为 D:\test\文件名.后缀名。假设，表result_table1的...
添加数据
前提条件 已在云存储上存储了数据文件。背景信息 空间数据支持添加的 数据类型与格式有：数据类型 数据格式 矢量 Shapefile GeoJSON CSV GDB PostGIS 栅格 GeoTIFF Images NetCDF 倾斜摄影 OSGB S3M 3DTiles BIM RVT DGN IFC 点云 LAS PCD ...
添加对象存储OSS数据源
使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备好待添加的对象存储OSS数据源。添加对象存储OSS数据源操作步骤 登录 DataV控制...
数据加密
当云数据库MongoDB实例开启TDE功能后，新创建的数据库或集合中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）、服务（例如对象存储OSS）前都会进行加密，因此实例中对应的数据文件和备份文件都是以密文形式存在的。TDE的设置方法请参见 ...
添加对象存储OSS数据源
使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备好待添加的对象存储OSS数据源。添加对象存储OSS数据源操作步骤 登录 DataV控制...
存储空间的常见问题
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
配置同步任务
加载策略包括覆盖数据、追加数据、文件名冲突报错，适用场景说明如下：覆盖数据：覆盖数据策略下，先删除目标目录下的文件，再新增数据文件。追加数据：追加数据策略下，直接向目标目录新增数据文件。文件名冲突报错：若目录下有重复的文件...
重要组件
Primary即为拥有读写权限的读写库，Replica即为只读实例，仅仅拥有读取数据的权限（后台线程也不能修改数据），Primary和Replica采用Shared Everything架构，即底层共享同一份数据文件和日志文件。StandBy节点拥有一份独立的数据和日志文件...
数据安全
启用TDE功能后，Lindorm通过密钥层级结构对数据文件进行加密，所有存储在文件系统中的数据都以密文形式存在。详细介绍及使用说明，请参见 开启透明数据加密（内测中）。数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复...
常见问题
PolarDB-X支持对冷数据归档表进行备份，当前不再单独收取归档数据的备份费用。冷数据归档表常用运维指令有哪些？常见运维指令如下：命令或视图 用途 clear oss cache 清空所有CN的本地缓存，释放磁盘空间（异步）；读取最新缓存配置，重建...
功能特性
查询Schema详情 元信息发现 元数据爬取功能可以自动为OSS上面的数据文件创建及更新数据湖元数据，方便分析和计算。具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源 ...
OSS数据源
企业的业务服务所产生的一些标准化表单、日志等数据文件，会被周期性的直接上传到OSS。但是这些存储在OSS的文件缺少元数据管理，导致难以分析和计算。元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张...
使用DataWorks（离线与实时）
MaxCompute支持通过DataWorks的 数据集成 功能将其他数据源的数据以离线或实时方式导入MaxCompute，也支持将部分类型的本地文件数据导入MaxCompute。本文为您介绍使用DataWorks将数据导入MaxCompute的主要操作流程与注意事项。前提条件 已...
使用mysqldump导入导出数据
您可以通过如下两种方式导入数据文件到 PolarDB-X：通过 mysql-h ip-P port-u user-pPassword-default-character-set=char-set 命令登录目标 PolarDB-X，执行 source/yourpath/dump.sql 命令将数据导入到目标 PolarDB-X。直接通过 mysql-h ...
什么是数据库备份DBS
数据量：在数据库备份场景下，有4个概念，分别是数据库磁盘空间、数据文件空间、备份数据量、存储数据量。具体概念请参见 数据量。内置存储与用户OSS：DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS...
MySQL系统文件导致实例空间满的解决方法
当实例系统文件（主要...MySQL数据文件导致实例空间满的解决办法 MySQL Binlog文件导致实例空间满的解决办法 MySQL临时文件导致实例空间满的解决办法 开启自治功能，避免undo文件增长过快导致实例锁定。自动SQL优化 自动SQL限流 自动空间扩展
MySQL系统文件导致实例空间满的解决方法
当实例系统文件（主要...MySQL数据文件导致实例空间满的解决办法 MySQL Binlog文件导致实例空间满的解决办法 MySQL临时文件导致实例空间满的解决办法 开启自治功能，避免undo文件增长过快导致实例锁定。自动SQL优化 自动SQL限流 自动空间扩展
Tunnel命令常见问题
使用Tunnel Upload命令上传数据时，需要上传很多数据文件到一个表中，是否有方法写一个脚本就可以把文件夹下的所有数据文件上传上去？使用Tunnel Upload命令上传数据时，如何实现批量上传一个目录下的多个文件到同一张表，并且每个文件放在...
Oracle物理备份的准备工作
如下返回示例表示 ORACLE_HOME 地址为/opt/oracle/product/19c/dbhome_1：/opt/oracle/product/19c/dbhome_1 Oracle RAC文件查询 为了保证备份成功，您需要在备份Oracle RAC前对控制文件、参数文件、数据文件、归档日志、REDO日志文件进行...
如何选用NAS、OSS和EBS？
如：AI计算、基因计算、药物计算、容器共享PV、日志数据持久化、CI/CD平台、云桌面数据文件共享等 主要应用于基于对象API开发的互联网应用程序的数据存储。如：互联网业务的音视频存储、数据湖、云相册、个人/企业网盘类应用 适用于OLTP...
Oracle永久增量备份
背景信息 Oracle永久增量备份的原理如下：执行完整全量备份（Full Backup），即RMAN Level 0级备份，将备份Oracle所有的数据文件，同时备份归档日志，参数文件和控制文件。增量合成备份（Synthetic Backup）：生成快照并挂载至本地：生成上...
分析外部OSS上的数据
第一种方式：从OSS数据文件中获取列类型（推荐），如下所示：CREATE FOREIGN TABLE `test` FROM CONNECTION='OSS:/${oss_key}:${oss_key_secret}@${endpoint}/${bucket}/test.orc' COMMENT='columnar=1';您可以使用 SHOW create table ...
区域下钻热力层（v1.x版本）
发布area_json数据文件，并获取URL。通过在线静态数据服务，将area_json发布成相应的文件，并获取URL，推荐您使用阿里云的OSS在线静态数据服务。关于文件URL的介绍请参见 上传Object后如何获取访问URL。重要 通过该服务发布的 URL 链接，...
数据上传
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
安全白皮书
TDE功能将在RDB数据文件写入磁盘之前进行加密，从磁盘读入内存时进行解密，确保该实例在所有需生成RDB文件的场景中（备份及主备数据全量同步等），RDB文件均已被加密，从而提高数据的安全性。TDE功能具有不额外占用存储空间、无需更改客户...
MySQL存储计算分离实践
xr-x 1 root root 0 11月 18 18:53 mysql-5.7.26 初始化MySQL数据库 创建数据文件存放目录 在DBFS服务挂载目录下，创建数据库目录“my3307”，可输入“ls-lrt”查看创建情况，如图所示 总用量 0 drwxr-xr-x 1 root root 0 11月 18 18:53 ...
挂载访问概述
受NFS协议本身性能影响，数据和元数据的IOPS性能低于POSIX客户端，推荐访问100 KiB及以上数据文件使用。更多信息，请参见 产品规格。访问控制 NFS v4 ACL。NFS v4 ACL基于IP和IP段的只读和读写控制。推荐场景 ECS。容器（K8s/ACK/ECI）、...
层级生成器功能介绍
将自定义绘制的边界数据制作成层级下钻结构数据后，您也可以将其导出成DataV专有格式，并将该导出的层级结构数据文件，应用到 基础平面地图 3.0 组件的 自定义区域下钻层 子组件中，具体生成层级结构数据及应用到DataV组件的操作方法，请...
- 产品推荐
- 这些文档可能帮助您