功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。概览 对数据资产...
恢复MySQL物理备份
数据库恢复目录 填入数据库恢复目录，仅支持Linux绝对路径。说明 为保证有足够的空间来进行恢复，建议数据恢复目录的空间大小为原实例大小的1.3倍以上，或者为DBS全量备份集大小的5~6倍以上（DBS备份时会有压缩）。登录 DBS控制台，在 备份...
数据资产管理
数据资产管理通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过查看数据资产全局血缘，清晰的了解数据资产的上下游关联。前提...
AnalyticDB MySQL 2.0数据导入
如果 AnalyticDB for MySQL 2.0集群的Meta表存有导入数据到MaxCompute的记录，可以将MaxCompute数据导入到 数仓版（3.0）的外部数据目录。执行以下命令创建部数据目录：CREATE EXTERNAL CATALOG catalog_name properties('connector.name'=...
约束和限制
目录下面采样最新和最老的文件，每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式，不会发现修改前的数据 一键建仓/多库合并支持的数据源网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...
通过云计算资源扫描创建逻辑表
已创建数据模型目录，具体操作，请参见 新建模型目录。背景信息 通过云计算资源扫描，快速完成STG层数据模型的创建。操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击 图标，选择目标工作组。在页面左上角选择>协同。在左侧导航栏，...
07批量导入逻辑表
前提条件 已完成数据模型目录规划。按照数据模型导入Excel模板完成模型录入。操作目的 通过数据模型导入功能，一次批量导入多张数据模型。导入模型如下：workspace-tables 说明 该Excel中的模型均使用demo来标识模型构建人，可以在Excel中...
发现
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助资产运营管理者进行高价值、可共享的数据资源的注册、编目分类和公开运营，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。...
代码搜索
各目录功能，详情请参见 数据开发功能索引 仅DataWorks V1.0版本会显示 手动任务 目录。操作步骤 进入 数据开发 页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后...
公开与隐藏数据表资产
将编目的数据表资产公开后，可在发现查看及申请使用，同时，可通过隐藏数据表资产停止对外展示及申请使用。本文介绍如何公开与隐藏数据表资产。前提条件 已在运营模块中为数据表资产编目。背景信息 将数据建模中生成的数据表进行编目及公开...
公开与隐藏数据表资产
将编目的数据表资产公开后，可在发现查看及申请使用，同时，可通过隐藏数据表资产停止对外展示及申请使用。本文介绍如何公开与隐藏数据表资产。前提条件 已在运营模块中为数据表资产编目。背景信息 将数据建模中生成的数据表进行编目及公开...
配置数据表资产目录
指为数据表资产指定所属目录，资产编目后，才能进行公开。本文介绍如何给表资产进行编目。前提条件 已在运营模块中订阅物理表，具体操作，请参见 资产注册。已在数据建模模块中创建并物理化逻辑表，具体操作，请参见 物理化逻辑表。已运营...
恢复Oracle物理备份
选择原服务器的备份网关，并配置 数据库恢复目录 为数据库的原目录，若不填写，将默认为数据库的原目录。前提条件 已完成数据备份。具体操作，请参见 Oracle物理备份。准备一台服务器用于接收物理备份文件，并在服务器上安装备份网关。更多...
配置数据表资产目录
指为数据表资产指定所属目录，资产编目后，才能进行公开。本文介绍如何给表资产进行编目。前提条件 已在运营模块中订阅物理表，具体操作，请参见 资产注册。已在数据建模模块中创建并物理化逻辑表，具体操作，请参见 物理化逻辑表。已运营...
更新数据表资产
模型类目：指创建资产时，对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后，单击 所属类录 下拉列表选择模型对应目录，单击 查询，展示符合该条件的资产。说明 未选择 所属工作组，模型类目 不可选择。所属类目：指...
更新数据表资产
模型类目：指创建资产时，对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后，单击 所属类录 下拉列表选择模型对应目录，单击 查询，展示符合该条件的资产。说明 未选择 所属工作组，模型类目 不可选择。所属类目：指...
功能简介
全局配置管理：提供自定义目录配置功能，支持设置多级目录，以供数据资产进行后续编目。资产分析 资产总览：包括指标看板、数据指标数趋势分析和运营分析。指标看板：展示未公开及已公开的资产，对全租户下已注册的资产进行指标统计，可...
运营
运营主要面向租户资产管理员，为用户提供数据资产编目、数据资产上线、数据资产下线等能力。通过获取资产元数据信息，并同步到数据资产目录完成数据资产注册。数据资产管理涉及三种用户角色，包括资产使用方、租户资产管理员、工作组管理员...
功能简介
全局配置管理：提供自定义目录配置功能，支持设置多级目录，以供数据资产进行后续编目。资产分析 资产总览：包括指标看板、数据指标数趋势分析和运营分析。指标看板：展示未公开及已公开的资产，对全租户下已注册的资产进行指标统计，可...
新建数据处理任务
系统提供数据处理能力，包括倾斜数据处理、地形数据处理、三维模型处理、影像优化处理。本文以新建倾斜数据处理任务为例，介绍如何新建数据...后续操作 数据处理完成后，需要将数据添加到数据管理目录，详情请参见 添加处理后数据到数据管理。
功能简介
通过统一的数据资产目录，沉淀数据供给方生产的各类型数据，帮助资产运营管理者进行可共享的数据资产的注册、编目分类和公开运营，帮助数据使用者快速了解和获取业务需要的高质量数据资产，促进数据资产发挥更大的业务价值。同时，通过数据...
查看表资产详情
在数据表目录区域，选择该资产对应目录，单击 图标，根据页面提示，输入相关信息筛选表资产，并在筛选结果中查找表资产。在数据表资产列表展示区域，单击目标表资产名称。在数据表详情页面，可查看字段信息、数据探查、血缘关联和数据质量...
查看表资产详情
在数据表目录区域，选择该资产对应目录，单击 图标，根据页面提示，输入相关信息筛选表资产，并在筛选结果中查找表资产。在数据表资产列表展示区域，单击目标表资产名称。在数据表详情页面，可查看字段信息、数据探查、血缘关联和数据质量...
CREATE DATABASE
带有一行“不能初始化数据库目录”的错误大部分与在数据目录上权限不足、磁盘满或其他文件系统问题有关。使用 DROP DATABASE 移除一个数据库。程序 createdb 是这个命令的一个包装器程序，为了使用方便而提供。数据库层面的配置参数（参见 ...
观远BI连接MaxCompute
数据确认完成后单击 确认新建。步骤五：使用观远BI查询及分析数据 在观远BI主界面顶部菜单栏单击 仪表板。说明 更多仪表板操作，请参见 观远BI仪表板设计。在 仪表板 概览页面单击 新建卡片。在 新建卡片 页面选择 基础卡片>可视化图表。在...
MySQL存储计算分离实践
xr-x 1 root root 0 11月 18 18:53 mysql-5.7.26 初始化MySQL数据库 创建数据文件存放目录 在DBFS服务挂载目录下，创建数据库目录“my3307”，可输入“ls-lrt”查看创建情况，如图所示 总用量 0 drwxr-xr-x 1 root root 0 11月 18 18:53 ...
导出至OSS
分区表写出数据时，数据文件内不包含分区列的数据，分区列的数据信息以OSS目录的形式展现。重要 分区外表不支持导出到OSS单文件。例如：分区表中定义了2个分区列，3个普通列。其中一级分区名称为pcol1，分区数值为1；二级分区名称为pcol2，...
管理数据
在数据域目录节点（即没有资产信息的行）可以设置是否删除该数据域，在有资产信息的行设置是否移出该资产。删除数据域或移出资产后，被删除的数据域下的资产或被移出的资产将属于默认数据域。取值：0：不删除、不移出。1：删除、移出。在 ...
云盘备份数据导入至AnalyticDB MySQL版
如果您需要对RDS MySQL云盘数据进行查询分析，您可先使用高级下载功能将数据下载到阿里云OSS中，再将OSS中的数据导入到云原生数据仓库 AnalyticDB MySQL版 进行查询分析。前提条件 RDS MySQL为 云盘 实例，且支持高级备份下载功能。是否...
存储基础知识
数据卷（Volume）因为容器中的文件在磁盘上是临时存放的，所以Kubernetes定义了数据卷（Volume）以解决容器中的文件因容器重启而丢失的问题。数据卷（Volume）是Pod与外部存储设备进行数据传递的通道，也是Pod内部容器间、Pod与Pod间、Pod...
基本概念
目录（Catalog）目录是数据库的集合，分为内部目录（Internal）与外部目录（External），内部目录包含了SelectDB自身的数据库，外部目录可以连接Hive、Iceberg、Hudi等并进行查询。数据库（Database）数据库属于目录，内部包含表、列、视图...
表设计规范
普通字段可以被理解为数据文件的数据，而分区字段可以被理解为文件系统的目录。表的存储空间主要是普通字段占用的空间。设置分区字段时，您可以从数据管理和数据扫描方面考虑，来选择对应的字段。不具备规律、类型数量大于10000且不经常...
OSS数据源
元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张或多张表），具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源配置模式 OSS数据...
申请数据表
在顶部菜单栏选择 资产目录＞数据表。在资产目录页面，选择数据表资产，单击“dws_ren_kh_demo_di（银行客户信息）”。数据表详情页面，单击 申请权限。在表资产申请页面，输入申请信息，操作完成后，单击 申请。预期结果 在我的申请中，...
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
配置训练数据和代码
在 新增数据配置 页面，配置数据集 名称、命名空间、存储卷声明、本地存储目录 等参数。存储卷声明的更多信息，请参见 创建PVC 和 配置CPFS共享存储。在作业运行过程中，ACK集群会将本地存储目录挂载到作业所在的容器中，使作业能够访问...
通过脚本模式配置离线同步任务
方式二：双击业务流程名称，将 数据集成 目录下的 离线同步 节点直接拖拽至右侧业务流程编辑面板。根据界面提示创建离线同步节点。步骤二：配置同步网络链接 选择离线同步任务的数据来源和数据去向，以及用于执行同步任务的资源组，并测试...
通过向导模式配置离线同步任务
方式二：双击业务流程名称，将 数据集成 目录下的 离线同步 节点直接拖拽至右侧业务流程编辑面板。根据界面提示创建离线同步节点。步骤二：配置同步网络链接 选择离线同步任务的数据来源和数据去向，以及用于执行同步任务的资源组，并测试...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
导入数据并查询
本示例将 oss_import_test_data.txt 文件上传至OSS中的<bucket-name>.oss-cn-hangzhou.aliyuncs.com/adb/ 目录，数据行分隔符为换行符，列分隔符为;文件示例数据如下所示：uid;other 12;hello_world_1 27;hello_world_2 28;hello_world_3 ...
- 产品推荐
- 这些文档可能帮助您