路况层
在面板下方的 数据项目 下拉列表中，选择一个空间构建平台内已有的数据项目。选择完数据项目后，在 数据集 下拉列表中，选择一个匹配的数据。说明 如果 数据项目 和 数据集 配置项内没有任何可供配置数据类型的内容，请您单击面板内 前往...
动态轨迹层
在面板下方的 数据项目 下拉列表中，选择一个空间构建平台内已有的数据项目。选择完数据项目后，在 数据集 下拉列表中，选择一个匹配的数据。说明 如果 数据项目 和 数据集 配置项内没有任何可供配置数据类型的内容，请您单击面板内 前往...
创建项目
由于开发和生产项目Owner都是同一个账号，请谨防通过发布任务到生产项目时，将生产项目表读写到开发项目再通过开发项目获取生产数据。业务场景二：创建仅实现查询、下载业务数据的项目 场景需求 业务单一，成员角色基本一致，后续业务不会...
使用 Web 版 ODC
信息项 示例值 数据源名称 mysql4.2.0 集群名 ob 4.1.0.1 租户名 osc_test_mysql 数据库用户名 odctest 数据库密码*在项目协同窗口的左侧导航栏中，单击 数据源>新建数据源。在弹出的 新建数据源 面板中填写或选择以下信息。信息项 说明 ...
动态轨迹层
在面板下方的 数据项目 下拉列表中，选择一个空间构建平台内已有的数据项目。选择完数据项目后，在 数据集 下拉列表中，选择一个匹配的数据。说明 如果 数据项目 和 数据集 配置项内没有任何可供配置数据类型的内容，请您单击面板内 前往...
动态轨迹层
在面板下方的 数据项目 下拉列表中，选择一个空间构建平台内已有的数据项目。选择完数据项目后，在 数据集 下拉列表中，选择一个匹配的数据。说明 如果 数据项目 和 数据集 配置项内没有任何可供配置数据类型的内容，请您单击面板内 前往...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
MaxCompute湖仓一体
MaxCompute湖仓一体方案通过数据仓库MaxCompute和数据湖共同实现，将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力于构建数据湖和数据仓库相融合的数据管理平台。本文为您介绍如何通过Dataphin管理MaxCompute和...
外部表概述
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
MaxCompute湖仓一体
MaxCompute湖仓一体方案通过数据仓库MaxCompute和数据湖共同实现，将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合，助力于构建数据湖和数据仓库相融合的数据管理平台。本文为您介绍如何通过Dataphin管理MaxCompute和...
开发者中心介绍
2 项目 拥有项目管理员权限的用户支持创建项目、为项目配置项目成员、并为项目划分数据库。项目中包含数据库、工单、成员、敏感数据四类资源项。项目为最小协作单元，工单是项目内最常用的协作方式，敏感数据是项目内脱敏策略的管理中心。3...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
创建通用项目
项目是Dataphin的基本组织单元，是进行多用户隔离和访问控制的主要边界。您开通Dataphin服务后，需要通过项目使用Dataphin。本文为您介绍如何创建项目。背景信息 Dataphin支持以下两种开发模式的项目：Dev-Prod模式：完成项目的创建后，...
创建通用项目
项目是Dataphin的基本组织单元，是进行多用户隔离和访问控制的主要边界。您开通Dataphin服务后，需要通过项目使用Dataphin。本文为您介绍如何创建项目。背景信息 Dataphin支持以下两种开发模式的项目：Dev-Prod模式：完成项目的创建后，...
添加项目成员
Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色，及支持从项目空间中移除项目管理员、开发者、运维、...
添加项目成员
Dev项目角色 对应Prod项目角色 项目管理员 项目管理员 开发者 运维 分析师 数据访问者 普通访客 普通访客 系统支持修改项目中的项目管理员、开发者、运维、分析师和访客角色成员的角色，及支持从项目空间中移除项目管理员、开发者、运维、...
JindoFS实战演示
使用Checksum迁移HDFS数据到OSS 使用Checksum迁移HDFS数据到OSS 2021-05-11 通过Checksum算法，你可以在大数据迁移场景中校验数据的完整性、对比数据差异并实现增量迁移。本视频为您介绍如何使用Jindo Distcp迁移HDFS数据到OSS，以及在迁移...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
数据集成概述
离线（批量）的数据通道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据抽取插件（Reader）、数据写入插件（Writer），并基于此框架设计一套简化版的中间数据传输格式，从而实现任意结构化、半结构化数据源之间数据传输。...
安全参数列表
为满足不同MaxCompute项目对数据安全的要求，MaxCompute支持项目所有者在项目级别（Project）配置安全属性，定制适合实际业务需求的安全机制。MaxCompute支持在项目级别通过如下安全参数配置安全机制，但是并非所有用户都需要使用这些安全...
数据归档
RDS MySQL实例数据量较大时，存储成本会随之增高。业务数据通常分为冷数据和热数据，将对象存储（OSS）作为归档冷数据的存储介质，能够大幅降低用户的存储成本。功能简介 在开启RDS MySQL通用云盘的数据归档OSS功能后，用户可通过执行下面...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
1.0数据类型版本
MaxCompute 1.0数据类型版本是MaxCompute三种数据类型版本之一，该数据类型版本仅支持1.0数据类型。本文为您介绍1.0数据类型版本的设置方法、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为1.0数据类型版本...
MaxCompute近实时增全量一体化架构介绍
面对当前日益复杂且对数据时效性要求极高的近实时业务场景，MaxCompute基于Transaction Table2.0推出了集大规模存储、高效批量处理和近实时能力于一体的近实时增量一体化架构。本文为您介绍该架构的工作原理及其优势。背景和现状 在当前...
升级告用户书
以下是本次升级的详细内容：新的功能和改进：基于项目的数据库、成员和工单管理：我们引入了基于项目的管理能力，让您可以以项目为单位进行数据库、成员和工单的管理。通过这种方式，您可以更好地组织和跟踪数据库变更，提高团队的协作效率...
新建MaxCompute计算源
AccessKey ID、AccessKey Secret 填写可以访问MaxCompute项目数据的账号的AccessKey ID和AccessKey Secret。您可在 用户信息管理 页面，获取账号的AccessKey ID和AccessKey Secret。重要 为了保证Dataphin项目空间与MaxCompute项目正常连接...
配置区块接口
如果您需要与三维城市构建器项目外的其他可视化组件之间进行交互联动，则需要为项目配置数据接口、事件和动作设置。三维城市构建器项目场景编辑器中提供了区块接口设置的功能，可用于自定义设置项目的数据接口、事件和动作。本文介绍在项目...
配置区块接口
如果您需要与三维城市构建器项目外的其他可视化组件之间进行交互联动，则需要为项目配置数据接口、事件和动作设置。三维城市构建器项目场景编辑器中提供了区块接口设置的功能，可用于自定义设置项目的数据接口、事件和动作。本文介绍在项目...
日志服务通过数据集成投递数据
本文将以LogHub数据同步至MaxCompute为例，为您介绍如何通过数据集成功能同步LogHub数据至数据集成已支持的目的端数据源（例如MaxCompute、OSS、Tablestore、RDBMS和DataHub等）。前提条件 准备好相关的数据源，详情请参见 创建MaxCompute...
使用DataWorks
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
准备数据
在数据准备阶段，您需要同步原始数据至MaxCompute。前提条件 已完成 准备环境。已新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。准备数据源 通过RDS创建MySQL实例，获取RDS实例ID。详情请参见 快速创建RDS MySQL实例。在RDS控制...
数据库管理
每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：如果一个Lindorm时序引擎实例计划包含不相关的项目数据，在很大程度上，彼此之间是隔离的。那么在这种情况下，建议将它们放到单独的...
编辑项目
本文介绍编辑三维城市构建器项目的方法，帮助您快速修改三维城市构建器项目的内容和配置。操作步骤 登录 DataV控制台。在 三维城市构建器 页面中，选择一个三维城市构建器项目，单击 编辑 图标。在打开的三维城市构建器项目场景编辑器页面...
编辑项目
本文介绍编辑三维城市构建器项目的方法，帮助您快速修改三维城市构建器项目的内容和配置。操作步骤 登录 DataV控制台。在 三维城市构建器 页面中，选择一个三维城市构建器项目，单击 编辑 图标。在打开的三维城市构建器项目场景编辑器页面...
操作审计事件数据迁移至MaxCompute
参数 描述 大数据计算服务地域 被投递数据的MaxCompute项目所在地域。说明 操作审计会将审计日志投递至MaxCompute指定地域下的actiontrail_<阿里云账号ID>项目中。因为同一阿里云账号下MaxCompute项目名称唯一，若账号下已有actiontrail_...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
存储费用
MaxCompute会对存储的数据（例如表或资源）及备份的数据，按照数据容量大小进行计费。本文为您介绍存储费用的计费规则。背景信息 MaxCompute数据的压缩比一般在5倍左右，因此多数情况下，您上传的数据文件大小与实际存储在MaxCompute的大小...
管理数据树
本文介绍数据树的管理功能。...新建项目并添加 在数据树中选择需要添加的数据表，单击右下角的 新建项目并添加，等待系统自动创建项目并将当前已选中的数据添加至新创建的项目中。也可以单击 清空选择，去勾选已选中的数据表。
启动和暂停数据同步项目
恢复数据同步项目 您可以手动恢复 暂停 或 失败 的数据同步项目，数据传输会继续运行数据同步项目，尽快缩短同步延迟。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，单击目标项目后的 恢复。...
- 产品推荐
- 这些文档可能帮助您