自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
大数据AI公共数据集分析
本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等公共数据），指导您如何快速进行大数据分析，快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...
补数据
为什么进行大量补数据操作时，会出现等待资源情况（实例显示黄色，实例状态为等待资源）？为什么补数据报错调起的节点运行时间不在所选业务时间范围内？为什么有节点选择了补数据，但是没有生成补数据实例？周、月任务如何执行补数据操作 ...
执行补数据并查看补数据实例（旧版）
本文为您介绍旧版补数据如何执行补数据操作并管理补数据实例。背景信息 周期任务开发完成并提交发布后，任务会按照调度配置定时运行。如果您希望在指定时间段运行周期任务，可使用补数据功能。DataWorks支持的补数据方式如下。补数据模式 ...
执行补数据并查看补数据实例（新版）
本文为您介绍新版补数据如何执行补数据操作并管理补数据实例。背景信息 周期任务开发完成并提交发布后，任务会按照调度配置定时运行。如果您希望在指定时间段运行周期任务，可使用补数据功能。DataWorks支持的补数据方式如下。补数据方式 ...
添加数据
空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加，支持通过上传文件和...查看服务 在数据列表，单击目标数据 操作 列的 更多，选择 查看服务，查看已经发布的服务，详细操作，请参见 查看服务。
操作指南
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
补数据实例运维概述
对周期任务发起补数据操作后，将根据实例的调度类型产生不同的补数据实例，包括待生成实例、已生成实例。您可以根据业务需求对补数据实例进行运维管理，包括查看运行日志、重跑等操作。名词解释 待生成实例：将在未来时间段生成实例并提交...
补数据实例运维概述
对周期任务发起补数据操作后，将根据实例的调度类型产生不同的补数据实例，包括待生成实例、已生成实例。您可以根据业务需求对补数据实例进行运维管理，包括查看运行日志、重跑等操作。名词解释 待生成实例：将在未来时间段生成实例并提交...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
数据服务
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程完成数据开发操作，具体信息请参见 数据开发。操作步骤 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 ...
视频
图表样式 视频是媒体组件的一种，支持自定义视频的URL地址、视频播放属性、播放器的外观属性等，支持mp4格式的视频，能够在可视化应用中添加视频播放器来播放您的视频。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索...
在GDB控制台清除实例数据
如果目标实例下存在只读实例，清除目标实例数据的同时，只读实例的数据会被同步清除，建议您先确保目标实例和只读实例中的数据均不需要使用，然后进行清除数据操作。清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
数据查询
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。操作步骤 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 快速入门 工作组。在左侧导航栏，单击 图标。单击 物理表查询，...
操作审计
如何获取界面一些操作审计日志，比如界面下载数据操作？重要数据如何通过事前设置来获得事后溯源能力？MaxCompute表权限的权限审计 表数据，节点删除如何恢复？如何进行节点版本对比与版本回滚？如何获取界面一些操作审计日志，比如界面...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
访问CDC数据
C：新增数据操作。U：更新数据操作。D：删除数据操作。无需配置，Schema中包含默认配置值。cdc_timestamp_lindorm long 该操作记录被Lindorm引擎处理的时间戳。单位为毫秒。spark.sql.catalog.lindorm_cdc.lindormTsEnabled_cdc_timestamp_...
事务管理
冲突检测规则 下表为作业并发提交场景下，对同一个非分区表或分区的并发数据操作先后结束的冲突规则说明。作业类型 INSERT OVERWRITE/TRUNCATE（后结束）INSERT INTO（后结束）UPDATE/DELETE（后结束）MINOR COMPACT（后结束）MAJOR ...
数据标准建模
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。操作步骤 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 快速入门 工作组。在左侧导航栏，单击 图标。单击 字段标准设计。...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
添加入库任务
在 数据管理 页面，单击目标数据 操作 列的 入库。在 入库 面板，配置入库任务名称、入库目标表和入库选项。配置完成后，单击 确定。跳转到 入库任务 页面，等待任务运行完成，则数据入库成功。说明 如果入库任务运行异常，在入库任务列表 ...
查看并管理已生成实例
已生成实例是对周期任务发起立即运行补数据操作或待生成实例生成的可运行实例。您可以对已生成实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已生成实例。已生成 实例入口 请参见 运维中心入口，...
上传数据
上传数据操作入口 您可以在数据开发的头部菜单栏、业务流程下的表分组或表管理页面中进行上传数据的操作，入口如下所示。在 数据开发 页面的头部菜单栏中。在 数据开发 页面业务流程下的表分组中。标准模式下，在 表管理 页面中，对开发表...
内置全密态能力
安全隔离 各实体自身数据库数据明文只有自身可见，合作实体间的数据库操作通过在可信执行环境中鉴权、执行，与按权限加密分发，实现基于全密态数据库的数据操作合作与隔离。多TEE支持 支持Intel SGX、FPGA神盾卡等不同可信执行环境TEE，...
数据同步
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。数据同步 登录企业数据智能平台。在页面左上角，选择>协同。在顶部菜单栏，单击 图标，选择 快速入门 工作组。在左侧导航栏，单击 图标。获取物理表，具体步骤...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
DML操作
ArgoDB中的DML语句包括插入、更新和删除数据操作。本文为您介绍计算引擎为ArgoDB时Dataphin支持的DML操作语句。权限说明 Dataphin中使用DML语句需要具备写入表数据的权限。配置说明，请参见 申请、续期和交还表权限。目录 插入单条数据 ...
查看并管理已提交实例
已提交实例是对周期任务发起立即运行补数据操作或待提交实例生成的可运行实例。您可以对已提交实例执行重跑、终止、置为成功继续调度、暂停或恢复等操作。本文为您介绍如何查看并管理已提交实例。已提交实例 入口 在Dataphin首页，单击顶部...
一键MaxCompute任务出错恢复
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该全增量同步任务Merge实例的执行情况，如果Merge任务和全量补数据操作产生冲突，您可以：暂停全量补数据操作，等待Merge任务执行完成后，再执行全量补数据操作。冻结即将运行的Merge...
全增量同步任务运维
您可以在DataWorks 运维中心 的 查看周期实例 页面查看该同步任务Merge实例的执行情况，如果Merge任务和全量补数据操作产生冲突，您可以：暂停全量补数据操作，等待Merge任务执行完成后，再执行全量补数据操作。冻结即将运行的Merge实例，...
步骤七：运维补数据
集成任务和明细及汇总表的补数据操作相同，下文以客户表集成和 dim_products 逻辑表补数据为例。集成任务补数据 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，选择 产品表集成 进行补数据。在 补数据-补当前任务 对话框，...
步骤七：运维补数据
集成任务和明细及汇总表的补数据操作相同，下文以客户表集成和 dim_products 逻辑表补数据为例。集成任务补数据 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，选择 产品表集成 进行补数据。在 补数据-补当前任务 对话框，...
数据开发
前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程完成数据标准建模中的物理化逻辑表操作，具体信息请参见 数据标准建模。上线开发节点 节点模式任务主要适用于计算节点相对独立，整个流程由...
管理用户账号和数据库
前提条件 已购买实例，具体操作请参见 购买流程。...拥有实例下所有数据库操作的所有权限。...在 实例列表 页面，单击目标实例 操作 列中的 管理。...要求如下：长度为8~32个字符 由大写字母、小写字母、数字、特殊字符中的任意三种组成 特殊字符：!...
开发管控：管理者
MaxCompute数据访问权限控制 恢复数据 操作 说明 相关文档 节点恢复 您可以使用数据开发的回收站还原近期删除的节点。说明 节点还原后，节点ID是新生成的，与原ID不一致。回收站 节点版本对比与回滚 您可在节点或业务流程编辑页面右侧导航...
数据归档至专属存储
费用说明 在DMS数据归档中进行转存数据操作不收取费用，但OSS会收取一定的存储费用，详细信息，请参见 存储费用。操作步骤 进入 数据归档工单列表 页面，视图 选择 工单视图。选择目标工单，单击 操作 列下的 详情。在 执行 区域单击 链路...
- 产品推荐
- 这些文档可能帮助您