数据上云场景

使用DataWorks结合DataX进行Hadoop数据迁移的示例请参见 Hadoop数据迁移新手教程,或参见视频教程 Hadoop数据迁移到MaxCompute最佳实践。Sqoop执行时,会在原来的Hadoop集群上执行MR作业,可以分布式地将数据传输到MaxCompute上,详情请...

自建Hadoop数据迁移到阿里云E-MapReduce

客户在IDC或者公有云环境自建Hadoop集群,数据集中保存在HDFS文件系统用于数据分析任务。...架构图 方案详情 请参见 阿里云自建Hadoop数据迁移到阿里云E-MapReduce。icmsDocProps={'productMethod':'created','language':'zh-CN',};

数据迁移

迁移其它业务平台的业务数据至MaxCompute:迁移Hadoop数据至MaxCompute,详情请参见 迁移Hadoop数据至MaxCompute最佳实践(视频)。数据迁移和脚本迁移遇到的问题及解决方案请参见 迁移自建Hadoop数据至MaxCompute实践。迁移Oracle数据至...

MaxCompute+Hadoop搭建实践

准备Hadoop数据源 创建Hadoop集群,具体操作请参见 开通阿里云EMR服务。进入Hive准备数据。使用Workbench方式登录集群主节点后,在终端界面输入如下命令:[has@emr-header-1 root]$hive-创建库 create database if not exists myhive;切换...

数据变更最佳实践

更新数据 AnalyticDB MySQL版 提供多种数据更新方式,建议如下:数据更新频率高、基于主键的行级覆盖更新且应用可以补齐所有列,可通过 REPLACE INTO 批量更新数据数据更新频率低、基于主键更新,可通过 REPLACE INTO 或者 UPDATE 单条...

API概览

UpdateCatalogSettings 更新数据湖Catalog的配置 更新数据湖Catalog的配置,需admin角色以上角色。GetRole 获取数据湖权限中的角色详情 根据角色名获取数据湖权限中的角色。ListRoles 获取数据湖角色列表 获取数据湖角色列表。...

异构数据源访问

测试数据集内容如下:1,test1,1,100 2,test2,2,90 操作步骤 在 异构数据源访问 页签,单击 新增数据源 的下拉菜单,选择 Hadoop数据源。在 新增Hadoop数据源页面 页面依次配置 网络&安全组、配置文件、初始化。配置 网络&安全组。参数 说明...

最佳实践概览

通过DataWorks将MaxCompute数据同步至Elasticsearch 通过阿里云Logstash将MaxCompute数据同步至Elasticsearch 通过实时计算处理数据并同步到Elasticsearch 通过DataWorks将Hadoop数据同步至Elasticsearch 存储产品迁移 从Solr集群迁移文档...

迁移Hadoop文件系统数据至JindoFS

迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景,可以直接使用Hadoop的FsShell进行同步:hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs-cp oss:/oss_bucket/README.md jfs:/emr-jfs/DistCp 对于文件较多...

基本概念

数据更新 数据更新是指仅修改数据,未修改结构定义的操作,例如INSERT、DELETE和UPDATE操作。结构更新 结构更新是指修改结构对象定义语法的操作,例如CREATE TABLE、ALTER TABLE、DROP VIEW等操作。数据范围 数据范围是指存储在数据订阅...

使用批量更新

本文介绍了 AnalyticDB PostgreSQL版 中数据合并的方法和背后的原理,进而介绍如何使用批量操作,快速地更新数据更新,又称为合并(Merge),指把数据最新版本更新到 AnalyticDB PostgreSQL版 中。如果数据已经存在,则将它们替换为新...

数据库高级特性管理

您可以在RDS管理控制台查看或修改数据库中的各类属性,也可以手动收缩数据库事务日志和更新数据库统计信息,以优化数据库性能和提高查询效率。前提条件 已创建数据库。创建方法,请参见 创建数据库。实例所在地域必须在:华东1(杭州)、...

新建数据

测试连通数据源 在数据源列表,单击目标数据源 操作 列的 测试连通,可更新数据源连通性状态。如果连通失败,在 可连通 列查看失败原因。后续步骤 添加完数据源后,需要同步数据源中的元数据后才能创建数据同步任务,具体操作,请参见 获取...

订阅方案概览

数据更新 结构更新 创建PolarDB-X 2.0数据订阅任务 PolarDB PostgreSQL版(兼容Oracle)所有版本 数据更新 创建PolarDB PostgreSQL版(兼容Oracle)数据订阅任务 自建Oracle(非RAC架构)9i、10g、11g版本 数据更新 结构更新 创建Oracle...

订阅方案概览

数据更新 结构更新 创建PolarDB-X 2.0数据订阅任务 PolarDB PostgreSQL版(兼容Oracle)所有版本 数据更新 创建PolarDB PostgreSQL版(兼容Oracle)数据订阅任务 自建Oracle(非RAC架构)9i、10g、11g版本 数据更新 结构更新 创建Oracle...

MMA概述

MMA迁移作业方案 本文为您介绍Hadoop数据迁移至MaxCompute的两种迁移方案,您可以根据实际情况选择。迁移链路一 专线场景下,支持通过MMA迁移Hive数据至MaxCompute。迁移方案如下图所示。迁移链路二 无专线场景下,支持通过闪电立方迁移...

通过DataWorks将Hadoop数据同步到阿里云ES

新增Hadoop数据源。在 数据源列表 页面,单击 新增数据源。在 新增数据源 页面,搜索并选择 HDFS。在 新增HDFS数据源 页面,配置数据源参数。配置详情,请参见 配置HDFS数据源。单击 测试连通性,连通状态显示为 可连通 时,表示连通成功。...

Delta Lake概述

如果需要删除或更新数据,则需要把原始数据清理掉,然后把更新后的数据写入存储。而Delta支持数据的删除或更新数据实时同步,CDC(Change Data Capture):使用Delta merge功能,启动流作业,实时将上游的数据通过merge更新到Delta Lake...

观远BI连接MaxCompute

步骤三:数据连接及更新设置 通过配置数据更新参数,让数据按照需求更新数据,减少数据连接压力。步骤四:确认数据表信息 通过数据确认,可以确认数据以及数据存储地址。步骤五:使用观远BI查询及分析数据 在观远BI访问MaxCompute项目数据...

产品更新动态

2023年4月 发布时间 2023-04-25 功能名称 功能描述 相关文档 支持数据更新——实现卡片内容的动态数据呈现 通过数据库连接方式的数据源,可以设置数据更新频率,手动/周期完成数据内容的更新,目前支持的可更新数据源是:MySQL、ADB MySQL...

应用场景

该应用场景在阿里巴巴内部得到了广泛的应用,例如淘宝订单系统每天有上万个下游业务,通过数据订阅获取订单系统的实时数据更新,触发自身的变更逻辑。横向扩展读能力 传输方式:数据同步 对于有大量读请求的应用场景,单个数据库实例可能...

通过数据订阅实现缓存更新策略

此时,业务需要实现缓存更新策略,保证业务数据更新后,缓存中的数据能够被同步更新。操作步骤 本文以IntelliJ IDEA软件为例,介绍如何运行SDK示例代码来消费订阅数据。下载数据订阅 SDK示例代码文件,然后解压该文件。使用IntelliJ IDEA...

基础饼图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

基础饼图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

弧形柱状图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

Iceberg概述

删除或更新数据 大部分数仓都难以实现较为高效的行级数据删除或更新,通常需要启动离线作业把整个表原始数据读取出来,然后变更数据后,写入到一个原始表。而Iceberg成功把变更的范围从表级别缩小到了文件级别,从而可以通过局部变更来完成...

目标占比饼图

更新时是否从之前位置开始 打开开关,组件数据更新时,从上一个数据的位置开始播放动画;关闭开关,组件数据更新时,从初始位置开始播放动画。数据源面板 字段 说明 aims 预期的目标值。actual 当前的进度值。数据项配置 说明 数据源 组件...

指标对比饼图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标,进入 蓝图 页面。在 图层节点 页签下,添加当前组件至主画布中。查看蓝图...

标注对比饼图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标,进入 蓝图 页面。在 图层节点 页签下,添加当前组件至主画布中。查看蓝图...

目标占比饼图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

在GDB控制台清除实例数据

清除数据大约耗时5s(数据量越多,耗时时间越长),在清除数据过程中建议您不要执行数据更新操作(执行数据更新操作,可能会导致更新的数据被清理)。操作步骤 登录 图数据库控制台。在页面左上角,选择实例所在地域。单击目标实例ID或目标...

指标占比饼图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 此组件没有交互事件。蓝图交互 单击页面左上角的 图标,进入 蓝图 页面。在 图层节点 页签下,添加当前组件至主画布中。查看蓝图...

指标对比饼图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

玫瑰图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

指标占比饼图

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

标注对比饼图(v3.0及以上版本)

取消选中后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和回调ID事件来触发请求更新数据。数据源 单击 配置数据源,可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果,详情请参见 ...

多维度饼图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时:打开开关,开启组件交互功能。当单击多维度饼图的扇形时,会触发数据请求,抛出临时变量,动态加载不同扇形的数据...

带图饼图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 当点击数据项时:打开开关,开启组件交互功能。当单击带图饼图的扇形时,会触发数据请求,抛出临时变量,动态加载不同扇形的数据。...

JindoData概述

支持面向云时代的大数据Hadoop SDK和HDFS接口,内置优化访问阿里云OSS,较Hadoop社区版本性能大幅提升。同时支持JindoFS存储系统和服务、JindoFSx存储加速系统,支持多云对象存储。支持JindoShell CLI。JindoData除了支持HDFS Shell命令,...

Echarts 桑基图

清除后则不会自动更新,需要手动刷新页面,或通过蓝图编辑器和全局变量事件来触发请求更新数据。高级面板 交互 说明 当点击数据项时 打开开关,开启组件交互功能。当单击选中某个数据项时抛出回调值,默认抛出数据中的 x、y 和 s 字段。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
阿里邮箱 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用