导入导出数据

MaxCompute Studio可以将CSV、TSV等格式的本地数据文件导入至MaxCompute表中,也可将MaxCompute表中的数据导出到本地文件。MaxCompute Studio通过Tunnel导入导出数据。前提条件 导入导出数据使用MaxCompute Tunnel,因此要求MaxCompute ...

产品相关问题

典型的应用场景包括金融行业处理、日切处理、余额缓冲记账、政务数据处理等。任务调度支持哪些任务类型?任务调度支持的基本任务类型包括:简单任务、集群任务。此外,任务拓扑编排功能支持将多个任务按执行的顺序编排成一张拓扑图,...

使用须知

如果您拥有一定开发经验 如果您拥有一定的开发经验,了解分布式概念,且希望解决某些无法用SQL实现的数据分析问题,推荐您学习MaxCompute更高级的功能模块。模块 说明 MapReduce MaxCompute提供Java MapReduce编程模型。您可以使用...

功能特性

OSS数据导入 导出至OSS 数据开发与分析 功能集 功能 功能描述 参考文档 数据开发/分析 SQL开发 AnalyticDB for MySQL支持通过DDL、DML、DQL和DCL进行SQL开发。DDL语句 DML操作 DQL操作 DCL操作 Spark作业开发 AnalyticDB for MySQL支持通过...

功能特性

JDBC连接 阿里云产品集成 数据开发 DataWorks DataStudio 基于MaxCompute项目通过DataWorks DataStuido以可视化方式实现全方位的数据开发数据集成、数据服务等功能,支持周期性调度作业。数据开发 DataWorks DataStudio 数据分析 SQL查询...

MySQL生态兼容

本文从SQL语法、事务行为、导入导出等维度总结了兼容性的相关特性。MySQL协议 PolarDB-X 通讯协议兼容MySQL协议,可以使用常见的驱动直接连接到 PolarDB-X 实例,包括JDBC Driver、ODBC Driver、Golang Driver等,并且兼容MySQL SSL、...

迁移工具Holo Shipper

本文为您介绍Holo Shipper工具,此工具是支持将Hologres实例的部分表导入导出的Hologres生态离线备份工具。实现在Hologres之间搬迁表和将表转储到中间存储然后再恢复的功能。背景信息 在数据迁移场景下,Hologres提供生态离线备份工具Holo ...

查看数据导出记录

您可以查看数据导出的记录,并对数据进行下载或删除。本文主要介绍如何查看数据导出记录。前提条件 已进行数据导出操作,具体操作,请参见 相关操作-导出数据。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标,选择 探索。在...

通过数据集成导入导出MongoDB数据

数据集成DataWorks是稳定高效、弹性伸缩的数据同步平台,为阿里云大数据计算引擎(MaxCompute、AnalyticDB和OSS等)提供离线、批量数据的进出通道。本文介绍如何通过数据集成导入导出MongoDB数据。关于通过数据集成导入导出MongoDB数据的...

产品简介

工业组态帮助文档 什么是组态 组态(Configure):包含“配置”、“设定”、“设置”等意思,所以工业组态系统是指不需要编写计算机程序、通过类似“配置”的方式完成工业应用开发的系统。这些应用可用于工厂的制造车间的PMC(生产过程管理...

数据上云工具

开源产品 Sqoop(Tunnel通道系列)Sqoop基于社区Sqoop 1.4.6版本开发,增强了对MaxCompute的支持,可以将数据从MySQL等关系数据导入导出到MaxCompute表中,也可以从HDFS或Hive导入数据到MaxCompute表中。详情请参见 MaxCompute Sqoop。...

如何优化数据导入导出

数据库实际应用场景中经常需要进行数据导入导出,本文将介绍如何使用数据导入导出工具。测试环境 本文档的测试环境要求如下表:环境 参数 PolarDB-X 版本 polarx-kernel_5.4.11-16282307_xcluster-20210805 节点规格 16核64 GB 节点个数 4...

使用Batch Tool工具导入导出数据

本文介绍了通过Batch Tool工具导入导出数据的方法。工具介绍 Batch Tool工具是 PolarDB-X 团队开发的专门为 PolarDB-X 数据库提供数据导入导出服务的工具。Batch Tool工具采用Java语言实现,基于生产者消费者模型并结合分布式数据库特点,...

查看我的导入记录

您可以查看数据导入的记录,包括数据字典、变量映射、资源管理、算子和模型的导入。本文主要介绍如何查看我的导入记录。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标,选择 探索。在页面右上角,单击 图标,选择 我的导入记录...

功能特性

备份恢复 产品生态 功能集 功能 功能描述 参考文档 数据导入导出 HBase数据同步与迁移 支持将HBase中的数据不停机迁移、实时同步至Lindorm宽表引擎。HBase数据迁移 SLS增量导入 通过云原生多模数据库Lindorm控制台将日志服务增量数据导入至...

2021年

新功能 MaxCompute提供湖仓一体方案,该方案可以打破数据湖与数据仓库割裂的体系,并将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合,助力构建数据湖和数据仓库相融合的数据管理平台。MaxCompute湖仓一体概述 2021年2...

功能发布记录

根据领域对象批量生成相关模型 创建和管理结构对象 导入导出限界上下文模型 导出上下文映射或多个限界上下文到文档 优化中心应用 脚手架生成:为常见查询方法增加基于 mybatis plus 的代码实现。代码扫描:增加继承关系的模型扫描和合并。...

原子指标

原子指标用于明确业务的统计口径和计算逻辑,是基于用户的业务活动(即业务过程)创建的,用于统计业务活动中某一业务状况的数值。例如,用户的业务活动为购买,则原子指标就可以指定为支付金额。本文为您介绍如何创建原子指标。前提条件 ...

公告

2024年04月16日-Dataphin新版本发布 Dataphin于2024年04月16日发布V3.14版本,本次升级相较于历史版本:新增Python三方包全局管理功能,一次安装多次引用,提升Python任务开发效率。支持页面水印设置功能,支持自定义页面水印内容及设置...

新功能发布记录

OceanBase 数据库之间的数据迁移 支持 TiDB 数据库至 OceanBase 数据库 MySQL 租户的结构迁移、全量迁移、增量同步、全量校验和反向增量 迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户 支持 PolarDB-X 1.0 数据库至 OceanBase ...

文档修订记录

本文为您介绍DataWorks文档更新的最新动态,基于此您可以及时了解DataWorks的新增特性及功能变更。2024年2月更新记录 时间 特性 类别 描述 产品文档 2024.2.22 新增功能 账单订阅及查询分析 用户中心支持订阅不同类型的账单数据,例如,...

新功能发布记录

通过外表导入至湖仓版 MongoDB数据导入 通过外表导入至湖仓版 通过外表导入OSS数据至湖仓版 表格存储(Tablestore)数据导入 MySQL外表支持指定字符集 创建RDS MySQ外表和自建MySQL外表时,支持通过 charset 属性指定MySQL字符集。...

文档更新动态(2024年)

创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦(DM)数据源 创建TiDB数据源 新建Doris数据源 创建GreenPlum数据数据引入-离线集成-离线单条管道-组件库开发 ...

常见问题

公网Endpoint的带宽非常有限,无法承载高性能的数据导入导出。解决方案:您需要替换为VPC网络的Endpoint。常见原因5:有脏数据。在没有脏数据的情况下,数据以batch方式写入。但是遇到了脏数据,正在写入的batch就会失败,并回退到逐行写入...

创建和查看DataWorks导出任务

迁移助手支持导出周期任务、手动任务、资源、函数、表元数据、数据源、组件、临时查询、数据服务和数据质量等对象,本文为您介绍如何创建和查看导出任务。背景信息 迁移助手支持通过 全量导出、增量导出 和 自选导出 等方式导出任务。不同...

功能更新动态(2024年)

创建数据表质量规则 创建全域数据表质量规则 创建数据源质量规则 创建实时元表规则 创建指标质量规则 批量上传质量规则 数据安全 识别规则新增基于血缘关系自动继承上游分类分级功能,同时结合默认脱敏策略,保障自动继承结果的数据可以...

Tunnel命令常见问题

java.io.IOException:Error writing request body to server 产生原因 这是上传数据到服务器时产生的异常,通常是因为上传过程中的网络连接断开或超时导致的:当您的数据源并非是本地文件,需要从数据库等地方获取时,数据在写入的过程中还...

DataWorks各版本详解

专业版 基于DataWorks标准版,增加更专业的数据安全功能,同时增强数据治理、数据服务的功能,完善的数据开发与运维功能,提供产品化的数据治理、数据安全解决方案。此版本适合中小型企业使用。企业版 基于DataWorks专业版,在该版本上您...

SQL 计划任务

背景信息 OceanBase 开发者中心(OceanBase Developer Center,ODC)支持定时周期性执行用户创建的 SQL 脚本,以满足周期性执行用户所需的数据开发和运维任务,例如周期性执行存储过程、备份和做库表结构同步等。用户在 工单 创建 SQL ...

导入

导入状态:导入并保存:仅导入并保存数据,不生成新的版本 导入并提交:导入数据,并将最新导入数据提交一个新的版本 批量导入仅支持导入.xlsx 格式文件,每次最多可导入30000条数据,并且文件大小不超过10MB。查看导入结果。在 完成 页...

连接方式概述

ODC 支持连接 OceanBase 数据库的 MySQL 租户和 Oracle 租户,同时为数据开发者提供了数据库日常开发操作、WebSQL、SQL 诊断、会话管理和数据导入导出等功能。使用 OceanBase 开发者中心连接 OceanBase 租户的具体操作示例请参见 通过 ...

2023年

本文为您介绍了MaxCompute 2023年内容更新的最新动态,基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更,提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2023年12月更新记录 时间 特性 类别 ...

连接方式概述

ODC 支持连接 OceanBase 数据库的 MySQL 租户和 Oracle 租户,同时为数据开发者提供了数据库日常开发操作、WebSQL、SQL 诊断、会话管理和数据导入导出等功能。使用 OceanBase 开发者中心连接 OceanBase 租户的具体操作示例请参见 通过 ...

功能特性

执行阶段:客户端接收到通知后拉取数据进行处理处理完后继续拉取新的数据,直到数据处理完成。拓扑任务 一种特殊的任务,由许多通过事件触发的任务组成的集合。任务拓扑本身可以通过 CRON 表达式或者事件触发,但其包含的子任务必须是...

DataV地图边界和自定义弹窗介绍

边界数据说明 基础平面地图 组件所使用的边界数据基于GeoJSON的数据格式,GeoJSON是一种对各种地理数据结构进行编码的格式,使用JavaScript对象表示法的地理空间信息数据交换格式。GeoJSON对象可以表示几何、特征或者特征集合,支持的...

使用OSS外表高速导出数据到OSS

云原生数据仓库AnalyticDB PostgreSQL版 支持通过OSS外部表(即gpossext功能),将数据并行导出到阿里云对象存储OSS,并支持通过GZIP进行OSS外部表文件压缩,大量节省存储空间及成本。功能介绍 目前gpossext支持读写TEXT、CSV格式的文件...

表格问答管理后台操作手册

5、表格管理 此页面支持批量导入表格功能,也可以对已有表格进行下载、编辑、配置、删除操作 5.1、批量导入表格 点击“批量导入表格”,在弹出页面进行导入操作。表格格式有严格要求,请点击“下载文件样例”,查看样例表格中的详细说明。...

通过向导模式配置离线同步任务

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。开发流程 步骤一:新建离线同步节点 步骤二:配置同步网络链接 步骤三:配置数据来源与去向 步骤四:配置字段映射关系 ...

功能特性

管理数据 导入导出数据 ZooKeeper提供通过快照导入数据,同时支持导出快照和事务日志文件。数据导入导出 重置数据 清空并初始化ZooKeeper实例数据。重置ZooKeeper集群数据 查询数据轨迹 根据Path查询Znode的变更记录和推送信息,或根据...

通过DataWorks导入数据

DataWorks提供了可视化的数据导入方式,相对于通过外表导入,DataWorks导入的方式更为轻量化,适合数据量相对较数据导入场景。本文介绍如何通过DataWorks将RDS SQL Server数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
全局事务服务 (文档停止维护) 物联网边缘计算 Serverless 应用引擎 应用实时监控服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用