使用GdbLoader脚本导入数据文件
已将数据文件上传至Bucket中，上传方法请参见 使用OSS控制台上传数据文件 或 使用ossutil工具上传数据文件。已在客户端安装Python，具体请参见 安装Python。操作步骤 在客户端下载并安装GdbLoader.py工具。执行如下命令，下载图数据库GDB...
创建并分享可视化作品
选择 本地上传，单击下图红框部分上传数据集后，单击 打开。等待上传成功后，单击 确定。设置 数据集名称 后，再次单击 确定。筛选数据集数据。在弹窗中单击 查看详情，进入数据详情页面。在数据列表中选择 游戏、年份、分类、发行商 和 ...
减灾与应急时空解决方案与案例
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
外部表概述
您可以通过Tunnel直接上传数据到MaxCompute内部表，或者是通过OSS Python SDK上传到OSS后，在MaxCompute使用外部表做映射。您可以通过DataWorks配合MaxCompute对外部表进行可视化的创建、搜索、查询、配置、加工和分析。详情请参见 外部表...
数据传输与迁移概述
MaxCompute提供多种渠道，以便您从业务系统或外部数据源写入数据到MaxCompute，或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表（湖仓一体）JDBC渠道 场景数据写入MaxCompute 离线数据批量写入（数据...
表设计最佳实践
使用MaxCompute Tunnel SDK上传数据时，如果创建了Session却没有上传数据，而是直接Commit，则会产生大量空目录（在服务侧等同于小文件）。使用MaxCompute客户端执行Tunnel命令上传时，将本地大文件切分过小会导致上传后产生大量小文件。...
基于OSS外表的单表多文件查询
上传数据文件。文件拆分后，您需要手动将所有的CSV文件上传到OSS上的同一路径下。此处以使用ossutil命令行工具批量上传CSV文件为例，关于ossutil命令行工具更多内容请参见 ossutil。ossutil64 cp localfolder/oss:/examplebucket/desfolder...
全量备份数据上云（SQL Server 2008 R2云盘、2012及...
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
增量备份数据上云（SQL Server 2008 R2云盘、2012及...
以本地文件为例，说明如何通过File.length()获取上传数据的大小。final File sampleFile=new File(filePath);long fileLength=sampleFile.length();int partCount=(int)(fileLength/partSize);if(fileLength%partSize!0){ partCount+;}/遍...
数据分析概述
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
概述
物理日志备份 特点 物理日志备份通过实时并行上传数据库Redo日志文件到OSS来达到备份的目的。日志备份默认开启，最短保留时间为3天，最长保留时间为7300天。您也可以通过开启 删除集群前长期保留 功能长期保存。说明 日志备份默认开启，...
Tunnel命令常见问题
java.io.IOException:Error writing request body to server 产生原因 这是上传数据到服务器时产生的异常，通常是因为上传过程中的网络连接断开或超时导致的：当您的数据源并非是本地文件，需要从数据库等地方获取时，数据在写入的过程中还...
项目编辑器页面管理
如果此处无待添加的数据，请参见 上传数据 章节上传所需数据文件。在映射字段属性页面，单击属性下拉框，选择映射数据样例中某个已有的字段内容，配置映射属性字段，完成后单击 下一步 即可进入预览数据页面。在预览数据页面查看数据解析...
功能特性
功能集 功能 功能描述 参考文档 上传数据 Tunnel（离线）MaxCompute的客户端（odpscmd）、Studio等数据上传下载工具均通过Tunnel功能实现数据的上传与下载。Tunnel（离线）Kafka（离线与实时）支持将消息队列Kafka版数据导入MaxCompute。...
项目编辑器页面管理
如果此处无待添加的数据，请参见 上传数据 章节上传所需数据文件。在映射字段属性页面，单击属性下拉框，选择映射数据样例中某个已有的字段内容，配置映射属性字段，完成后单击 下一步 即可进入预览数据页面。在预览数据页面查看数据解析...
管理数据库资产
如果您已为要审计的数据库配置了证书，您需要在此参数处上传数据库正在使用的证书或私钥文件，否则数据库审计服务将无法审计该数据库加密后的访问流量。如果您的数据库未配置证书，则您无需配置该参数。您可以通过以下方式导入证书或私钥...
导入接口介绍
已将数据文件上传至Bucket中，上传方法请参见 使用OSS控制台上传数据文件 或 使用ossutil工具上传。添加导入任务 使用HTTP POST请求发送至<gdb-endpoint>:<port>/loader 终端，将数据从OSS的Bucket导入至图数据库GDB实例中。注意 MIME类型...
迁移服务（MMA）
步骤一：安装UDTF 使用MaxCompute迁移功能时，需要在Hive服务器上安装UDTF（Unified Data Transfer Service）并自定义Hive UDTF函数，利用Hive UDTF函数来获取、转换、上传数据到MaxCompute，以实现复杂数据的迁移。关于Hive UDTF详情，请...
创建同步任务
已准备好结果表 result_table，详情请参见 建表并上传数据。已创建虚拟节点（start）和ODPS SQL节点（insert_data，详情请参见 创建业务流程。背景信息 在DataWorks中，通常通过数据集成功能，定期导入系统中产生的业务数据至工作区。SQL...
数据上传下载成本优化
本文为您介绍如何优化数据上传和下载的同步成本。尽可能使用经典网络和VPC网络 您可以使用内部网络（经典网络或VPC）实现零成本数据导入和导出。网络设置详情请参见 配置Endpoint。合理利用ECS的公共下载资源 如果您的ECS使用包月资源，...
视频专区
本文档汇总了DataV产品的介绍和操作视频。DataV数据可视化 7.0 如何使用模板快速创建第一个大屏 如何配置可视化组件样式和数据 ...DataV-Card可视分析创作间 数据上传与探查 可视分析及卡片的保存 更多视频教程请参见 DataV-Card视频教程。
概述
配置条件分支节点 DLA一键数仓 基于DLA一键建仓的功能，将数据库的数据上传到OSS，建立数据仓库。一键建仓 DBS备份 通过DBS将数据库的数据备份到DBS提供的OSS中。DBS EC远程命令 基于ECS云助手在远程ECS上执行Shell、PowerShell、Bat命令或...
初始化小于等于2 TiB数据盘（Linux）
一块全新的数据盘挂载到ECS实例后，还不能直接存储数据，通常您需要在数据盘进行分区、文件系统格式化、挂载文件系统等初始化操作后，才能供系统读写数据。本文介绍如何在Linux系统中初始化一块小于等于2 TiB的数据盘。前提条件 数据盘已...
概述
MaxCompute提供的 数据上传和下载工具 是基于Tunnel SDK编写的。本文将为您介绍Tunnel SDK的主要接口，不同版本的SDK在使用上有所差别，准确信息以 SDK Java Doc 为准。主要接口 描述 TableTunnel 访问MaxCompute Tunnel服务的入口类。您...
概述
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
配置并管理实时同步任务
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。创建实时同步任务 创建整库实时同步节点。配置...
2019年
概述 通过Tunnel迁移日志数据至MaxCompute 通过DataHub迁移日志数据至MaxCompute 通过DataWorks数据集成迁移日志数据至MaxCompute 通过日志服务迁移日志数据至MaxCompute 2019-12-25 新增开源地理空间UDF。新功能 您可以将开源地理空间UDF...
一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
一键实时同步至MaxCompute
数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute引擎同步数据通道SLA评估数据同步业务技术选型。一键实时同步至MaxCompute，按实例模式同步时...
支持的云服务
数据集成 MaxCompute可以通过数据集成功能加载不同数据源（例如MySQL数据库）的数据，也可以通过数据集成把MaxCompute的数据导出到各种业务数据库。数据集成功能已集成在DataWorks上，您可以直接在DataWorks上配置MaxCompute数据源并读写...
表设计规范
表数据存储规范 按数据层规划数据的生命周期：源表ODS层：每天从业务系统同步过来的数据，全部保留，生命周期定义永久保存。当下游数据受损时，可以从ODS恢复数据。若ODS每天同步过来的是全量表，则可以通过全表拉链的方式来压缩存储。数据...
常见问题
更换操作系统时token不能为空 域名解析到多个IP导致部分地区网站无法打开 第三方浏览器访问虚拟主机临时域名出现样式错误问题 如何恢复备份的云虚拟主机网站数据和数据库数据 如何下载网站的访问日志 访问云虚拟主机站点显示文件名 主机...
SQL查询
数据源白名单访问控制 当使用数据分析操作MaxCompute表数据时，如果MaxCompute项目空间开启了白名单访问控制，数据分析的相关服务（例如，费用计算、数据下载、维表使用、数据上传等）可能会出现报错。为保证DataWorks数据分析服务能顺利...
上传网站文件到Linux操作系统云虚拟主机
本文以Linux操作系统独享虚拟主机标准版为例，介绍上传网站文件的方法。前提条件 已安装FTP客户端。说明 建议您使用FileZilla工具，具体操作，请参见 使用FileZilla管理文件。背景信息 命名网站文件时应注意以下事项：建议使用字母（区分大...
Linux系统云虚拟主机通过网站后台上传文件异常
问题描述 使用Linux系统云虚拟主机上传网站程序之后，访问网站发现页面排版有问题，本文以织梦CMS程序为例进行介绍，如下图所示，CSS样式文件加载失败，部分图片不显示。问题原因 加载的CSS文件和图片在上传过程中损坏，或者上传的文件本身...
常见问题
Linux系统的ECS中没有禁ping却ping不通的解决方法 当IIS搭建的网站显示“500-内部服务器错误”时如何查看真实报错信息 远程连接问题 无法远程连接Windows实例的处理方法 无法通过SSH远程登录Linux实例时的排查指引 如何查看和修改Windows...
功能特性
获取和配置数据库信息 登录数据库 您可以通过数据管理DMS Web版本或者DMS客户端等方式登录数据库，快捷地管理云虚拟主机数据库，让您的网站数据更安全、管理更高效、数据价值更清晰。通过数据管理DMS Web版本登录数据库 通过数据管理DMS...
最佳实践概览
轻量应用服务器提供了部分最佳实践，包括搭建环境、搭建网站、数据传输、迁移服务器以及高可用架构等。您可以根据实际需求，参考相应文档完成服务器的搭建。搭建环境 阿里云轻量应用服务器提供了多种镜像，您可以通过应用镜像快速部署应用...
网站调测样例
在云虚拟主机上成功搭建网站后，如果您想对网站的部分功能进行调试，阿里云为您提供了部分网站调测样例，方便您调试程序时参考。注意事项 本样例适用于有一定代码基础的开发者，或者想初步了解程序功能的爱好者。如果您想了解更多程序功能...
管理控制台常见问题
两种系统下的换行符不同，从而导致从Linux操作系统云虚拟主机下载的网站日志，在Windows操作系统本地主机上打开后没有换行，网站日志数据整行呈现或出现乱码，影响日志查看和分析。解决方法：本操作仅以EditPlus文本编辑器为例，您可以根据...
- 产品推荐
- 这些文档可能帮助您