主机间（同一账号）迁移网站
网站数据 在 网站备份 页签下，找到已备份好的网站备份（例如back_net_new），单击对应 操作 列的 下载。在弹出的对话框中，单击 下载，然后单击 确认。备份数据下载成功后，默认会自动保存在本地主机的 下载 目录。将网站备份文件夹（例如...
使用Python依赖
背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 说明 VVR 4.x仅支持3.7版本的Python虚拟环境，VVR 6.x及以上的版本无此限制，...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
性能测试指南
本文以On Time和Star Schema数据集为例，介绍如何将测试数据集导入云数据库ClickHouse并完成性能测试。准备工作 已创建云数据库ClickHouse集群。如何创建，请参见 新建集群。已创建数据库账号。如何创建，请参见 创建账号。已准备一台Linux...
文档修订记录
Tablestore数据源 Tablestore Stream数据源 2023.4.7 新增功能 数据集成 DataWorks数据集成支持使用IoT Reader插件读取物联网企业实例数据服务中提供的系统表、产品表、自定义存储表。IoT数据源 2023年3月更新记录 时间 特性 类别 描述 ...
Cassandra数据类型
UUID的数据类似于ab7c46ac-c194-4c71-bb03-0f64986f3daa，uuid类型通常用作代理键，可以单独使用，也可以与其他值组合使用。由于UUID的长度有限，因此并不能绝对保证它们是唯一的。我们可以在CQL中使用uuid()获取Type 4 UUID。timeuuid：这...
功能更新动态（2023年）
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
数据上云场景
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。
需求分析
ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
需求分析
ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户网站访问记录数据分别同步至...
创建同步ElasticSearch
脏数据 ES6 f1 v2 {f1:v1,f4:v4,f5:v5,f6:v6} ES7-v2 {f1:v1,f4:v4,f5:v5,f6:v6} 数据=v1,null,v3,v4,v5,v6 ES版本 type id data ES5-id属性列为null，脏数据 ES6-id属性列为null，脏数据 ES7-id属性列为null，脏数据 数据=v1,v2,null,v4,v...
性能测试
以时空轨迹数据为7.6 GB为例，写入耗时的测试结果如下：数据库 写入耗时 云原生多模数据库 Lindorm Ganos引擎 7分钟 开源GeoMesa（HBase）13分钟 云数据库MongoDB分片集群 34分钟 创建时空索引后的时空数据存储空间占用情况 创建时空主键...
AnalyticDB PostgreSQL版7.0版本
AnalyticDB PostgreSQL版 基于PostgreSQL 12打造了云原生数据库仓库 AnalyticDB PostgreSQL版 7.0版本，7.0版本无论在功能、性能、企业级能力或者安全方面都更具有竞争力。注意事项 AnalyticDB PostgreSQL版 目前仅 存储弹性模式 实例支持7...
DescribeDataAssets-查询数据资产敏感信息
取值：1：未识别到敏感数据，无风险 2：1 级敏感数据风险 3：2 级敏感数据风险 4：3 级敏感数据风险 5：4 级敏感数据风险 6：5 级敏感数据风险 7：6 级敏感数据风险 8：7 级敏感数据风险 9：8 级敏感数据风险 10：9 级敏感数据风险 11：10 ...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
添加HDFS数据源
添加HDFS数据源用于实现 云原生多模数据库 Lindorm 宽表引擎能够读取HDFS的数据，如果您要将HDFS数据导入到 云原生多模数据库 Lindorm 宽表中，需要先添加HDFS数据源。本文介绍如何添加HDFS数据源。前提条件 已购买LTS数据同步服务，具体...
入门概述
Web 版 OceanBase 开发者中心（OceanBase Developer Center，ODC）在提供工具能力的同时还提供了管控、协同...7 新建数据库变更 对数据库中的数据进行变更。 完成上述步骤后，即可开始通过 Web 版 ODC 开发和管理您的 OceanBase 数据库。
资产大盘
数据管理DMS 的资产大盘功能支持T+1离线汇总当前 DMS 租户下的所有实例、数据库、表数据，并图形化展示数据资产的引擎、环境、地域、来源、类目的分布占比及数量趋势。本文介绍如何使用DMS的资产大盘。注意事项 DMS 资产大盘的 表分布占比 ...
轨迹层
数据分级：根据数据中的value字段值大小划分（自然分割）成2~7个数据大小级别，解决value值相差太大导致的渲染问题。轨迹粗细（从细到粗）：单击右侧的 或 图标，添加或删除一个类型。单击 或 图标配置多个轨迹粗细类型的排列样式。单击 ...
散点层
数据分级：根据数据中的value字段值大小划分（自然分割）成2~7个数据大小级别，解决value值相差太大导致的渲染问题。散点贴图：散点层贴图样式，可黏贴贴图URL链接获取。散点大小（从小到大）：单击右侧的 或 图标，添加或删除一个散点大小...
轨迹层
数据分级：根据数据中的 value 字段值大小划分（自然分割）成2~7个数据大小级别，解决 value 值相差太大导致的渲染问题。轨迹粗细（从细到粗）：单击右侧的 或 图标，添加或删除一个类型。单击 或 图标配置多个轨迹粗细类型的排列样式。...
散点层
数据分级：根据数据中的 value 字段值大小划分（自然分割）成2~7个数据大小级别，解决 value 值相差太大导致的渲染问题。散点贴图：散点层贴图样式，可黏贴贴图URL链接获取。散点大小（从小到大）：单击右侧的 或 图标，添加或删除一个散点...
互联网、电商行业离线大数据分析
应用场景 电商网站数据看板。全国、全球业务的态势分析。互联网、金融行业的风险数据监控。方案介绍 实现互联网、电商行业离线大数据分析的流程如下：同步用户订单等数据至MaxCompute。通过DataWorks对原始数据进行处理，并形成开放API。以...
使用函数计算实现多个文件的打包下载
实验数据 场景 文件数 压缩前总大小 压缩后总大小 执行时间 1 7 1.2 MB 1.16 MB 0.4s 2 57 1.06 GB 0.91 GB 63s 您可以通过以上表格获取以下两个信息：场景1说明使用 函数计算 实现多个文件的下载，可以减少文件的存储空间。场景2说明使用 ...
服务条款
3.1.7 您承诺，在使用 云数据库Memcache版 服务的过程中：3.1.7.1 不进行任何破坏或试图破坏网络安全的行为（包括但不限于钓鱼，黑客，网络诈骗，网站或空间中含有或涉嫌散播：病毒、木马、恶意代码，及通过虚拟服务器对其他网站、服务器...
从Oracle迁移应用至阿里云PolarDB全流程指南
数据库和应用采集 登录阿里云官方网站，在 ADAM官网 下载 数据库采集器 和 应用采集器，按照 数据库采集 进行Oracle数据库采集，应用采集 进行Oracle应用采集，生成相应的zip格式的数据压缩包，便于后续上传到阿里云ADAM官网进行分析使用。...
使用SDK示例代码消费订阅数据
重要 您可以在Maven网站中获取最新的数据订阅SDK版本，详情请参见 数据订阅SDK的Maven页面。打开IntelliJ IDEA软件，然后单击 Open or Import。在弹出的对话框中，定位至SDK示例代码解压的目录，依次展开文件夹，找到项目对象模型文件：pom...
支持识别的OSS文件类型
158 Gzip压缩文件 75 SQLite3数据库文件 159 XZ压缩文件 76 Redis数据库文件 160 Zstandard压缩文件 77 SQLServer数据库文件 161 Zstandard字典文件 78 Berkeley数据库文件 162 Zip压缩文件 79 DBase数据库文件 163 Zlib压缩文件 80 GNU ...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
ZIP包解压
当您需要批量上传文件、按特定目录结构上传文件、上传完整的文件或对文件快速进行资源分发时，可以配置解压规则，上传ZIP文件到OSS指定路径，触发函数计算自动解压，并将解压后内容保存回OSS。前提条件 已开通函数计算服务。您可以在函数...
MAP_ZIP_WITH
对输入的两个MAP对象 input1 和 input2 进行合并得到一个新MAP对象。新MAP的Key是两个MAP的Key的并集...相关函数 MAP_ZIP_WITH函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
快速入门
数据准备 本文以 movielens 100K 进行举例，测试数据已存放在MaxCompute公开项目BIGDATA_PUBLIC_DATASET下的 data_science Schema中，您可直接进行使用，表信息如下：maxframe_ml_100k_movie（电影相关数据）maxframe_ml_100k_users（用户...
配置数据质量监控
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息（ods_user_info_d）同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
快速入门
row.sepallength+row.sepalwidth,axis=1,reduce=True,types='float').rename('sepaladd').head(3))sepaladd 0 7.9 1 7.9 2 7.7#print(iris.apply(handle,axis=1).head(5))iris_add iris_sub 0 1.9 7.9 1 1.2 1.6 2 1.5 7.9 3 1.1 1.5 4 1.5...
InstallUserPlugins
示例如下：[{"name":"pluginName1.zip"},{"name":"pluginName2.zip"}]返回数据 名称 类型 示例值 描述 RequestId String 5FFD9ED4-C2EC-4E89-B22B-1ACB6F*请求ID。Result List["pluginName1.zip","pluginName2.zip"]请求安装的插件列表。...
导入数据
unzip ontime-data(1).zip 连接 云数据库ClickHouse 集群并导入数据到 云数据库ClickHouse。在clickhouse-client客户端的安装目录下执行如下命令。clickhouse-client-host=<host>-port=<port>-user=<user>-password=<password>-query=...
如何配置跨域数据
什么是跨域数据配置 用户A所包含的数据来自其自己的网站以及用户B的网站。自己网站上的数据可以通过类似 http://userA.com/page1 这样的接口进行访问。用户B提供 http://userB.com/page2 数据接口，但是当用户A发送一个Javascript ajax请求...
离线任务（JAVA）zip包制作指南
说明：JAVA离线任务应用支持JAVA7和8两个版本。JAVA 离线任务应用zip包的规范如下：zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下 xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、start_flow.sh两个文件...
- 产品推荐
- 这些文档可能帮助您