数据上云场景
使用DataWorks结合DataX进行Hadoop数据迁移的示例请参见 Hadoop数据迁移新手教程，或参见视频教程 Hadoop数据迁移到MaxCompute最佳实践。Sqoop执行时，会在原来的Hadoop集群上执行MR作业，可以分布式地将数据传输到MaxCompute上，详情请...
自建Hadoop数据迁移到阿里云E-MapReduce
客户在IDC或者公有云环境自建Hadoop集群，数据集中保存在HDFS文件系统用于数据分析任务。...架构图 方案详情 请参见 阿里云自建Hadoop数据迁移到阿里云E-MapReduce。icmsDocProps={'productMethod':'created','language':'zh-CN',};
数据迁移
迁移其它业务平台的业务数据至MaxCompute：迁移Hadoop数据至MaxCompute，详情请参见 迁移Hadoop数据至MaxCompute最佳实践（视频）。数据迁移和脚本迁移遇到的问题及解决方案请参见 迁移自建Hadoop数据至MaxCompute实践。迁移Oracle数据至...
MaxCompute+Hadoop搭建实践
准备Hadoop数据源 创建Hadoop集群，具体操作请参见 开通阿里云EMR服务。进入Hive准备数据。使用Workbench方式登录集群主节点后，在终端界面输入如下命令：[has@emr-header-1 root]$hive-创建库 create database if not exists myhive;切换...
最佳实践概览
通过DataWorks将MaxCompute数据同步至Elasticsearch 通过阿里云Logstash将MaxCompute数据同步至Elasticsearch 通过实时计算处理数据并同步到Elasticsearch 通过DataWorks将Hadoop数据同步至Elasticsearch 存储产品迁移 从Solr集群迁移文档...
异构数据源访问
测试数据集内容如下：1,test1,1,100 2,test2,2,90 操作步骤 在 异构数据源访问 页签，单击 新增数据源 的下拉菜单，选择 Hadoop数据源。在 新增Hadoop数据源页面 页面依次配置 网络&安全组、配置文件、初始化。配置 网络&安全组。参数 说明...
迁移Hadoop文件系统数据至JindoFS
迁移数据 Hadoop FsShell 对于文件较少或者数据量较小的场景，可以直接使用Hadoop的FsShell进行同步：hadoop dfs-cp hdfs:/emr-cluster/README.md jfs:/emr-jfs/hadoop dfs-cp oss:/oss_bucket/README.md jfs:/emr-jfs/DistCp 对于文件较多...
应用场景
本文为您介绍DataV-Card可视分析创作间的典型使用场景及作品展示。运营长图制作 赋能业务人员自助数据分析，仅需上传Excel文件，...支持行业数据挖掘，所见即所得沉淀数据知识，简单几步实现简报搭建。快速分享作品和卡片，充分交流数据见解。
快速使用TPC-DS测试数据集
TPC-DS是一套决策支持系统测试基准，提供99个SQL查询（SQL99或2003），分析数据量大，测试数据与实际商业数据高度相似，同时具有各种业务模型（分析报告型，数据挖掘型等等）。使用DLF数据探索，可以便捷地快速创建TPC-DS数据集，便于用户...
通过DMS访问沙箱实例
后续步骤 DMS支持数据开发、分析、挖掘、可视化等功能：配置任务流：通过一个或多个任务编排而成的任务组，实现数据归档、数据集成、数仓数据开发、数据挖掘等需求。数据服务概览：将DMS上管控的数据以API的形式快速对外输出。数据可视化...
MMA概述
MMA迁移作业方案 本文为您介绍Hadoop数据迁移至MaxCompute的两种迁移方案，您可以根据实际情况选择。迁移链路一 专线场景下，支持通过MMA迁移Hive数据至MaxCompute。迁移方案如下图所示。迁移链路二 无专线场景下，支持通过闪电立方迁移...
通过DataWorks将Hadoop数据同步到阿里云ES
新增Hadoop数据源。在 数据源列表 页面，单击 新增数据源。在 新增数据源 页面，搜索并选择 HDFS。在 新增HDFS数据源 页面，配置数据源参数。配置详情，请参见 配置HDFS数据源。单击 测试连通性，连通状态显示为 可连通 时，表示连通成功。...
MaxFrame概述
处理数据量大、处理逻辑复杂，需要基于MaxCompute海量数据及弹性计算资源、MaxFrame分布式能力进行大规模数据分析、处理及数据挖掘，提高开发效率。面向Data+AI开发，需要依赖第三方或自定义镜像完成数据开发、模型开发等整体流程。支持的...
数据科学计算概述
Scikit-Learn：用于数据分析和数据挖掘任务的算法。为满足用户基于MaxCompute进行大规模数据处理、分析、挖掘及模型训练的需求，MaxCompute提供了一套Python开发生态，让用户通过统一的Python编程接口一站式、高效地完成数据处理、加工及...
可视分析创作间和传统BI软件差异比较
上传数据一键触发可视分析：实现数据挖掘，根据数据特征、可视化效果等智能生成带有见解的“数据卡片”，用户可以直观的根据图文判断数据价值，并且通过图文进一步挖掘特征。预定义的报告 需要行业数据经验专家，搭建数据报表 分析过程需要...
功能简介
洞察是一款自助式数据挖掘分析型，面向业务管理者、运营、业务分析师等人员提供低使用门槛的智能、自动化、全面、精准的数据诊断和分析能力，智能发现数据规律或异常，实现从数据到知识的提取，辅助业务决策。几乎每个业务每天都存在业务...
用户价值
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级...自主挖掘数据的业务价值：通过画像分析、业务模型编辑器，从业务视角更直观地探索数据，更高效的从数据中获取业务价值，并不断丰富客户的标签等数据资产。
概览
功能项 说明 任务编排 通过一个或多个任务编排而成的任务组，实现数据归档、数据集成、数仓数据开发、数据挖掘等需求。数据服务 将DMS上管控的数据以API的形式快速对外输出。数据可视化 提供灵活布局和丰富的自定义样式能力，及大量可视化...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
时空服务介绍
背景信息 越来越多的领域（例如出行、车联网、物联网、自动驾驶、物流、GIS等）都会产生海量的时空轨迹数据，用户对这些时空轨迹数据产生了时空范围查询、地理围栏判断和时空数据挖掘等需求。例如，查找过去一段时间经过某片区域的车辆、...
JindoData概述
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括JindoFS存储系统（原JindoFS Block模式）、...
简介
内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等，结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力，广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘场景。功能介绍 2.0 版本 提供时空几何能力...
IDMapping在离线一体化解决方案
（四）技术实现细节 整个技术方案分为三部分：第一部分是数据梳理和图算法运行，根据数据挖掘相关子图信息，进行离线聚合。目前GraphCompute提供多种经典的图算法功能。社区发现 louvain：可以指定seed高置信度的设备权重，减少它们被合并...
什么是数据管理DMS
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。视频介绍 功能特性 详情信息，请参见 功能概览。为什么选择数据管理DMS 全域数据...
基本概念
该系统兼容开源GeoMesa、GeoServer等生态，内置了高效的时空索引算法、空间拓扑几何算法等，结合 云原生多模数据库 Lindorm 宽表引擎强大的分布式存储能力以及DAL Spark分析平台，可以广泛应用于空间或时空存储、查询、分析和数据挖掘场景...
2022年
查询加速让MaxCompute一个服务同时满足数据准备（ETL）、数据挖掘（机器学习）、数据探索（Ad-hoc）、报表分析等多使用场景需要。通过自动识别短查询作业并加速处理、快速响应查询结果的方式，增强了MaxCompute SQL的整体处理性能，满足...
备份集查询功能概览
同时，DBS还提供查询多个备份集的功能，您可以更好地分析历史备份数据，进行横向对比分析，挖掘数据的价值，操作详情请参见 查询单个备份集、查询多个备份集。费用说明 DBS会调用DLA接口查询目标备份集，该过程中DBS不会产生费用，DLA会...
迁移流程
操作系统发行商维护支持 数据库 MySQL 使用推荐的操作系统版本提供的自带版本 操作系统发行商维护支持 Redis 使用推荐的操作系统版本提供的自带版本 操作系统发行商维护支持 大数据 Hadoop Hadoop 3.3.1 对应社区支持 Spark Spark 3.2 对应...
应用场景
金融风控 传统的金融风控模型，能够汇集各个数据源的属性特征信息，但是比较难挖掘数据源之间的深度关联关系。要深度并且快速的挖掘海量数据的关联特征，使用传统的方法则会面临非常大的技术挑战。通过图表示学习技术，提取知识图谱中的...
视频个性化推荐（协同过滤）
视频交互方式（用户行为事件/event）：“视频有曝光给用户”（expr）、“用户浏览了视频"（click）、“用户点赞了视频“（praise）实施策略 实施策略如下：相似视频挖掘（I2I）：通过用户的视频交互行为数据挖掘视频与视频之间的相关性，您...
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
聚水潭：云原生数据仓库助力企业实现商业洞察
为聚水潭平台用户提供在线分析报表功能，基于财务和经营数据，为用户提供快速经营报表、分析、测算工具系统，实时的数据分析能力支持在线对数据进行任意维度探索，帮助用户挖掘数据价值，洞察业务状态，即时响应业务变化。客户价值 中国...
数据资产管理
通过DMS的数据资产管理功能不仅能使数据资产可视、可用，同时可以确保数据资产的安全性，进而在企业经营过程中帮助企业挖掘数据价值，产生更多数据资产，形成正向循环。操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角...
什么是数据库网关
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库...
什么是数据库网关
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库...
友盟数据分析
U-DOP数据开放平台不仅仅为您提供了U-App的统计明细数据，同时包含了多主题的分析模板和可订阅的数据包，通过任务引导式教您深度挖掘数据中的业务信息。您可以通过阿里云数据湖分析DLA的数据订阅功能对原始明细log数据进行查询和分析。开通...
深度解析Lindorm搜索索引（SearchIndex）特性
可选的索引构建成本 索引可以加速查询，助力业务进一步挖掘数据的价值，但会带来写入成本和存储成本的增加。一方面，Lindorm通过多种高效的压缩算法显著降低索引的存储体积；另一方面，通过提供可选的索引构建方式降低索引构建对写入吞吐的...
内存型
适用场景：数据分析与挖掘 Hadoop、Spark集群以及其他企业大内存需求应用 分布式内存缓存，比如Redis 网站和应用服务器 大型多人在线游戏（MMO）服务器 与操作系统的兼容性说明 更多信息，请参见 Intel实例规格与操作系统兼容性说明。...
（邀测）MaxCompute Notebook使用说明
支持用户通过SQL、PyODPS、Python等进行数据分析、探索，挖掘数据的价值，完成大数据与AI的融合应用开发。本文为您介绍如何使用Notebook功能。版本说明 当前MaxCompute Notebook功能处于邀测阶段，每个租户最多可启动3个Notebook实例，每个...
通用数据开发
数据分析与处理：完成数据的同步后，可以对MaxCompute中的数据进行加工（MaxCompute SQL、MaxCompute MR）、分析与挖掘（数据分析、数据挖掘）等处理，从而发现其价值。数据提取：分析与处理后的结果数据，需要同步导出至业务系统，以供...
- 产品推荐
- 这些文档可能帮助您