教程概述
本文为您介绍当需要通过DataV展示海量数据的分析结果时，如何使用DataWorks的数据服务开发数据API，并快速在DataV中调用API，最终将来自MaxCompute的数据成果展示在DataV大屏中，数据开发到数据服务再到数据分析展现一气呵成。注意 本案例...
Pandas API支持
MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据处理工作，本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...
操作流程
数据服务API：数据API是一种由云计算资源中的数据通过参数配置生成API的API类型，生成API后可以方便后续调用，减少资源操作成本。三方API：统一服务支持创建第三方平台提供的API，通过生成API可以方便后续调用，减少资源操作成本。数据上报...
创建AnalyticDB for PostgreSQL数据源
基于AnalyticDB for PostgreSQL数据源创建数据服务API，推荐使用独享数据服务资源组，详情请参见 新增和使用独享数据服务资源组。操作前准备：权限说明与配置 使用RAM用户（即子账号）或 RAM角色 创建数据源，需拥有如下任意权限：仅拥有 ...
常见问题
MaxCompute作为大数据平台，对业务数据是否有好的监控手段？MaxCompute的项目发挥什么作用？如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret？现有账号的AccessKey被禁用，创建一个新的AccessKey，会对之前AccessKey创建的周期性...
创建AnalyticDB for MySQL3.0数据源
基于AnalyticDB for MySQL3.0数据源创建数据服务API，推荐使用独享数据服务资源组，详情请参见 新增和使用独享数据服务资源组。操作前准备：权限说明与配置 使用RAM用户（即子账号）或 RAM角色 创建数据源，需拥有如下任意权限：仅拥有 ...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
数据服务概述
DataWorks数据服务模块是一个灵活轻量、安全稳定的数据API构建平台，作为数据库和数据应用之间的“桥梁”，DataWorks数据服务旨在为个人、团队和企业提供全面的数据服务和共享能力，帮助用户统一管理面向内外部的API服务。例如，您可以将...
数据传输费用（按时计费）
类型 公共云售价 金融云售价 说明 按时传输数据服务 0.16元/Slot/小时 0.304元/Slot/小时 如果一天使用时长超过16小时，建议直接购买包年包月预留并发数。相关文档 如果您希望了解MaxCompute中数据下载的计费规则，请参见 数据传输费用...
创建Hologres数据源
Hologres数据源创建完成后，可用于进行数据同步、Hologres计算任务开发与调度、生成API提供数据服务等应用场景中，各应用场景需要分别使用DataWorks的数据集成资源组、调度资源组、数据服务资源组。您需要根据数据源的应用场景提前准备好...
新零售：杭州数云信息技术有限公司
所属行业：新零售 网站地址：数云信息技术有限公司 公司介绍 杭州数云信息技术有限公司成立于2011年，伴随着电子商务、大数据应用和零售企业互联网化的趋势快速发展，目前已成为国内领先的数据化营销软件产品和服务提供商。数云致力于为...
数据分析作业
MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库，支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业，推荐您使用SQL查询或DataWorks的临时查询等工具，高效便捷地完成数据分析...
添加DataV数据代理服务
本文档介绍在DataV中添加DataV数据代理服务数据源的方法，以及相关参数配置说明。使用DataV数据代理服务，您无需暴露数据库的公网IP，就可以连接自建的数据库，提高数据安全性。前提条件 已准备好待添加的DataV数据代理服务数据源。操作...
添加DataV数据代理服务
本文档介绍在DataV中添加DataV数据代理服务数据源的方法，以及相关参数配置说明。使用DataV数据代理服务，您无需暴露数据库的公网IP，就可以连接自建的数据库，提高数据安全性。前提条件 已准备好待添加的DataV数据代理服务数据源。操作...
公交出行：启迪公交
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...
RDS术语
A AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
MaxFrame概述
您可以用更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析以及科学计算、ML/AI开发等工作。本文为您介绍MaxFrame背景信息、功能介绍及使用场景。版本说明 当前MaxCompute MaxFrame功能...
创建并管理数据源
数据服务API（调用、发布等）数据服务编排 更换数据服务API数据源。数据分析 中 导致相关任务查询失败。通过 数据分析 执行的查询任务。更换SQL查询数据源。数据质量 中 导致相关任务检查异常。已配置数据质量监控规则的任务，详情请参见 ...
客户案例
友盟+客户简介 友盟+是独立的第三方全域数据智能服务商，基于技术与算法能力，结合全域数据资源，挖掘标签及分析指标，帮助企业实现深度用户洞察、实时业务决策和持续业务增长。客户诉求 帮助企业和开发者解决数据系统独立，无法融合分析的...
使用指南
账本数据服务返回数据为 JSON 格式，具体格式参考账本数据结构部分。合约开发请参考 开发指南。合约消息推送开发流程 用户智能合约使用合约消息推送服务API接口，开发流程如下：在 BaaS 平台上获取消息合约名称。获取合约消息推送 API 接口...
创建MaxCompute数据源
MaxCompute数据源创建完成后，可用于进行数据同步、计算任务开发与调度、生成API提供数据服务等应用场景，各场景需分别使用DataWorks的数据集成资源组、调度资源组、数据服务资源组。您需根据应用场景提前准备对应的资源组并完成配置，在...
RDS术语
AliPG 阿里云支持一系列兼容PostgreSQL的云数据库服务产品，这些云数据库服务采用统一的数据库内核（简称AliPG），AliPG兼容PostgreSQL开源数据库，于2015年正式商用，支持PostgreSQL主流大版本，已稳定运行多年，支撑了大量阿里巴巴集团...
功能发布记录（2024年）
2024.2.21 所有地域 所有DataWorks用户 DataWorks On CDP/CDH使用说明 数据服务支持实例模式的StarRocks数据源 开通E-MapReduce Serverless StarRocks集群后，您可在DataWorks中通过实例模式新增StarRocks数据源，DataWorks数据服务支持...
项目分配与安全
在为企业级大数据平台创建项目时，建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目，对于ADS层的数据，按照应用的粒度建立项目。项目分配 在本教程中，建议参考下图建立您的MaxCompute项目，图中的每一个方块代表一个项目。...
2024年
操作审计事件数据迁移至MaxCompute 2024-03-26 新增Pandas API 新说明 MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据...
集成与开发概览
您可以通过流批一体的数据集成对在线数据进行入仓、加工处理，通过数据开发模块对数仓数据进行分层开发，之后结合数据服务和可视化能力对外提供数据使用和分析服务。您也可以将这些功能作为基础能力集成到您自己的数据平台中使用，建设属于...
运营
API资产管理：支持对数据服务API、三方API、上报API、数据更新API进行编目，并提供查询、公开、隐藏等功能。指标资产管理：支持对指标资产进行编目，并提供查询、公开、隐藏等功能。业务资产管理：支持对空间服务资产进行编目，并提供查询...
功能简介
API资产管理：支持对数据服务API、三方API、上报API、数据更新API资产进行编目，并提供查询、公开、隐藏等功能。指标资产管理：支持对指标资产进行编目，并提供查询、公开、隐藏等功能。全局配置管理：提供自定义目录配置功能，支持设置...
功能简介
API资产管理：支持对数据服务API、三方API、上报API、数据更新API资产进行编目，并提供查询、公开、隐藏等功能。指标资产管理：支持对指标资产进行编目，并提供查询、公开、隐藏等功能。全局配置管理：提供自定义目录配置功能，支持设置...
外部表概述
但这两种方法都有不足之处：第一种方法需要在MaxCompute系统外部做一次中转，如果OSS数据量太大，还需要考虑如何并发来加速，无法充分利用MaxCompute的大规模计算能力。第二种方法通常需要申请UDF网络访问权限，还需要开发者自己控制作业...
S3M BIM
interative_url S3M BIM的数据服务URL，如/realspace/services/rest/data。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了S3M BIM数据内容。在场景编辑器内配置S3M BIM的数据面板时，您还可以使用 空间...
S3M BIM
interactive_url S3M BIM的数据服务URL，如/realspace/services/rest/data。配置项 说明 受控模式 打开开关，组件初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法发起请求数据；关闭开关，可以使用自动更新请求数据。开关默认...
S3M管网
interabtive_url S3M管网的数据服务URL，如/realspace/services/rest/data。配置项 说明 受控模式 打开开关，组件初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法发起请求数据；关闭开关，可以使用自动更新请求数据。开关默认...
S3M倾斜摄影
interabtive_url S3M倾斜摄影的数据服务URL，如/realspace/services/rest/data。配置项 说明 受控模式 打开开关，组件初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法发起请求数据；关闭开关，可以使用自动更新请求数据。开关...
S3M倾斜摄影
interabtive_url S3M倾斜摄影的数据服务URL，如/realspace/services/rest/data。如果您在创建三维城市构建器项目时，使用了 空间数据项目 模式，并且项目内包含了S3M倾斜摄影数据内容。在场景编辑器内配置S3M倾斜摄影的数据面板时，您还...
添加区块链服务数据源
本文档为您介绍在DataV中添加区块链服务数据源的方法，以及相关参数配置说明。使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好...
添加区块链服务数据源
本文档为您介绍在DataV中添加区块链服务数据源的方法，以及相关参数配置说明。使用阿里云区块链服务（Blockchain as a Service，简称BaaS），您可以通过REST API调用智能合约，查询链上信息，也可以查询区块及交易信息。前提条件 已准备好...
发布API
登录 DataWorks控制台，单击左侧导航栏的 数据服务，在下拉框中选择对应工作空间后单击 进入数据服务。在 服务开发 页面的API列表中，双击相应的API名称，进入API编辑页面后单击右上方的 提交。说明 仅完成测试的API可进行提交操作，如果还...
数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
MapReduce
自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐：用户单击（CTR）和购买行为（CVR）预测。MapReduce流程说明 MapReduce处理数据过程主要分成Map和Reduce两个阶段。首先...
- 产品推荐
- 这些文档可能帮助您