OSS数据离线同步至MaxCompute
新建离线同步任务 在数据开发（DataStudio）页面的某个业务流程下，新建一个离线同步节点，根据界面提示配置节点的路径、名称等信息，操作详情请参见 通过向导模式配置离线同步任务。配置数据来源：OSS侧参数 配置离线同步节点的数据来源...
OSS数据离线同步至MaxCompute
新建离线同步任务 在数据开发（DataStudio）页面的某个业务流程下，新建一个离线同步节点，根据界面提示配置节点的路径、名称等信息，操作详情请参见 通过向导模式配置离线同步任务。配置数据来源：OSS侧参数 配置离线同步节点的数据来源...
MaxCompute数据离线同步至ClickHouse
本文以MaxCompute离线同步写入ClickHouse场景为例，为您介绍ClickHouse离线同步在数据源配置、网络联通、同步任务配置方面的最佳实践。背景信息 云数据库ClickHouse是面向联机分析处理的列式数据库。数据集成支持从ClickHouse同步数据到...
绑定域名部署线上环境
二级域名创建成功之后，回到云开发平台，找到刚刚部署的应用，在「应用详情页」-「开发部署」点击「线上环境」右侧的「域名配置」，编辑「绑定域名」，输入刚刚创建好的二级域名，如示例中创建的是 company.workbench.fun，点「确定」提交...
技术架构选型
在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合...MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks则包括数据开发、数据质量、数据安全、数据管理等在内的一系列功能。
通用参考：切换资源组
离线同步任务 单个任务修改 在左侧导航栏，单击 数据开发，找到目标离线同步任务，进入编辑页面。在 网络与资源配置 步骤，单击资源组模块内的 更多选项，资源组方案 选择 独享资源组，然后修改资源组。保存任务并在运行成功后提交。批量...
DataWorks On MaxCompute使用说明
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
DataWorks On Hologres使用说明
创建Hologres数据源 开发前准备：绑定数据源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发，您需执行如下操作：需将进行协同开发的RAM用户添加为当前工作空间的成员，并授予其开发角色。将工作空间成员添加至...
DataWorks On CDP/CDH使用说明
数据同步：数据开发仅支持部分离线同步和实时同步场景，更多数据同步应用，请前往 数据集成 主站查看。数据开发：您无需接触复杂的命令行，便可在DataWorks中实现各类任务的开发及周期性调度。创建CDH Hive节点 创建CDH Spark节点 创建CDH ...
服务条款
欢迎您申请试用云开发平台服务 在您申请试用阿里云云开发平台服务之前，请您仔细阅读 www.aliyun.com 网站上公布的相关规范、规则和使用流程以及阿里云云开发平台免费试用服务协议的全部内容，特别是免除或者限制责任的条款、争议解决和...
配置HTTPS访问
确定要配置HTTPS访问的应用和域名 登录 云开发平台，找到自己部署的应用，进入「应用详情页」-「开发部署」，确认「线上环境」绑定的域名。点击「基本信息」，确认这个应用部署的Region。准备好HTTPS证书 打开 https://freessl.cn/ 输入你...
任务管理器-WEB服务
1.概要 该解决方案旨在帮助您通过 云开发平台 构建服务形态的Serverless后端服务，主要传达了几个知识点：微服务注册与服务发现的集成使用；把一个微服务架构的系统在云开发平台上部署运行起来；日常、预发、正式环境的数据库使用配置；1.1...
任务管理器-微服务端
1.概要 该解决方案旨在帮助您通过 云开发平台 构建服务形态的Serverless后端服务，主要传达了几个知识点：微服务注册与服务发现的集成使用；把一个微服务架构的系统在云开发平台上部署运行起来；日常、预发、正式环境的数据库使用配置；1.1...
如何排查离线包（H5应用或小程序）无法更新的问题
mPaaS iOS 或 Android 客户端开发框架都提供了离线包主动更新的 API 接口。正常情况下，每次打开离线包，框架自身也会主动检查是否存在更新。请确认 mPaaS 框架和 H5 容器或离线包组件接入是否正确，API 使用是否正确。如果调用了主动更新 ...
产品架构
应用运维 支持环境管理：包括开发、生产环境管理、上下线管控支持。支持产物版本管理：包括版本记录、回滚支持。支持日志记录：包括用户操作、产品运行状态记录。支持性能监控：包括运行监控、预警通知。应用运营 支持应用使用数据监控看板...
API实战实践
最佳实践：文件管理OpenAPI基础实践 最佳实践：表管理OpenAPI基础实践 通过OpenAPI创建、修改、删除离线同步任务 最佳实践：数据开发、提交与运行OpenAPI基础实践 最佳实践：数据ETL操作全流程实践 最佳实践：搭建自定义运维大屏 最佳实践...
H5 应用加载失败：白屏或显示不正确，伴有 Mixed ...
打开 Safari>开发>目标机器>目标离线包页面。点击刷新按钮，在 WebView 中重新加载页面。在控制台中检查是否有被阻止（Blocked）的页面资源。解决方法 保证页面资源均通过 HTTPS 方法加载，且 HTTPS 站点的证书没有安全问题。点击下方链接...
通过向导模式配置离线同步任务
数据集成提供向导式的开发引导，您无需编写任何代码，通过在界面勾选数据来源与去向，并结合DataWorks调度参数，实现将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍向导模式配置离线同步任务的常规配置，各...
创建项目空间
说明 为保证线上库的稳定性，数仓开发的项目空间引入了测试库和线上库，测试环境和线上环境隔离，您可以在测试库上开发、调试任务流，然后将任务流发布到线上库进行调度。已有测试库和在线库的Owner权限。申请数据库Owner权限，请参见 管理...
通过脚本模式配置离线同步任务
当您需要实现更精细化的配置管理时，您可以使用脚本模式配置离线同步任务，通过编写数据同步的JSON脚本并结合DataWorks调度参数使用，将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...
总览
H5 容器是一款移动端 Hybrid 解决方案 SDK（Nebula SDK），提供了良好的外部扩展功能，拥有功能插件化、事件机制、JSAPI ...您将需要 配置开发环境。参考 准备配置 获取更多信息。可用的网络访问。网络浏览器（建议您使用 Chrome 浏览器）。
总览
您将需要 配置开发环境（本教程中 Windows 下的开发环境为例进行说明）。网络浏览器（建议您使用 Chrome 浏览器）。一部安卓手机（系统版本为安卓 4.3 或更新版本）及配套的数据线。您也可以选择使用模拟器进行调试，本教程以模拟器为例。
数据集成
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
从 HTTP 层面观察离线包的行为（1）：下载离线包
mPaaS 客户端框架对离线包的下载行为作出深度的封装，开发者往往并不直接控制离线包的下载行为。离线包的下载过程大致如下：客户端向 MDS 服务端（cn-hangzhou-component-gw.cloud.alipay.com）发送请求，请求中提供了下载目标 H5 App 的 ...
新功能发布记录
2023-10-06 下拉框 2023年08月 移动可视化开发 功能名称 功能描述 发布时间 相关文档 基础组件 文字、指示灯、图片和矩形组件优化：支持根据设备物模型属性设置组件可见性和组件内容显示颜色，及对应设备离线时，组件可见性和内容显示的...
10.1.60 系列
本发布说明（Release notes）按照 时间倒序方式 提供了移动开发平台（mPaaS）发布后 10.1.60 基线 iOS SDK 的更新情况。新增 功能 更新 功能 修复 功能 移除 功能 已知问题 更多关于 10.1.60 基线的升级适配信息，请参见 mPaaS 10.1.60 ...
概述
硬件准备 产品 硬件 树莓派 Raspberry Pi 4主板 大于8 GB的TF存储卡与读卡器 USB TypeC数据线及充电器 micro HDMI转HDMI连接线 USB鼠标+键盘 HDMI电脑显示器（或HDMI电视机）DHT11温湿度传感器 DHT11传感器 面包板 公母接头杜邦线 10 KΩ...
受众与核心能力
总之，使用DataWorks，您不仅可以进行海量数据的离线加工分析，还能完成数据的汇聚集成、开发、生产调度与运维、离线与实时分析、数据质量治理与资产管理、安全审计、数据共享与服务、机器学习、应用搭建等覆盖大数据全生命周期的最佳实践...
离线数据加工卡点
离线数据加工卡点，主要指在业务系统的数据生成过程中进行的卡点校验。代码提交的卡点校验 代码提交卡点主要包括您在提交代码时，手动或自动进行SQL扫描，检查您的SQL逻辑。校验规则分类如下：代码规范类规则。例如，表命名规范、生命周期...
离线包简介
离线包类型 通常，在 H5 的开发过程中，会存在使用一些基础通用库的情况，比如 zepto，fastclick 等。在 App 中的 WebView，有时候缓存不可靠，曾经发现有机型在退出后，缓存自动失效。为了进一步提升 H5 页面性能，使用全局离线包，将一...
mPaaS 打多环境包时如何切换 config 配置文件
mPaaS 提供了多套开发环境间切换的能力，可以帮助开发者在多套开发环境间（如：开发 DEV/测试 TEST/体验 UAT/线上 PROD）方便自如地进行切换。下载 config 配置文件 前往 mPaaS 控制台 根据自身需求新建环境的工作空间。在各个工作空间中上...
数据开发
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
功能简介
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
透视分析：按研发链路
支持您按照研发链路（数据同步和数据开发）查看和分析工作空间内DataWorks离线同步任务和DataWorks调度任务运行情况及资源消耗详情。便于您了解当前花费较多的资源类别、识别运行失败的任务，合理调整消费结构，发现阻塞任务运行的问题并...
概述
在组件开发工作台支持实时预览组件效果，或模拟线上环境预览组件效果。组件管理功能 组件开发工作台提供了组件管理功能，包括创建、搜索、编辑、删除和发布等，便于开发者管理和使用更多的丰富组件。快速上传和构建 组件开发工作台支持一键...
如何通过 mPaaS 框架解决 App 线上问题
问题描述 一般情况下，在 App 发布或更新上线之后，所发布的版本基本就脱离了开发者的控制。如果这时发现 APP 存在 Bug，传统手段一般只能通过发布新版本来修复 Bug。这种方式有着明显的弊端如效率低，用户体验不佳等。mPaaS 提供了多种运...
客户案例
线上业务爆发，需求积压严重，期望有整体解决方案，能够快速灵活支持业务发展所需的技术扩展。价值体现 通过MMA工具，15天完成400TB+历史数据迁移，同时保证了迁移的准确性，让客户拥有平滑高效的上云体验。基于飞天大数据平台产品...
创建业务流程
DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求，也提供了 周期业务流程 和 手动业务流程 两种，以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程，...
- 产品推荐
- 这些文档可能帮助您