加工原理
本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工功能使用协同消费组对源日志库的日志数据进行流式消费，将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则，...
IoT孪生引擎
使用说明 IoT孪生引擎原服务入口在物联网平台控制台华东2（上海）地域的对应企业版实例下的 设备管理>IoT孪生引擎 页面：如果已添加孪生体，自动在增值服务的 IoT孪生引擎 工作台匹配创建对应的孪生空间。一个孪生体对应一个孪生空间。重要...
云数据库 Memcache 版 SDK for NodeJS 介绍
V8 JavaScript 引擎是 Google 用于其 Chrome 浏览器的底层 JavaScript 引擎。很少有人考虑 JavaScript 在客户机上实际做了些什么？实际上，JavaScript 引擎负责解释并执行代码。Google 使用 V8 创建了一个用 C++ 编写的超快解释器，该解释...
AutoML工作原理
AutoML实现自动化调试参数的工作原理，是通过实验、Trial、训练任务进行循环迭代，来找到最优的超参组合。AutoML的工作机制如下图。您设定好超参数的值域、搜索算法、停止条件配置后，AutoML将其作为一次实验（experiment）传入到后端进行...
JavaScript和Python双引擎运行环境
代码下载 py_engine代码下载请参考《aos-studio使用说明之创建工程》，其中，>选择解决方案："haas开发框架JS引擎及Python引擎简单示例">选择开发板：HaaS200 编译 参考《aos-studio使用说明之编译固件》。烧录 由于该demo的资源文件位于/...
工作原理
工作原理 本地安装一个数据库网关代理（database gateway agent）。数据库网关代理负责与数据库网关云端服务（database gateway cloud service）建立安全的、可信任的通道。不同账号、不同网关所建立的通道彼此隔离。通道建立后，当您...
购买企业版或旗舰版
在 IoT孪生引擎 工作台左上角，选择对应实例。在工作台左侧导航栏，单击 用量统计。变配方式 IoT孪生引擎提供升级功能，支持您根据业务变化，对未到期IoT孪生引擎版本中已购买的资源规格进行升配。重要 升级需补齐升级所产生的差价，升配...
MSE Ingress概览
本文介绍MSE Ingress的基本概念、功能介绍、使用说明和工作原理。MSE Ingress视频介绍 MSE Ingress基本概念 在Kubernetes集群中，Ingress作为集群内服务对外暴露的访问接入点，几乎承载着集群内服务访问的所有流量。Ingress是Kubernetes中...
常见问题
云工作流的工作原理是什么？云工作流的优势是什么？云工作流最长执行多长时间？怎么执行云工作流？云工作流使用什么语言编写流程？云工作流是集成了云监控？云工作流是否集成了事件源？什么是 云工作流？云工作流 是一个用来协调多个分布式...
设置Fallback服务
Fallback服务工作原理 如图所示，现有路由/app，目标服务为 ServiceA-v1，设置的Fallback服务为 ServiceA。当 ServiceA-v1 服务不存在，或者无健康、可用的节点时，流量会自动容灾到 ServiceA。操作步骤 登录 MSE管理控制台，并在顶部菜单...
基础开发
本文介绍 Serverless 应用引擎 SAE（Serverless App Engine）源码部署的工作原理、环境配置、构建流程、源代码导入等信息。整体工作原理 作为 Serverless 应用引擎 SAE（Serverless App Engine）中，降低用户运维负担的重要一环，源码部署...
工作空间概述
工作空间概述 所有开发工作都将在DataWorks自定义的工作空间内完成，一个工作空间支持绑定多个类型的计算引擎实例，例如：MaxCompute、E-MapReduce和实时计算等。绑定引擎实例后，即可在工作空间进行任务开发、调度引擎任务及管理引擎中...
创建并配置发布环境
目标工作空间引擎实例 选择原工作空间引擎实例需要映射的目标端引擎实例。您可以进入目标工作空间的 发布中心>发布环境管理 页面，单击右上角的 查看工作空间环境信息，查看引擎实例信息。进入 发布环境管理，详情请参见 发布环境配置。...
创建并管理工作空间
在 管理中心>工作空间 页面对指定工作空间的属性进行管理和配置，并为工作空间绑定MaxCompute、E-MapReduce等类型的计算引擎，用于进行后续开发操作。本文为您介绍工作空间的基本操作。操作入口介绍 工作空间各操作说明及入口如下表所示。...
产品架构
存储引擎Storage Engine（SE）主要用于管理和处理数据，包括创建、查询、更新和删除（简称 CRUD）数据等，关于存储引擎详细的技术原理请参见 Hologres存储引擎技术揭秘。Cache（缓存）主要是结果缓存，提高查询性能。HOS Scheduler 轻量级...
跨项目克隆实践
说明 当克隆的节点中存在部分节点所属的引擎类型在目标工作空间中不存在的情况，计算引擎映射信息 对话框会进行提示，您可以通过勾选计算引擎确认对话框会给出提醒，可以通过勾选 跳过目标引擎实例为空的节点，来过滤无法克隆的节点，否则...
基本概念
RAM用户支持的表达格式如下表所示。...Superuser拥有整个实例的所有权限...存储引擎Storage Engine（SE）主要用于管理和处理数据，包括创建、查询、更新和删除（简称 CRUD）数据等，关于存储引擎详细的技术原理请参见 Hologres存储引擎技术揭秘。
DataWorks V3.0
DataWorks V3.0发布 发布版本：DataWorks V3.0 发布时间：2019年12月18日 发布范围：全球所有已开通DataWorks的地域 发布内容：DataWorks V2.0仅支持MaxCompute计算引擎，DataWorks V3.0全新升级了多引擎架构，在MaxCompute的基础上，新增...
场景：MaxCompute引擎在不同模式工作空间访问资源与...
DataWorks包括简单模式和标准模式两种工作空间模式，本文为您详细介绍MaxCompute引擎在不同模式工作空间的权限管理特征、资源访问行为差异。前提条件 已了解 简单模式与标准模式的区别。已了解 MaxCompute数据权限控制。使用说明 类别 说明...
环境准备
为保证您可以顺利完成本次教程，您需要准备教程所需的MaxCompute引擎、DataWorks工作空间，并做好相关的环境配置。本文为您介绍进行本次实验所需的必要环境。前提条件 注册阿里云账号，详情请参见 阿里云账号注册流程。实名认证，详情请...
访问宽表引擎数据
准备工作 通过SQL访问Lindorm宽表引擎数据前，需要了解 使用须知。根据作业的提交方式，请确保已完成了相应的初始化工作：JDBC开发实践 JAR作业开发实践 Python作业开发实践 访问宽表引擎数据 您可以直接在Catalog"lindorm_table"中访问...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
名词解释
AIoT能力中心控制台 阿里云AIoT能力中心控制台用来使用AIoT开放能力和数字行业引擎，控制台包含两大功能模块“应用开发工作台”与“项目集成工作台”。应用开发工作台 提供对开放能力的调用调试、基于K8s的应用托管及运维工具。用户可以...
使用限制
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
分布式工作流Argo集群概述
原理图 工作流集群 是无服务器Serverless工作流引擎，基于Kubernetes集群构建，托管了开源 Argo Workflows。网络规划 目前开放地域：华北2（北京），华东1（杭州），华东2（上海），华南1（深圳），华北2（张家口）。如有其他地域的需求，...
管理控制台功能概览
DataWorks管理控制台提供了一个集中管理的可视化页面，方便用户管理工作空间列表、资源组列表以及已购资源与服务。同时，管理控制台还提供了功能模块的快速入口，用户能够一键进入所需功能。管理控制台丰富多样的功能模块，可以帮助用户...
使用流程
本文介绍如何使用城市视觉智能引擎管理控制台快速进行视频数据的接入、计算及搜索。使用流程 通过阿里云管理控制台来完成城市视觉智能引擎的基本操作流程如下：开通城市视觉智能引擎服务。创建接流工作组。创建视频点位。创建并启动计算...
使用DataWorks连接
背景信息 DataWorks支持将计算引擎绑定至DataWorks的工作空间，绑定计算引擎后，您即可在DataWorks上创建对应引擎的计算任务，并进行周期调度。使用DataWorks连接MaxCompute有如下方式：数据分析的 SQL查询 功能：实现编辑MaxCompute SQL、...
执行引擎
本文为您介绍Hologres的执行引擎以及内部的各组件。执行引擎优势 Hologres的执行引擎（主要以HQE为主）是自研的执行引擎，通过与大数据领域最新技术结合，实现了对各种查询类型的高性能处理，主要具有如下优势。分布式执行 执行引擎是一个...
DataWorks on EMR权限管控说明
说明 不同EMR引擎支持的认证方式不同，目标引擎是否支持LDAP认证请以产品实际能力为准。EMR集群侧 开启认证服务 若您要使用非系统账号进行集群身份认证，则需先在集群开启对应的认证服务，并将在DataWorks上进行EMR任务开发的账号加入认证...
数据查询与分析管控
附录：查看数据源的访问身份 查看引擎数据源访问身份 您可在 工作空间配置>计算引擎信息 查看目标数据源的访问身份。进入引擎绑定页面，详情请参见 进入引擎绑定页面。数据源类型 说明 MaxCompute数据源 查看MaxCompute引擎类型数据源访问...
引擎与数据权限管控概述
引擎与数据权限控制 DataWorks空间成员获取不同引擎资源权限的方式不同，各引擎权限的详细说明如下表所示：引擎类型 权限说明 相关参考 MaxCompute引擎 预设角色 DataWorks空间级角色与MaxCompute引擎Role存在映射关系，使得授予空间预设...
创建巨量引擎推送任务
操作步骤：选择工作空间>用户营销>广告营销>巨量引擎。单击 创建推送任务。配置参数，如下表所示。参数 说明 任务名称 输入任务名称，用于区分任务用途。人群选择 选择要推送到巨量引擎的人群，下方将显示其所有ID类型和加密方式的组合，...
微服务治理中心授权
使用场景 某企业开通了微服务引擎MSE服务，由于员工工作职责不同，对资源操作所需权限也不同。运维人员负责做应用和权限的管理，开发人员负责配置应用的规则。例如如下需求。鉴于安全或信任原因，不希望将云账号密钥直接透露给员工，期望...
Pipeline执行引擎
原理 SelectDB原有的SQL执行引擎基于传统的火山模型设计，在单机多核的场景下存在以下问题：无法充分利用多核计算能力提升查询性能。在大多数情况下，进行性能调优时需要手动设置并行度，而在生产环境中几乎很难进行这样的设定。单机查询的...
注册配置中心授权
使用说明 本文档内容涉及图中 引擎管控链路 的访问权限的配置和使用，即阿里云账号授予RAM用户权限后，被授予该权限的RAM用户拥有对控制台（OpenAPI）的相关操作权限。说明 关于 引擎直连链路 的访问鉴权配置和使用，即Nacos Client可以...
导入开源引擎任务
本文为您介绍如何导入从开源引擎导出的任务至DataWorks。操作步骤 进入 开源引擎导入 页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击...
数据库管理
本文介绍Lindorm时序引擎中的Database概念以及相关的功能。Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合 名词...
导出开源引擎任务
导出DolphinScheduler任务 原理介绍 DataWorks导出工具通过调用DolphinScheduler的批量导出工作流来定义API信息，获取DolphinScheduler工作流定义的JSON配置，生成一个Zip格式的文件。后续可在 迁移助手>任务上云 的 调度引擎作业导入 页面...
工作组
创建接流工作组 操作步骤 登录 城市视觉智能引擎控制台，进入实例详情页面,单击页面左侧菜单栏的接流服务下的视频点位数据接入。在视频点位数据接入页面单击下图所示图标。在新增工作组页面设置接入信息。协议 类型为”FILE”时，该接流...
- 产品推荐
- 这些文档可能帮助您