手动新建逻辑

通过手动新建逻辑,建立您期望的数据样式和字段,并支持将逻辑物理化至云计算资源中,为后续的加工和使用做基础。本文介绍如何手动新建逻辑。前提条件 已新建目录,具体操作,请参见 新建模型目录。操作步骤 登录 数据资源平台...

手动新建逻辑

通过手动新建逻辑,建立您期望的数据样式和字段,并支持将逻辑物理化至云计算资源中,为后续的加工和使用做基础。本文介绍如何手动新建逻辑。前提条件 已新建目录,具体操作,请参见 新建模型目录。操作步骤 登录企业数据智能...

创建AnalyticDB Sink Connector

默认网络 1.目标(云原生数据仓库AnalyticDB)参数 说明 示例 实例类型 选择已创建的实例的类型,本文以AnalyticDB PostgreSQL版为例。MySQL版 PostgreSQL版 PostgreSQL版 AnalyticDB实例ID 选择已创建的实例ID。gp-bp10uo5n536wd*数据...

创建MaxCompute Sink Connector

默认网络 1.目标(大数据计算服务MaxCompute)参数 说明 示例 账号AccessKey ID 阿里云账号的AccessKey ID,用于访问MaxCompute服务。LTAI5tHPVCZywsoEVvFu*账号AccessKey Secret 阿里云账号的AccessKey Secret。4RAKUQpZtUntDgvoKu0...

Flink_SQL任务开发方式

Dataphin的Flink_SQL任务支持多种开发方式,包括原生DDL+DML开发、使用Dataphin元进行开发、使用Dataphin数据源进行开发、以及使用计算源物理进行开发,且不同开发方式所创建的支持任意混用,包括镜像。不同开发方式的使用方法、...

其他命名规范

本文为您介绍视图、中间以及其它表的命名规范。视图命名规范 视图命名规范如下:ODS层直接以视图形式开放到CDM层:{project_name}.dwd_{ODS 名}。中间层视图命名规范:遵循中间层命名规范,且加上后缀 {project_name}.{dws/dwd}_{中间...

创建Hologres外部

Hologres可通过DDL方式创建Hologres外部,也可使用DataWorks提供的可视化方式创建。本文为您介绍如何使用DataWorks可视化方式创建Hologres外部。前提条件 工作空间已绑定Hologres引擎。详情请参见 绑定Hologres计算引擎。创建的用户...

创建Hologres内部

Hologres可通过DDL方式创建Hologres内部,也可使用DataWorks提供的可视化方式创建。本文为您介绍如何使用DataWorks可视化方式创建Hologres内部。前提条件 工作空间已绑定Hologres引擎。详情请参见 绑定Hologres计算引擎。创建的用户...

实时分析海量MaxCompute数据

本文为您介绍交互式分析Hologres如何实时查询海量MaxCompute数据,并以可视化方式分析和展现查询结果的最佳实践。前提条件 开通MaxCompute,详情请参见 开通MaxCompute。说明 请确保MaxCompute和Hologres的地域相同。开通Hologres并连接至...

基于原生DDL语句创建元

开发过程中所用到的输入、输出、维可以通过创建元表方式来进行创建和管理,以支持您通过引用元方式来创建其他数据。有效解决原生DDL开发方式的研发路径复杂,密码明文记录,安全性差,研发效率低等问题。更多信息,请参见 ...

系统管理

在该页面,您可进行如下功能的管控:建策略管理 代码生成策略管理 发布策略管理 建策略管理 配置并开启建策略 在 建策略管理 页签,您可通过可视化方式配置数据开发(DataStudio)建的相关限制策略,步骤如下图。策略说明如下:...

查询Delta数据

在E-MapReduce中通过Spark创建的Delta将自动同步到Hive元数据,您可以像使用其他一样查询Delta。您还可以通过使用Hive创建外表的方式来查询Delta。本文为您介绍如何通过Spark创建和Hive创建外表的方式,在Hive、Presto和Trino中...

逆向建模:物理反向建模

当您的物理引擎中已有大量物理,且希望通过DataWorks智能数据建模产品统一管理所有模型,则可使用逆向建模功能,将已有物理反向建模至DataWorks的维度建模中。该功能帮助您无需再次执行建模操作即可快速创建模型,节省了大量的时间成本...

优化MaxCompute外部的查询性能

Hologres与MaxCompute在底层资源无缝打通,您可以通过以下方式加速查询MaxCompute的数据:新建外部直接加速查询 在Hologres中新建外部,即可直接加速查询外部数据。无需数据导入导出、无冗余存储。该方式适用于单次查询的数据量小于...

跨VPC互联概述

网络连接的连接方式、带宽限制、延迟以及计费等方面对比通过云企业网的转发路由器、VPC对等连接、私网连接以及VPN网关实现不同VPC私网互通的差异。对比项 VPC对等连接 转发路由器 私网连接 VPN网关 连接方式 Full Mesh全连接方式,...

网络概述

ACS常见网络能力一览 分类 常见网络能力 功能支持 参考文档 网络配置管理 IPv4/IPv6双栈 不支持 无 Pod维度网络配置 支持 为Pod配置固定IP注解说明 Pod固定IP 支持 为Pod配置固定IP 设置Pod安全组 支持 为Pod配置固定IP注解说明 南北向...

Endpoint

各地域及网络下的Endpoint及Tunnel Endpoint对照,请参见 各地域Endpoint对照(外网连接方式)、各地域Endpoint对照(阿里云VPC网络连接方式)和 各地域Endpoint对照(阿里云经典网络连接方式)。应用场景 需要配置Endpoint或...

HBase外部(HBase标准版或增强版)

注意MaxCompute通过外部方式访问HBase时,网络打通包括通过Network建立MaxCompute和VPC的网络链路,也需要打开HBase的白名单,详情请参见 设置白名单。说明 HBase增强版是基于云原生多模数据库Lindorm内核研发的,HBase增强版实例也...

MaxCompute如何访问Hologres

各地域的VPC网络Endpoint信息,请参见 各地域Endpoint对照(阿里云VPC网络连接方式)。Hologres_Classic_Network:Hologres经典网络类型。配置此项主要是为了在MaxCompute安全运行沙箱环境中,开启到对应Hologres实例的网络策略,否则...

访问MaxCompute数据源

查询各地域VPC网络的Endpoint,请参见 各地域Endpoint对照(阿里云VPC网络连接方式)。spark.hadoop.odps.project MaxCompute的项目空间名称。spark.adb.connectors Spark作业连接的数据源,固定为 odps。在弹窗中,选择 继续执行。步骤...

什么是表格存储

如果要保证数据存储安全和网络访问安全,您可以使用数据加密、VPC网络访问等方式实现。更多信息,请参见 数据加密 和 网络安全管理。如果要防止重要数据被误删除,您可以使用数据备份功能实现定期备份重要数据。更多信息,请参见 备份...

通过外表导入至数仓版

查询各地域VPC网络的Endpoint,请参见 各地域Endpoint对照(阿里云VPC网络连接方式)。accessid 阿里云账号或者具备MaxCompute访问权限的RAM用户的AccessKey ID。如何获取AccessKey ID和AccessKey Secret,请参见 账号与权限。accesskey ...

数据导出到MongoDB

将数据从HybridDB for MySQL导出到MongoDB...公共云VPC网络不支持这种外表方式导入,需要用户自己借助其他方式完成。这里导入导出都是同步模式,发起导出的MySQL Client需要一直与数据库保持连接。如需要异步提交,请参见 异步提交导入任务。

从MaxCompute批量导入导出

公共云VPC网络不支持这种外表方式导入,需要用户自己借助CDP/DataX等方式。这里导入导出都是同步模式,发起导入的MySQL Client需要一直与数据库保持连接。如需要异步提交,请参见 异步提交导入任务。将MaxCompute分区导入HybridDB for ...

查看连接地址

不同类型的宽引擎连接地址如下:连接地址类型 连接方式 服务类型 网络类型 参考文档 宽SQL地址 通过Lindorm宽SQL连接宽引擎(连接地址为图示中①)Lindorm Lindorm单机版 专有网络 公网 通过Lindorm宽SQL Java API连接并使用宽...

导出至MaxCompute

本文介绍如何通过INSERT外表方式将 AnalyticDB MySQL版 数仓版(3.0)数据导出到MaxCompute分区。前提条件 根据MaxCompute 准备工作 和 快速入门 准备目标数据。例如通过 操作 语句,在MaxCompute中创建以下。如果您已经有目标数据...

使用流量调度功能控制各类流量的跨地域带宽

流量调度功能支持为不同类型的跨地域流量添加标记,并且能够依据标记值对不同类型的跨地域流量分别进行带宽限制,有效保证各类业务的跨地域带宽,提高网络整体的运行效率。功能介绍 概述 企业使用云企业网CEN(Cloud Enterprise Network)...

通过外表导入至数仓版

您可以根据业务需要选择如下几种方式导入数据(分区导入数据语法与普通一致,如下示例中以普通为例):(推荐)方式一:使用 INSERT OVERWRITE 导入数据。数据批量导入,性能好。导入成功后数据可见,导入失败数据会回滚,示例如下。...

管理Hive Catalog

配置Hive Catalog后,您可以在Flink开发控制台直接读取Hive元数据,无需再手动注册Hive,提高作业开发的效率且保证数据的正确性。本文为您介绍如何配置Hive元数据、创建和使用Hive Catalog等。背景信息 您可以将Hive Catalog配置文件和...

UDAF概述

如果您的UDF涉及访问VPC网络中的资源时,需要先创建MaxCompute与目标VPC网络间的网络连接,才可以直接通过UDF访问VPC网络中的资源,操作详情请参见 通过UDF访问VPC网络资源。读取数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的...

MaxCompute UDF概述

如果您的UDF涉及访问VPC网络中的资源时,需要先创建MaxCompute与目标VPC网络间的网络连接,才可以直接通过UDF访问VPC网络中的资源,操作详情请参见 通过UDF访问VPC网络资源。读取数据 目前版本不支持使用UDF/UDAF/UDTF读取以下场景的...

查看NLB操作日志

网络型负载均衡NLB(Network Load Balancer)的操作日志功能可以记录您的账号通过OpenAPI或控制台等方式操作NLB的行为。背景信息 NLB已与操作审计服务集成,您可以在操作审计中查询用户操作NLB产生的管控事件。操作审计支持将管控事件投递...

Database外表联邦分析

云原生数据仓库AnalyticDB PostgreSQL(简称ADB PG)支持通过JDBC的方式访问Oracle、PostgreSQL、MySQL外部数据源。说明 本特性只支持存储弹性模式实例,且需要 云原生数据仓库 AnalyticDB PostgreSQL 版 实例和目标访问的外部数据源处于同...

GrantInstanceToCen-为云企业网实例授权

调试 授权信息 下是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下:操作:是指具体的权限点。访问级别:是指每个操作的访问级别,取值为写入(Write)、读取...

通过外表导入至数仓版

方式二:执行 INSERT OVERWRITE 导入数据,会覆盖中原有的数据。示例如下:INSERT OVERWRITE adb_oss_import_test SELECT*FROM oss_import_test_external_table;方式三:异步执行 INSERT OVERWRITE 导入数据。通常使用 SUBMIT JOB 提交...

导出至HDFS

附录1:数据导出语法(普通外表)若创建外表时未指定分区列,您可以根据业务需要选择如下几种方式导出数据:方式一:如果您的数据已存在于目标中,可以通过 INSERT INTO 语句将数据导入外表。使用该语句会将源的数据写入外表对应的HDFS...

导入数据并查询

方式二:执行 INSERT OVERWRITE INTO 导入数据,会覆盖中原有的数据。示例如下:INSERT OVERWRITE INTO adb_oss_import_test SELECT*FROM oss_import_test_external_table;方式三:异步执行 INSERT OVERWRITE INTO 导入数据。通常使用 ...

集成SDK

pod方式集成(推荐)在Podfile文件中添加依赖,各版本依赖如下所示。重要 如果使用短视频SDK 3.24.0及以上版本,请务必使用FFmpeg 4.3.0及以上版本。请确保网络环境可以访问更新pod仓库,并在pod install安装完成后检查framework版本号...

排查伸缩活动异常

请确保专有网络伸缩组内的ECS实例与伸缩组属于同一个专有网络,或者ECS实例网络类型为经典网络。The specified virtual switch and the instance in Load Balancer"xxxxx"are not in the same VPC.负载均衡实例与虚拟交换机(Vswitch)所属...

查看ALB操作日志

应用型负载均衡ALB(Application Load Balancer)的操作日志功能可以记录您的账号通过OpenAPI或控制台等方式操作ALB的行为。背景信息 ALB已与操作审计服务集成,您可以在操作审计中查询用户操作ALB产生的管控事件。操作审计支持将管控事件...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
NAT网关 负载均衡 高速通道 共享流量包 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用