安全白皮书
实时计算Flink版完全兼容开源Apache Flink API，从访问控制、网络、存储、备份恢复、操作审计等方面，提供全面的安全加固功能来保障您的数据安全。租户隔离 支持多租户的使用场景，通过阿里云账号认证体系（认证方式采用AccessKey对称密钥...
通用文本向量模型
另外，为了避免大量突发的作业占据太多资源，限制并发的作业数为3个，即任意时间，单个用户最多只有3个通用文本向量的异步作业在并发运行，其他的作业只能在队列中等待。text-embedding-async-v2 如果您熟悉编程语言，推荐您使用SDK或API...
Notebook开发编辑器
AnalyticDB MySQL 湖仓版（3.0）集群中的Notebook开发是 基于控制台的交互式数据分析开发平台，提供了作业编辑、数据分析、数据可视化等功能。Notebook开发 支持 Spark SQL和Python两种 编程语言编写Spark应 用程序。前提条件 已创建...
核心概念的层次结构
Networklink（网络连接）当您使用外部表、UDF或湖仓一体功能时，MaxCompute默认未建立与外网或VPC网络间的网络连接，您需要开通网络连接以访问外网或VPC中的目标服务（例如HBase、RDS、Hadoop等）。更多开通网络连接信息，请参见 网络开通...
通过JDBC连接Spark Thrift Server提交Spark作业
并且已配置环境变量 Java代码连接Spark Thrift Server需要下载Databricks提供的依赖包，下载路径：Databricks JDBC Driver 将项目依赖SparkJDBC42.jar添加到编程工具的Lib下，如图：编写代码，连接Spark Thrift Server并提交作业。...
如何提交App作业
通过批量计算控制台作业列表的提交作业按钮进入作业提交页面。在作业提交页面选择 App 作业，并选择要使用的 App。各参数的含义如下：作业名称：作业的名称【必填参数】。备注：作业的备注信息【选填参数】。通知订阅：消息通知配置，用户...
什么是容器镜像服务ACR
1000 3000 5000 私有仓库限额 制品构建 并发构建配额 1 3 5 10 智能加速 多架构镜像构建 制品安全 多引擎扫描 漏洞修复 风险阻断 加签验签 网络访问控制 操作审计 制品分发 分发性能（拉取QPS）不保障 250 500 1000 P2P分发 按需分发 全球...
上下游存储
全量MaxCompute和增量MaxCompute源表作业是否支持暂停作业后修改并发数，再恢复作业？作业启动位点设置了2019-10-11 00:00:00，为什么启动位点前的分区也会被全量MaxCompute源表读取？增量MaxCompute源表监听到新分区时，如果该分区还有...
什么是专有网络
专有网络是您专有的云上私有网络。您可以完全掌控自己的专有网络，例如选择IP地址范围、配置路由表和网关等，您可以在自己定义的专有网络中使用阿里云资源，如云服务器ECS（Elastic Compute Service）、云数据库RDS（Relational Database ...
大数据上云及巡检服务内容说明
2、对应售前方案，确定迁移目标端所使用的阿里云大数据组件信息（规格、版本、网络连通性等），数据迁移方式（存量迁移方式/增量迁移方式），作业迁移方式，迁移工具，一致性校验标准。数据迁移设计 基于需求详细调研的结果，设计【XXX】...
Hive作业异常排查及处理
本文介绍Hive作业异常的排查方法和解决方法。异常排查 如果客户端遇到作业异常或性能等问题，您可以按照如下步骤进行排查：查看Hive客户端日志。Hive CLI命令行提交的作业客户端日志位于集群或Gateway节点的/tmp/hive/$USER/hive.log 或者/...
注册Hive Kerberos集群
背景信息 Kerberos是一种计算机网络授权协议，用来进行身份认证，以保证通信的安全性。如果您的Flink作业要访问的Hive支持了Kerberos，则需要您先在Flink全托管控制台上注册Hive Kerberos集群，然后在Flink作业中配置Kerberos集群信息，...
音视频通信解决方案（MQTT）
对于上文描述的交互流程，建议使用 云消息队列 MQTT 版 提供的P2P消息，P2P消息不需要订阅，发送方直接指定对端接收即可，P2P消息的详细信息，请参见 P2P消息收发模式（MQTT）。收发消息参数设计 由于移动App可能存在应用切入后台被杀死...
企业版实例计费说明
操作审计-制品分发 分发性能（拉取QPS)250 500 1000-P2P分发 关于P2P分发的更多信息，请参见 使用P2P加速概述。按需分发 关于按需分发的更多信息，请参见 按需加载容器镜像。全球同步 关于全球同步的更多信息，请参见 同账号同步实例 和 跨...
SubmitServerlessJob-提交Serverless作业
调用SubmitServerlessJob提交Serverless作业到E-HPC集群。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在...
在ACK或ACK Serverless集群中使用P2P加速
您可以在ACK或 ACK Serverless集群 中使用P2P加速功能提升镜像拉取速度，减少应用部署时间。本文介绍如何在ACK和 ACK Serverless集群 中使用P2P加速功能。前提条件 已创建容器镜像服务企业版实例，且您创建的企业版实例必须为标准版或高级...
基本概念
NIS：网络信息服务（Network Information Service），是一种集中身份管理的方式。您可以在NIS服务器上建立用户，当新节点加入到NIS中时，便可以使用NIS服务器中的用户来登录这个节点，而不需要在每个节点上都建立同样的用户。LDAP：轻型...
什么是网络智能服务
网络智能服务 NIS（Network Intelligence Service）是一个对网络进行健康分析、性能监控、诊断修复、流量分析和测量仿真的云服务，通过集成机器学习、知识图谱等AIOps方法减少网络使用复杂性，提供自助运维能力，方便网络架构师和运维...
在其他容器环境中使用P2P加速
您可以在其他容器（例如安装了Docker的环境）中使用P2P加速功能提升镜像拉取速度，减少应用部署时间。本文介绍如何在安装了Docker的环境中使用P2P加速功能。前提条件 已创建容器镜像服务企业版实例，且您创建的企业版实例必须为标准版或...
在IDC或其他云厂商集群中使用P2P加速
您可以在IDC或其他云厂商集群中使用P2P加速功能提升镜像拉取速度，减少应用部署时间。本文介绍如何在IDC或其他云厂商集群中使用P2P加速功能。前提条件 已创建容器镜像服务企业版实例，且您创建的企业版实例必须为标准版或高级版。更多信息...
查看运行分析
字节（Byte）每秒远端读取网络缓冲区的数据的字节数（numBuffersIn Remote PerSecond）每秒远端读取网络缓冲区的数据的字节数。字节（Byte）每秒输出字节总数。（numBytesOut PerSecond）可查看上游吞吐输出情况，协助您观察作业流量表现。...
个人版实例与企业版实例差异化说明
操作审计-制品分发 分发性能（拉取QPS)不保障 250 500 1000-P2P分发-关于P2P分发的更多信息，请参见 使用P2P加速概述。按需分发-关于按需分发的更多信息，请参见 按需加载容器镜像。全球同步-关于同步的更多信息，请参见 同账号同步实例 和...
在IDC或其他云厂商集群中安装P2P加速套件
您可以在IDC或其他云厂商集群中使用P2P加速功能提升镜像拉取速度，减少应用部署时间。本文介绍如何在IDC或其他云厂商集群中安装P2P加速套件。前提条件 创建容器镜像服务ACR企业版实例，且创建的企业版实例需为 标准版或 高级版。具体操作，...
MaxCompute如何访问Hologres
spark-submit-master yarn-cluster-driver-class-path/home/postgreSQL/postgresql-42.2.16.jar-jars/home/postgreSQL/postgresql-42.2.16.jar/home/pythoncode/holo_yarncluster.py 提交后可以查看Spark打印日志，作业正常完成会打印作业...
API概览
我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入...
大数据实时计算性能调优服务
3.配合乙方计划，对系统、服务部署所需软硬件及网络资源依赖做好资源储备。1.调研实时场景和数据链路，初步评估优化可行性和方向。作业调优 1.协助乙方梳理代码逻辑、排查确认反压链路以及反压时间段。2.协助乙方排查数据源问题。1.根据...
产品优势
数据安全 基于专有网络VPC实现的网络访问隔离，专有网络内的集群节点使用安全组防火墙进行三层网络访问控制。充分保证了集群网络的安全性。集群数据保存在阿里云文件存储NAS中，利用NAS的传输加密与存储加密特性，保障集群数据不被窃取或...
互联网金融
为P2P、小贷、典当、担保、众筹等小微金融企业提供名定制化的云计算服务。互联网金融方案 适合初创互联网金融公司快速搭建平台，满足在开业筹备期间快速完成各类监管验收所需系统搭建和业务功能。业务架构 架构说明：初创互金公司关键系统...
Routine Load
在网络隔离的环境中可能出现的问题 在有些环境中存在网段和域名解析的隔离措施，所以需要注意：创建Routine load任务中指定的Broker list必须能够被Doris服务访问。Kafka中如果配置了advertised.listeners，advertised.listeners中的地址...
在Serverless集群中提交作业
创建Serverless集群后，您可以在集群中提交作业，系统会自动创建ECI实例来运行作业。本文介绍如何在Serverless集群中提交作业。背景信息 在Serverless集群中提交作业后，系统会自动创建ECI实例来运行作业。一个ECI实例主要包含以下几部分...
CREATE TABLE AS（CTAS）语句
示例六：多个CTAS语句时，新增CTAS语句加入数据同步作业 使用VVR 8.0.1及以上版本时，多个CTAS语句的作业启动后，如果新增CTAS语句，支持从作业快照重启，从而捕获到新的表，对新增表进行数据同步。SQL作业开发时需要增加以下语句，开启...
基础术语
一般可认为：同一数据中心内，网络质量较高、网络传输延时较低、同时遇到灾难的概率较大；不同数据中心间，网络质量较低、网络延时较高、同时遇到灾难的概率较小。SOFARPC 中文 英文 释义 RPC RPC 远程过程调用（Remote Procedure Call）。...
Spark对接Kafka
背景信息 E-MapReduce上的Hadoop集群和Kafka集群都是基于纯开源软件，相关编程使用方法可参见官方相应文档。Spark官方文档：streaming-kafka-integration 和 structured-streaming-kafka-integration。E-MapReduce-demo：github地址。访问...
配置客户端所需环境
如果在无影云桌面中使用私网登录E-HPC客户端，需确保无影云桌面安全办公网络（即工作区VPC）和E-HPC集群网络（集群所属VPC）已加入到同一云企业网CEN。具体操作，请参见 云企业网入门概述。终端用户（即作业操作员）操作 登录无影云桌面。...
API概览
我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，可通过签名机制进行自签名对接。由于自签名细节非常复杂，需花费 5个工作日左右。因此建议加入...
准备工作
3.获取 AccessKeyId 和 AccessKeySecret 进入 AK...使用SDK：适合高级用户，需要编程基础。官方提供Java 版和 python 版的 sdk，参考 Java 快速开始示例 和 Python 快速开始示例。使用云渲染管理系统：专门为渲染场景定制的 Web 管理系统。
什么是函数计算
了解云概念、公有网络、私有网络等网络概念。工作流程 函数计算 工作流程如下图所示。流程说明如下。开通服务。注册账号并开通 函数计算 服务。具体操作，请参见 步骤一：开通函数计算服务。开发者使用编程语言编写应用和函数。函数计算 ...
成本追踪
对于下载费用，内网也就是经典网络的下行流量是不收费的，上行流量也是不收费的。只有使用公网的时候，下行流量才会计费。元数据 当发现异常的计算作业时，您可以通过查看元数据来查看作业执行详细信息，找出具体的问题作业进行治理。您...
使用Kafka连接器进行Kerberos认证
Kerberos是一种网络身份验证协议，用于提供安全的身份验证服务，以保证通信的安全性。只有在Flink开发控制台正确配置Kerberos和Kafka服务的信息，Flink作业才能访问开启Kerberos认证服务的Kafka集群。本文为您介绍如何为Kafka客户端开启...
机器学习的审计事件
BatchGetJobsStatistics 批量查询多个工作空间下作业的统计信息。CheckServiceExists 检查服务是否开通 CheckWebTerminalToken 检查Token是否合法。CommitService 提交容器并发布。CopyExperiment 复制实验。Create 登录产品售卖页面进行的...
- 产品推荐
- 这些文档可能帮助您