网络架构介绍
访问VPC专有网络路径（同一地域）业务网络和VPC专有网络通过路由方式相互连通，中间的网络路径不经过NAT地址转换。要实现此目的，需要满足如下要求：VPC专有网络加入云企业网。VMware服务的4条高速通道以关联转发形式绑定的转发路由器...
Spark-Submit命令行工具
use SubmitSparkSQL API to submit SQL,support set command to set spark conf.you can set-disable-submit-sql to submit an SQL job using the previous SubmitSparkJob API,which requires the user to specified the-oss-upload-path-...
通过Spark Distribution SQL Engine开发Spark SQL作业
当您需要实时分析数据或通过JDBC协议开发Spark SQL作业时，可以通过 AnalyticDB for MySQL 的Spark Distribution SQL Engine开发Spark SQL作业。通过Spark Distribution SQL Engine可以更方便地利用SQL分析、处理和查询数据，提升SQL执行...
通过Spark SQL读Lindorm数据
AnalyticDB MySQL 湖仓版（3.0）支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表...
StartSparkSQLEngine-启动Spark SQL引擎
403 Spark.Forbidden No permissions to access the resources:%s 权限不足，拒绝访问相关资源。您当前申请访问的信息是：%s。404 Spark.App.ContentNotFound The requested content%s of the Spark application is not found.找不到指定...
SubmitSparkApp-提交Spark应用
403 Spark.Forbidden No permissions to access the resources:%s 权限不足，拒绝访问相关资源。您当前申请访问的信息是：%s。404 Spark.App.ContentNotFound The requested content%s of the Spark application is not found.找不到指定...
ListNetworkAccessPaths-查询网络端点的访问路径列表
查询指定网络端点下的访问路径列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
一对一专家服务工作说明书
磁盘空间类问题 4.MySQL 参数优化 ECS自建SQL Server问题排查 1.SQL Server无法启动 2.SQL Server无法连接 3.SQL Server权限相关问题 4.SQL Server报错分析 5.SQL Server磁盘空间类问题 网站访问异常排查 网站访问3xx/4xx/5xx访问异常排查...
MaxCompute如何访问Hologres
MaxCompute SQL外部表的方式访问Hologres，详情请参见 MaxCompute SQL外部表方式访问Hologres。MaxCompute Spark方式访问Hologres，如下所示。MaxCompute Spark访问Hologres：Local提交模式。MaxCompute Spark访问Hologres：Cluster提交...
新功能发布记录
无 Spark Distribution SQL Engine AnalyticDB for MySQL Spark提供Spark开源原生能力Distribution SQL Engine的托管服务，支持通过Spark Distribution SQL Engine开发Spark SQL作业，从而更方便地利用SQL分析、处理和查询数据，提升SQL...
内置的安全审计规则
数据库审计规则按照以下攻击场景进行分类：异常操作 应用账号风险操作 运维人员风险操作 数据库探测 数据泄露 拖库攻击 数据库外联 大流量返回 漏洞攻击 缓冲区溢出 存储过程滥用 拒绝服务漏洞 隐通道攻击 SQL注入 SQL注入尝试利用 疑似SQL...
通过UDF访问VPC网络资源
MaxCompute默认不支持通过UDF直接访问VPC网络。若您需要在UDF中访问VPC网络资源，必须先建立MaxCompute与目标VPC之间的网络连接，本文以具体示例为您介绍如何通过UDF访问VPC网络资源。前提条件 请确认您已满足如下条件：已编写UDF代码。更...
错误码
VARIABLE_CAN_NOT_SET_TO_NULL_FOR_NOW PXC-4200 ERR_GROUP_NOT_AVALILABLE PXC-4201 ERR_GROUP_NO_ATOM_AVALILABLE PXC-4202 ERR_SQL_QUERY_TIMEOUT PXC-4203 ERR_SQL_QUERY_MERGE_TIMEOUT PXC-4400 ERR_SEQUENCE PXC-4401 ERR_MISS_...
访问Hive数据源
AnalyticDB MySQL湖仓版（3.0）支持访问Hive数据源。本文以E-MapReduce集群的Hive服务为例，介绍使访问Hive数据的方法。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。...
Web服务端漏洞类型
SQL注入攻击 SQL注入攻击（SQL Injection），简称注入攻击、SQL注入，被广泛用于非法获取网站控制权，是发生在应用程序的数据库层上的安全漏洞。由于在设计程序时，忽略了对输入字符串中夹带的SQL指令的检查，被数据库误认为是正常的SQL...
漏洞等级说明
低危 基础分为10~20，奖励系数可为0，低危等级漏洞包括：本地拒绝服务漏洞，包括但不限于客户端本地拒绝服务（解析文件格式、网络协议产生的崩溃），以及由Android组件权限暴露、普通应用权限引起的问题等。普通信息泄露，包括但不限于客户...
HBase
弹性网卡ENI（Elastic Network Interface）是一种可以绑定到专有网络VPC类型ECS实例上的虚拟网卡。通过弹性网卡，您可以实现高可用集群搭建、低成本故障转移和精细化的网络管理。本文主要介绍如何使用Serverless Spark通过ENI访问VPC中的...
Hive
本文主要介绍如何使用DLA Spark访问用户VPC中的Hive集群。重要 云原生数据湖分析（DLA）产品已退市，云原生数据仓库 AnalyticDB MySQL 版 湖仓版支持DLA已有功能，并提供更多的功能和更好的性能。AnalyticDB for MySQL 相关使用文档，请...
Spark应用配置参数说明
Spark Jar开发编辑器"key":"value""spark.sql.hive.metastore.version":"adb"Notebook开发编辑器"key":"value""spark.sql.hive.metastore.version":"adb"spark-submit命令行工具 key=value spark.sql.hive.metastore.version=adb 指定...
访问RDS MySQL数据源
您可以通过ENI和SSL链路两种方式访问RDS MySQL数据，SSL链路访问RDS MySQL数据时可以加密网络连接，保证数据的安全性，对比ENI访问方式更加安全。本文主要介绍通过ENI和SSL链路访问RDS MySQL数据的具体方法。前提条件 AnalyticDB MySQL 湖...
Python脚本
选择任务类型：仅当提交的代码按照分布式实现时，才需要修改该参数，支持以下取值：XGBoost/LightGBM Job TensorFlow Job PyTorch Job MPI Job 使用示例 默认示例代码解析 Python脚本组件默认提供的示例代码如下。import os import ...
常见问题
网站访问问题 网站无法访问或无法正常显示 网站无法访问的常见问题及解决方法 访问网站不能正常显示图片或显示不完整的原因 访问网站提示“该页面暂时无法访问”访问网站出现乱码的现象 Linux系统云虚拟主机通过网站后台上传文件异常 访问...
MaxCompute UDF（Python）常见问题
假设模块名称为A，对应Python文件为A.py，确定其资源包路径及在代码中添加路径的方法如下：假设PY文件位于文件夹resource_dir中，如果将文件夹resource_dir直接压缩为resource-of-A.zip，sys.path.insert 中填写的路径为 work/resource-of-...
JSON函数和操作符
本文描述了用于处理和创建JSON数据的函数和运算器，以及SQL/JSON路径语言。处理和创建JSON数据 json和jsonb操作符表展示了可以用于JSON数据类型的操作符。此外，比较操作符表所示的常用比较操作符也适用于 jsonb，但不适用于 json。比较...
SQL查询
SQL查询为多数据引擎提供统一的访问接口。通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。说明 关于SQL查询的更多信息，请参见 SQL查询。概述 SQL查询兼容...
使用须知
本文介绍使用Lindorm计算引擎SQL语句访问数据库的数据时，需要提前了解的相关内容。了解开源Spark SQL 通过开源Spark SQL访问数据库的数据分为以下三个级别：Catalog：用来标识用户不同的数据源。Namespace：与数据库中的Database或者...
SQL查询
SQL查询为多数据引擎提供统一的访问接口。通过SQL查询功能，您可以对表格存储中数据进行复杂的查询和高效的分析。SQL查询在车联网场景中作为不同类型数据的统一查询接口。概述 SQL查询兼容MySQL的查询语法，同时提供基础的SQL DDL建表能力...
使用路径分析
背景信息 执行路径分析时，网络智能服务会生成源资源和目标资源之间的虚拟网络路径逐跳详细信息。当目的地不可达时，会检查阻塞的位置和原因。路径分析主要检查实例状态和网络配置，包括网络实例的状态、安全组配置、网络ACL配置、路由表...
使用数据库代理模式访问SQL Server
RDS实例的SQL Server类型数据库的访问模式为代理模式，视为“合规”。应用场景 RDS实例的SQL Server类型数据库的代理访问模式提供更高的安全保障，但性能会略受影响，您可以酌情使用。风险等级 默认风险等级：中风险。当您使用该规则时，...
读写RDS MySQL数据
在 SQL访问点 页面的 VPC网络 区域，定位到RDS所在的VPC网络，然后单击 登录到DMS。您也可以在 公网网络 区域，单击 登录到DMS 通过公网登录到DMS创建RDS Schema。在 登录实例 对话框中，选择RDS数据库类型为 MySQL，并选择实例地区、实例...
SQL窗口-关系型数据库
数据管理DMS安全规则提供的SQL窗口模块支持关系型数据库和非关系型数据库。本文以关系型数据库MySQL为例，介绍配置SQL窗口规则的方法。SQL窗口模块检测点 检测点 规则说明 基础配置项 规则集的基础配置，包括单次查询最大返回行数、结果集...
提示“在与SQL Server建立连接时出现与网络
问题现象 在Windows Server 2008系统的ECS实例内，关闭防火墙后，SQL Server可正常与外部网络建立连接，开启防火墙后，SQL Server无法与外部网络建立连接，并提示“在与SQL Server建立连接时出现与网络相关的或特定于实例的错误”错误。...
Databricks数据洞察快速使用
Object 为上传到OSS上的文件的访问路径。例：读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val text=sc.textFile("oss:/databricks-demo-hangzhou/demo/The...
Airflow调度DLA Spark作业
id="spark_default",sql="SELECT*FROM yourdb.yourtable",conf=",".join([k+"="+v for k,v in dla_spark_conf.items()]),task_id="sql_job",verbose=True)#[END howto_operator_spark_sql]submit_job>>sql_job 执行DLA Spark DAG。...
使用路径分析
路径分析介绍 路径分析原理 执行路径分析时，网络智能服务 NIS（Network Intelligence Service）会生成源资源和目的资源之间的虚拟网络路径逐跳详细信息。当目的地不可达时，会检查阻塞的位置和原因。路径分析主要检查实例状态和网络配置，...
SQL查询介绍
SQL查询为表格存储的多数据引擎提供统一的访问接口，兼容MySQL的查询语法，适用于在海量数据中进行在线数据访问类型的场景。您可以通过SQL查询功能对表格存储中的数据进行复杂的查询和高效的分析。背景信息 为了满足用户业务平滑迁移到表格...
查看性能评估报告
SQL 诊断信息 模块包括 TopSQL 和 SlowSQL，您可以查看 SQL 文本、SQL 访问的数据库、CPU 占比、SQL ID，以及指定时间段内 SQL 的总执行次数、数据库执行 SQL 的总耗时（ms）和报错汇总等信息。您还可以在该区域右上角进行快速筛选。SQL ...
网络流量路径说明
ECS的公网流量访问路径如下图所示。图 2.出网流量路径 总体原则：流量从哪里进来，就从哪里出去。通过 CLB 进入的流量在 CLB 上限速或计费，CLB 到ECS之间是阿里云内网通信，不收取公网流量费用。来自EIP或NAT网关的流量，分别在EIP或NAT...
慢SQL治理
流控规则：为服务接口配置流控规则，让容量范围内的请求通过，多余的请求被拒绝，可以有效保证SQL请求访问的流量控制在系统容量的阈值内。详情请参见 配置流控规则。在 新增规则 对话框，单击 接口流控。在 选择防护场景 页面，确认 接口...
创建EMR Spark SQL节点
您可以通过创建EMR（E-MapReduce）Spark SQL节点，实现分布式SQL查询引擎处理结构化数据，提高作业的执行效率。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，...
- 产品推荐
- 这些文档可能帮助您