N的取值必须和DataDisk.N.Category=cloud_essd中的N保持一致。取值范围:PL0:单盘最高随机读写IOPS 1万。PL1:单盘最高随机读写IOPS 5万。PL2:单盘最高随机读写IOPS 10万。PL3:单盘最高随机读写IOPS 100万。说明 关于如何选择ESSD云盘...
取值 black 和 white。host_redirect:rewrite 功能。regex:需要重写的URL。例如^/$。replacement:目标URL。例如/go/act/sale/tbzlsy.php。flag:仅支持:redirect、break。ipv6:ipv6配置。switch:开关(必填)。取值:on 或 off,开启...
总容量必须大于等于 PayAsYouGoTargetCapacity(指定的按量付费实例目标容量)和 SpotTargetCapacity(指定的抢占式实例目标容量)取值之和。70 PayAsYouGoTargetCapacity string 否 弹性供应组内,按量付费实例的目标容量。取值范围:小于...
N 的取值必须和 DataDisk.N.Category=cloud_essd 中的 N 保持一致。取值范围:PL0:单盘最高随机读写 IOPS 1 万。PL1(默认):单盘最高随机读写 IOPS 5 万。PL2:单盘最高随机读写 IOPS 10 万。PL3:单盘最高随机读写 IOPS 100 万。有关...
总容量必须大于等于 PayAsYouGoTargetCapacity(指定的按量付费实例目标容量)和 SpotTargetCapacity(指定的抢占式实例目标容量)取值之和。60 PayAsYouGoTargetCapacity string 否 弹性供应组内,按量付费实例的目标容量。取值范围:小于...
取值(正整数):总容量必须大于等于PayAsYouGoTargetCapacity(指定的按量付费实例目标容量)和SpotTargetCapacity(指定的抢占式实例目标容量)取值之和。AutoProvisioningGroupType String 否 否 弹性供应组的交付类型。取值:request:...
RunInstances 可以执行批量创建任务,为便于管理与检索,建议您为每批次启动的实例指定标签(Tag.N.Key 和 Tag.N.Value),并且为主机名(HostName)和实例名称(InstanceName)添加有序后缀(UniqueSuffix)。实例启动模板能免除您每次...
iris=DataFrame(o.get_table('pyodps_iris'))在DataFrame上执行Count获取DataFrame的总行数。iris.count()由于DataFrame上的操作并不会立即执行,只有当用户显式调用Execute方法或者立即执行的方法时,才会真正执行。此时为了防止Count方法...
iris=DataFrame(o.get_table('pyodps_iris'))在DataFrame上执行Count获取DataFrame的总行数。iris.count()由于DataFrame上的操作并不会立即执行,只有当用户显式调用Execute方法或者立即执行的方法时,才会真正执行。此时为了防止Count方法...
您可以对DataFrame对象执行排序、去重、采样、数据变换操作。前提条件 您需要提前完成以下步骤,用于操作本文中的示例:准备示例表 pyodps_iris,详情请参见 Dataframe数据处理。创建DataFrame。from odps.df import DataFrame iris=...
本文介绍了将数据集拆分为训练数据集和预测数据集的 API 及示例。函数路径 fascia.data.horizontal.dataframe.train_test_split 函数定义 def train_test_split(data:HDataFrame,ratio:float,random_state:int=None,shuffle:bool=True)->...
名称 类型 描述 示例值 object LaunchTime string 伸缩规则执行时间。必填参数。HH:MM 格式字符串。17:30 StartTime long 开始时间戳。必填参数。...A 和 B 的取值范围都为 1~31,如果使用 A-B 时 B 必须大于 A。MON,FRI,SUN
本文为您介绍Python SDK中DataFrame相关的典型场景操作示例。DataFrame PyODPS提供了DataFrame API,它提供了类似Pandas的接口,但是能充分利用MaxCompute的计算能力。完整的DataFrame文档请参见 DataFrame。假设已经存在三张表,分别是 ...
使用PyODPS DataFrame编写数据应用时,同一个脚本文件中的代码会在不同位置执行,可能导致一些无法预期的问题,本文为您介绍当出现相关问题时,如何确定代码的执行环境,以及提供部分场景下的解决方案。概述 PyODPS是一个Python包而非...
由于PyODPS DataFrame本身会对整个操作执行优化,为了更直观地反应整个过程,您可以使用可视化的方式显示整个表达式的计算过程。可视化DataFrame 可视化需要依赖 graphviz软件 和 graphviz Python包。df=iris.groupby('name').agg(id=iris....
strategy String 支持 mean、min 和 max 三种取值。若已经指定 value 参数,则忽略填充策略。若没有指定 value 参数,则必须指定填充策略。默认为 None。返回值定义 返回内容为代码中用户指定输出的内容,通常是经过特征处理的联邦表和特征...
您可以自行编写并构建包含业务逻辑的Python脚本,上传该脚本后,即可便捷地创建和执行PySpark任务。本文通过一个示例,为您演示如何进行PySpark任务的开发与部署。前提条件 已准备阿里云账号,详情请参见 账号注册。已完成角色授权,详情请...
本文主要介绍如何通过DLA Ganos查询基于GeoMesa管理的HBase和Cassandra数据库。通过GeoMesa您可以在NoSQL分布式计算存储系统上进行大规模的地理空间查询和分析。GeoMesa目前支持的NoSQL数据库包括Accumulo、HBase、Google Bigtable和...
df=pd.DataFrame([[0.730967787376657,0.24053641567148587,0.6374174253501083,0.5504370051176339],[0.7308781907032909,0.41008081149220166,0.20771484130971707,0.3327170559595112],[0.7311469360199058,0.9014476240300544,0....
Key 和 Value 的取值可包含英文字母、数字、点号(.)、短划线(-)、下划线(_)、正斜线(/)和反斜线(\)。说明 Dimensions 传入时需要使用 JSON 字符串表示该 Map 对象,必须按顺序传入。{"sampleName1":"value1","sampleName2":...
节点上下文用于支持参数在上游节点和下游节点之间传递,本文为您介绍如何定义、使用节点上下文中的输入参数和输出参数。背景信息 在上游节点定义输出参数及其取值后,在下游节点定义输入参数(取值引用上游节点的输出参数),即可在下游...
问题原因:可能是在分区字段包含/(正斜线)的情况下,分区字段个数和实际分区目录级数不一致,导致Spark分区裁剪失效。解决方法:您在使用Spark DataFrame API写Hudi表时,需要加上 hoodie.datasource.write.partitionpath.urlencode=true...
ModifyPassword boolean 否 是否修改连接数据库的用户名和密码,取值:true:修改 false:不修改 true AuditStatus integer 否 是否开启审计。取值:0:不开启审计 1:开启审计 1 LogStoreDay integer 否 开启审计之后,原始日志的保存时间...
“ENABLE_SPARKSQL_JDBC”:提交SQL代码的方式。取值如下:true:表示采用JDBC的方式提交SQL代码。当EMR集群无Kyuubi服务时,提交SQL代码至Spark Thrift-Server,当EMR集群有Kyuubi服务时,则通过JDBC方式提交SQL代码至Kyuubi,并支持...
使用限制 支持的计算引擎为MaxCompute、Flink和DLC。可视化配置组件参数 输入桩 输入桩(从左到右)数据类型 建议上游组件 是否必选 数据 无 MTable聚合 Prophet 是 组件参数 页签 参数 描述 字段设置 选中的列名 计算列对应的列名,类型是...
取值:4:公网和VPC实例。5:VPC实例。DiskType String 是 否 磁盘类型。取值:0:高效云盘。1:SSD。DeployOption Map 否 否 部署选项。更多信息,请参见 DeployOption属性。EipMax Integer 否 是 公网流量。当DeployType取值为4时,需...
datahubRows.printSchema()/当前实例中,schema有key和value两个字段。println("print schema"+datahubRows.schema.toString())val df=datahubRows.groupBy("key").count()/创建writestream,输出数据。val query=df.writeStream.format(...
使用限制 支持的计算引擎为MaxCompute、Flink和DLC。可视化配置组件参数 输入桩 输入桩(从左到右)数据类型 建议上游组件 是否必选 数据 无 读数据表 特征工程 数据预处理 是 组件参数 页签 参数 描述 字段设置 选择的列名 计算列对应的列...
Priority Integer 1 实例运行优先级,取值分为1、3、5、7和8。取值越大,优先级越高。默认优先级为1。TaskType String NORMAL(0)实例的调度类型,取值如下:NORMAL(0):正常调度任务。该任务被日常调度。MANUAL(1):手动任务。该任务不会被...
PyODPS支持对MaxCompute表的基本操作,包括创建表、创建表的Schema、同步表更新、获取表数据、删除表、表分区操作以及如何将表转换为DataFrame对象。背景信息 PyODPS提供对MaxCompute表的基本操作方法。操作 说明 基本操作 列出项目空间下...
本文为您介绍Delta Lake CDC功能的相关参数、Schema和使用示例。背景信息 CDC(Change Data Capture)定义了一种场景,即识别并捕获数据库表中数据的变更,并交付给下游进一步处理。Delta Lake CDC能够将Delta Lake表作为Source,直接获取...
acs:ram:13*44:role/logrole 查询语句 否 对日志库和时序库进行查询统计时,取值为查询和分析语句。说明 对资源数据进行查询统计时,无该参数。select count(1)as cnt 查询起始时间 否 对日志库和时序库进行查询统计时,取值为查询时间范围...
归档库费用更低,您可以将长期不使用的数据源进行归档,便于您长期保存数据,并在需要时搜索和取回文件。本文介绍如何使用 云备份 归档数据源。前提条件 已添加数据源。更多信息,请参见 添加数据源。使用限制 归档NAS文件时,单个文件的...
从Pandas DataFrame创建DataFrame 从Pandas DataFrame创建DataFrame,您需要将Pandas DataFrame对象传入DataFrame方法。代码示例 from odps.df import DataFrame#从Pandas DataFrame创建DataFrame。import pandas as pd import numpy as np...
本文介绍网站域名的访问日志和攻防日志的字段详情。字段 说明_topic_日志主题,固定为waf_access_log。account_action 客户端请求命中的账户安全规则对应的防护动作。取值仅有 block,表示拦截。更多信息,请参见 WAF防护动作(action)...
取值为block和continue。更多信息,请参见 WAF防护动作(action)说明。normalized_rule_id 客户端请求命中的主动防御规则的ID。normalized_rule_type 客户端请求命中的主动防御规则的类型。取值:User-Agent:User-Agent基线规则(即请求...
default:是否设置为默认显示字幕,取值为true和false。仅Web播放器SDK 2.15.7及以上版本支持设置该字段。说明 Web播放器SDK 2.12.0及以上版本支持。WebVTT外挂字幕暂不支持以下浏览器:IE 安卓QQ浏览器、OPPO/一加的系统浏览器 其他劫持...
本文对阿里云Web播放器SDK的属性、方法和事件进行了说明,并提供了播放器接口的示例代码。属性 名称 类型 说明 id String 播放器外层容器的dom元素ID。source String 使用URL播放方式时,通过source属性来指定视频播放地址URL。说明 URL...
目前,DataFrame的执行后端支持MaxCompute SQL、Pandas和数据库(MySQL和Postgres)。DataFrame支持的数据类型与MaxCompute类型的映射关系如下。MaxCompute类型 DataFrame类型 BIGINT INT64 DOUBLE FLOAT64 STRING STRING DATETIME ...
取值:true false(默认值)InitialMaxSize Integer 否 否 伸缩组实例数上限,和PredictiveValueBehavior结合使用。默认值为伸缩组最大实例数(MaxSize的取值)。MinAdjustmentMagnitude Integer 否 否 伸缩规则最小调整实例数。仅当伸缩...