使用列索引加速ETL
使用方法 您可以在数据库中通过设置下表中的参数值来选择是否从只读列存节点读取数据，以及在读取数据时是否需要压缩文件。参数 说明 etl_from_imci 是否从只读列存节点读取数据。取值如下：ON：从只读列存节点读取数据。OFF（默认）：不从...
异步任务完成通知
远程视频会议，消息已读未读，DING消息任务管理，让沟通更高效；移动办公考勤，审批，钉闪会，钉钉文档，钉钉教育解决方案。更多信息，请参见 钉钉。短信服务 短信服务（Short Message Service）是阿里云为用户提供的一种通信服务的能力，...
文件存储CPFS监控概述
性能监控 CPFS文件系统 类型 指标 指标名称 单位 说明 文件系统 ThruputRead 读吞吐 字节/秒 该文件系统在周期内每秒平均读吞吐字节。ThruputWrite 写吞吐 字节/秒 该文件系统在周期内每秒平均写吞吐字节。IopsRead 读IOPS 次/秒 该文件...
人群筛选概述
通过从分析源读取用户ID数据表，生成人群，请参见 从分析源创建人群。通过复制人群功能，获得与原人群相同的新人群，请参见 复制人群。在进行用户分析时，可以将分析图表中的部分图形所代表的用户创建为新的人群或者添加至已有人群，请参见...
设置读写属性和读权重
主实例：不可读可写 代理访问策略：可读可写 主实例：可读可写 代理访问策略：可读可写 主实例：可读可写 代理访问策略：可读可写 自定义 大于0 主实例：可读可写 代理访问策略：可读可写 主实例：可读可写 代理访问策略：可读可写 主实例...
概述
监控指标包括内部读CU、内部写CU、实例按量读CU、实例按量写CU、操作读CU和操作写CU。RequestCount 每分钟的平均请求次数。监控指标包括总请求、2xx请求、429请求、4xx请求和5xx请求。InstanceNet 每分钟平均使用的流量。监控指标包括外网...
GetSmsAuthTokens-获取短信验证码授权Token
调用GetSmsAuthTokens接口获取短信验证码授权Token。接口说明 准备工作 请先完成阿里云账号注册、获取阿里云访问密钥、创建认证方案等操作，更多信息，请参见 短信认证使用流程。QPS 限制 本接口的单用户 QPS 限制为 5000 次/秒。超过限制...
创建Redis表并读取数据
本文介绍如何创建Redis的CSV和JSON格式表并读取相关数据。创建CSV格式表 针对Redis中CSV格式的数据，本示例在 DMS for Data Lake Analytics 中创建表dla_person_csv。CREATE EXTERNAL TABLE dla_person_csv(id int,name varchar,age int)...
数据源读取时间超时的优化思路
本文介绍导致DataV读取数据源超时的常见原因和解决方法。使用SQL查询的业务数据表数量太大，查询超时 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询...
数据源读取时间超时的优化思路
本文介绍导致DataV读取数据源超时的常见原因和解决方法。使用SQL查询的业务数据表数量太大，查询超时 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询...
计算成本控制
避免资源重复读取 资源的读取尽量放置到Setup阶段读取，避免资源多次读取的性能损失，另外系统也有64次读取的限制，资源的读取请参见 使用资源示例。减少对象构造开销 对于Map、Reduce阶段每次都会用到的Java对象，避免在Map/Reduce函数里...
在本地环境上使用PyODPS
o.execute_sql_interactive('SELECT*FROM dual',fallback="noresource,unsupported")在PyODPS节点中读取SQL运行结果 您可以使用 open_reader()来读取SQL命令运行结果。具体操作请参见 读取SQL执行结果。更多PyODPS节点的SQL相关操作详情请...
云构建分享产物链接到三方平台
方法一 获取产物的路径，可以在上传产物日志中读取。在后续自定义脚本中，通过读取环境变量获取构建任务ID:EMAS_PIPELINE_JOB_ID。可按如下规则拼接下载链接：https://emas-devops-cdn.aliyuncs.com/job/构建任务id/产物路径。示例如下：...
阿里邮箱设置邮件阅读回执的方法
概述 使用阿里邮箱发送邮件时，如需跟踪邮件对方是否已读，可通过邮件回执功能实现。使用阿里邮箱接收邮件时，如不希望发送给对方已读的回执，可通过邮件回执功能实现。详细信息 跟踪发出去的邮件，并确认对方是否已读。在使用邮件回执功能...
HBase数据源
支持的字段类型 离线读 支持读取HBase数据类型及HBase Reader针对HBase类型的转换列表如下表所示。类型分类 数据集成column配置类型 数据库数据类型 整数类 long short、int和long 浮点类 double float和double 字符串类 string binary_...
迁移指南
这种方法复制数据，并让Spark管理表。另外，您可以转换到较快的Delta Lake，但会导致表格不受管理。另存为Delta表 将数据读入DataFrame并将其保存为以下delta格式的新目录：Python%pyspark data=spark.read.parquet("/data-pipeline")data....
高级配置：内存缓存本地目录
在大部分模型推理场景中，业务进程通过OSS或NAS将模型文件挂载到本地目录，进行模型读取、模型切换以及容器的扩缩容等操作时，会受网络带宽的影响，存在较大的延时问题。为了解决这个问题，EAS 提供了本地目录内存缓存加速的功能。通过将...
观测云
如果您要执行数据加工、投递、从外网接入点流式读取数据操作，由日志服务收取加工计算费用、数据投递费用和外网读取流量费用。费用详情，请参见 按使用功能计费模式计费项。使用限制 观测云的专属Logstore，不支持删除与修改属性。阿里云...
验证读写分离
本文以ECS实例通过内网连接RDS MySQL实例为例，介绍验证RDS MySQL高可用系列实例的读写分离的方法。前提条件 已创建RDS MySQL高可用系列主实例。已为主实例创建只读实例，操作方法请参见 创建MySQL只读实例。已为实例创建至少1个数据库（含...
初始化
系统变量读取 阿里云SDK支持通过定义 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET 环境变量来创建默认的访问凭证。调用接口时，程序直接访问凭证，读取您的访问密钥（即AccessKey）并自动完成鉴权。配置方法 配置环境...
发起方配置
业务方法正常返回则分布式事务提交，业务方法抛出异常则分布式事务回滚。示例如下：public class YourClass{@DtxTransaction(bizType="yourbizType")public void yourMethod(yourParams){ try{/可以是 FMT 参与者数据源 DAO1;DAO2;DAO N;...
统一存储常见问题
本文将 iOS 常见问题及解决方法整理如下：如何设置统一存储用户态？解答：接入 mPaaS 的应用会使用自己的账号体系，如果需要使用统一存储来管理用户态数据，请第一时间通知统一存储，让统一存储进行用户数据库的切换，再通知其它业务层。[...
集群任务限流
Read 阶段 Reader 读取一批数据，读取数据接口返回数据列表和后续是否有新的数据标志。Reader 根据 limiter 的限流速率向 Processor 推送数据。Process 阶段 Processor 接收到数据后，通过多线程的方式对这批数据进行处理。处理后通过队列...
功能特性
数据源配置管理 您可以在产品中添加多种不同类型的数据源配置，每个数据来源配置代表一个核对系统在后续核对工作中可以用来读取数据的数据来源配置，当前支持如下类型的数据源配置：OSS：OSS 文件系统的读取配置，需要您输入访问信息，...
Endpoint
消息服务MNS 将以短信的形式将消息推送到指定的手机中，具体使用方式，请参见 推送到阿里短信。PushEndpoint 以移动端的App作为Endpoint。格式：push:{appkey}。消息服务MNS 将消息推送到指定的移动设备中，具体使用方式，请参见 推送到...
Python SDK示例：SQL
设置读取结果为pandas DataFrame#直接使用 reader 的 to_pandas 方法 with o.execute_sql('select*from dual').open_reader(tunnel=True)as reader:#pd_df 类型为 pandas DataFrame pd_df=reader.to_pandas()设置读取速度（进程数）说明 多...
缓存
方法设置白名单 ID。my.setStorage 将数据存储在本地缓存中指定的 key 中，会覆盖原来该 key 对应的数据。说明 mPaaS 10.1.32 及以上版本支持该接口。这是异步接口。支持内嵌 webview 的存储与小程序存储隔离，内嵌 webview 中指定 key ...
过滤器
在服务端对读取结果再进行一次过滤，根据过滤器（Filter）中的条件决定返回的行。使用过滤器后，只返回符合条件的数据行。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建数据表并写入数据。使用方法 在通过GetRow、...
SetEventSubscription-配置事件订阅设置
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
主键列自增
读取数据时，如果已记录完整主键，您可以使用 读取单行数据 或者 批量读取数据 方式读取数据；如果未记录自增主键列的值，您可以使用 范围读取数据 方式按照第一个主键列确定范围读取数据。说明 如果要更新已存在的行，请先通过 GetRange ...
API市场服务私网访问
已支持的API市场服务 当前计算巢私网互联已经完成Top 150+API市场服务的接入，分类涉及到生活服务、应用开发、身份认证及金融、车辆交通与物流、企业服务、短信与运营商、数据集、AI应用与OCR等8类。具体支持情况如下：API分类 API说明 API...
大数据计算服务MaxCompute
默认情况下源表为全量模式，仅会读取partition参数中指定的分区，在读完所有数据后结束运行，状态转换为finished，不会监控是否有新分区产生。如果您需要持续监控新分区，请通过WITH参数中指定startPartition使用增量源表模式。说明 维表...
算子级别诊断结果
扫描算子读取字段个数较多 问题 扫描算子会在 AnalyticDB MySQL版 的存储层进行数据的过滤和明细数据的读取，如果SELECT的字段个数较多，需要读取的明细数据也较多，那么就会占用较大的磁盘I/O资源，影响 AnalyticDB MySQL版 集群整体稳定...
Fetch类FAQ
Fetch默认会自动解压缩，有以下三种解压缩行为：decompress：默认行为，读取response的content-encoding头，从右往左数，第一个非Identity的值作为解压缩算法，例如 content-encoding:gzip,identity，选择gzip当作算法。如果您删除了该算法...
过滤器
在服务端对读取结果再进行一次过滤，根据过滤器（Filter）中的条件决定返回的行。使用过滤器后，只返回符合条件的数据行。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建数据表并写入数据。使用方法 在通过GetRow、...
0006-00000106
问题描述 PostObject请求表单读取超时。问题原因 您通过PostObject请求上传文件时，由于网络环境或网络配置等原因导致服务端读取Post表单超时。问题示例 无 解决方案 参考网络超时处理方法排查并解决PostObject请求上传超时的问题。更多...
Query级别诊断结果
查询返回客户端的数据量较大 查询消耗的内存资源较大 查询生成的Stage个数较多 查询读取的数据量较大 查询返回客户端的数据量较大 问题 大量数据返回到客户端会导致慢查询，还会占用部分网络前端资源。说明 您可以在查询详情页面的 查询...
使用前须知
DDoS原生防护将日志推送到日志服务后，当Logstore的计费模式为按使用功能计费时，在日志服务进行查询、分析、告警监控、可视化等操作免费，进行流量读取、数据加工、数据投递、告警短信语音通知等按照日志服务标准方式收费。更多信息，请...
SendTTSVerifyLink-告警联系人发送手机号码验证
为告警联系人发送手机号码验证短信。接口说明 收到手机号码验证短信后，请根据短信提示完成手机号验证。仅验证过的手机号可以在通知策略中使用电话的通知方式。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行...
初始化
安装方法，请参见 安装。您已经知晓服务接入地域，例如：接入地域在上海，请使用 cn-shanghai 。点播服务的接入地域请参见 接入地域和标识。AccessKey初始化 调用服务端接口需要使用AccessKey完成身份验证，请提前获取AccessKey。获取方法...
- 产品推荐
- 这些文档可能帮助您