图片水印模板
小数型代表水平偏移量与输出分辨率宽的比率。范围：(0,1)。支持4位小数，如0.9999，超出部分系统自动丢弃。10 Dy number 否 水印图片相对输出视频的垂直偏移量。默认值：0。值有两种形式：整数型代表偏移像素。范围：[8,4096]。单位：px。...
SearchWaterMarkTemplate-搜索水印模板
小数型：代表水平偏移量与输出分辨率宽的比率，相对比例，按照视频尺寸变化，支持 4 位小数，如 0.9999，超出部分系统自动丢弃。0.51 Width string 输出视频上水印图片宽。值有两种形式：整数型：代表水印图片宽的像素值，绝对位置，单位：...
AddWaterMarkTemplate-新增水印模版
小数型：代表水平偏移量与输出分辨率宽的比率，相对比例，按照视频尺寸变化，支持 4 位小数，如 0.9999，超出部分系统自动丢弃。0.51 Width string 输出视频上水印图片宽。值有两种形式：整数型：代表水印图片宽的像素值，绝对位置，单位：...
UpdateWaterMarkTemplate-更新水印模版
小数型：代表水平偏移量与输出分辨率宽的比率，相对比例，按照视频尺寸变化，支持 4 位小数，如 0.9999，超出部分系统自动丢弃。0.51 Width string 输出视频上水印图片宽。值有两种形式：整数型：代表水印图片宽的像素值，绝对位置，单位：...
QueryWaterMarkTemplateList-通过水印模板ID查询水印...
小数型：代表水平偏移量与输出分辨率宽的比率，相对比例，按照视频尺寸变化，支持 4 位小数，如 0.9999，超出部分系统自动丢弃。0.51 Width string 输出视频上水印图片宽。值有两种形式：整数型：代表水印图片宽的像素值，绝对位置，单位：...
Logview诊断实践
先在本地模拟1个Instance处理的数据量测试UDF的运行时间，优化UDF的实现。默认UDF运行时限是30分钟，也就是30分钟内UDF必须要返回数据，或者用 context.progress()来报告心跳。如果UDF预计运行时间本身就大于30分钟，可以通过参数设置UDF...
性能测试技术指南
数据量 分析 数据量主要包括基础数据量（或者叫历史数据量、垫底数据量、数据库中已有的数据量）和参数化数据量，数据量在性能测试中起到非常重要的作用。对于在数据库中只有几条记录和有几亿条记录里面查询信息，那么结果肯定相差非常大的...
MapReduce常见问题
本文为您介绍在使用MapReduce时的常见问题。问题类别 常见问题 功能咨询 MapReduce的输入源可以是视图吗？MapReduce的结果写入到表或分区时，会覆盖还是追加数据？MapReduce中是否可以调用Shell文件？reduce.setup能否读入输入表？Mapper...
如何解决Redis内存使用率突然升高
客户端处理速度跟不上 Redis 的处理速度，导致输出缓冲区积压。解决方案 请依次排查内存使用率突然升高的原因，并参考对应的解决方案解决问题。排查是否写入大量新数据 排查方法：查看 Redis 性能监控的 入流量 与 写QPS。如果入流量与写...
排查Redis实例内存使用率高的问题
当Redis内存不足时，可能导致Key频繁被逐出、响应时间上升、QPS（每秒访问次数）不稳定等问题，进而影响业务运行。如果发现Redis内存占满或收到内存告警，可参考本文判断内存占用是否长期过高、内存占用是否突然上升、是否发生内存倾斜，并...
常见问题
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
监控告警与日志问题
本文介绍监控告警与日志中的常见问题。Datastream作业TM日志中抛NullPointerException如果没有详细错误栈怎么办？如何针对单个Class设置日志级别参数？如何开启Flink全托管GC日志参数？Datastream作业无延迟、输出曲线，应该如何处理？如何...
Pod异常问题排查
类别 内容 诊断流程 诊断流程 常见排查方法 检查Pod的状态 检查Pod的详情 检查Pod的配置 检查Pod的事件 检查Pod的日志 检查Pod的监控 使用终端进入容器 Pod故障诊断 常见问题及解决方案 常见的Pod异常状态及处理方式 Pod OOM异常问题处理 ...
作业实例详情
详情：以表视图的方式展示作业详细信息，包括子任务列表、各子任务的Worker列表、Worker处理数据量、执行时间及状态信息等。概要：以JSON格式显示作业运行详细信息。结果：显示该作业运行结果。计划：展示作业运行计划信息。工具栏、：页面...
性能指南
数据加工性能 数据加工速率与加工规则有关，具体体现如下：写出输出 与事件大小相关。写出事件越多（事件进行了分裂），写出事件字段越多，内容越长，写出的数据包计算与网络量消耗越大，则速度越慢。反之越快。与事件分组相关。写出目标越...
使用Stage和Task详情分析查询
Task输出数据量 Task的输出数据量，包括输出行数和输出数据大小。根据当前Stage算子计划树中的聚合节点（Aggregation）或Join节点的属性，对应到具体的SQL语句，判断分区字段或者Join条件字段中是否存在某些字段组合。例如：a.id=b.id 中...
全方位安全服务
阿里金融云拥有全方位的安全服务，可以帮助您有效应对各种攻击和安全漏洞问题，确保云服务稳定正常。全方位安全服务解决方案 全方位安全服务是阿里巴巴集团多年来安全技术研究积累的成果，结合阿里云云计算平台强大的数据分析能力，为...
媒体处理常见问题
我们推荐使用阿里云CDN服务来分发您的内容，您可以将存储转码输出内容的OSS Bucket作为阿里云CDN的原站，缩短用户查看媒体文件的延迟，提高用户访问的响应速度，解决网络带宽小、用户访问量大、网点分布不均等问题。更多信息，请参见 CDN...
智能审核
功能概述 应用场景 精准高效的UGC内容审核：海量UGC上传的视频，通过视频智能审核技术，快速检测违规内容，识别媒体质量问题，有效减少人工审核的工作量。实时准确的直播内容审核：实时监控直播视频流的语音、文字、画面内容，快速响应，...
功能特性
单击在线体验 音 视 频增强 音频增强 视频云音频实验室有机结合传统信号处理与深度学习技术，提供全场景音频增强与修复方案。单击在线体验。重要 以下功能需要在 提交转码作业 时 配置相应参数 使用，音频部分按照输出的音频规格和时长，...
阿里云Elasticsearch数据采集解决方案
输出 输出是Logstash处理管道的最后阶段，可以将解析后并加以丰富的数据写入数据接收器。虽然有很多输出插件可用，但本文主要讨论如何使用 Elasticsearch输出，将数据采集到Elasticsearch服务中。以下提供了一个示例Logstash管道，该管道...
DataStream的Timer使用最佳实践
KeyedProcessFunction与RichFlatMapFunction非常相近，同样可以处理单条数据，输出0到任意多条数据，但KeyedProcessFunction只能在KeyedStream上使用，并提供了额外的Timer支持。重要 由于Timer会使用KeyedState进行保存和恢复，因此只能在...
Presto FAQ
本文汇总了使用DLA Presto的常见问题及解决方案。高频问题 在哪些情况下，共享集群（Public）不计费？共享集群（Public）的算力是多大？在控制台执行SELECT语句为什么会有Limit 500的限制？能够突破这个限制吗？阿里云子账号可以在哪里执行...
参数详情
本文介绍媒体处理中转码、工作流、管道等功能API的部分参数详细说明，包含参数类型、参数用途以及参数取值示例等内容。Input详情 本参数被 SubmitJobs-提交转码作业 引用。参数 类型 是否必选 描述 Bucket String 是 输入文件所在OSS ...
概述
其输入与输出是一对一的关系，即读入一行数据，写出一条输出值。详情请参见 自定义标量函数（UDSF）。UDAF（User Defined Aggregation Function）自定义聚合函数，将多条记录聚合成1条记录。其输入与输出是多对一的关系，即将多条输入记录...
Oracle同步至Tablestore
每完成一个数据处理节点配置，可以单击右上角的 数据输出预览 按钮，在弹出对话框中，单击 重新获取上游输出，模拟得到Oracle采样数据经过当前数据处理节点处理后的结果。在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工...
外部表概述
背景信息 MaxCompute SQL作为分布式数据处理的主要入口，可实现EB级别离线数据的快速处理和存储。随着大数据业务的不断扩展，新的数据使用场景在不断产生，MaxCompute计算框架也在不断演化。MaxCompute原来主要面对内部特殊格式数据的强大...
Logtail发布历史
使用插件处理数据时也支持输出内容在文件内偏移量。默认支持采集容器标准输出时，保持连续的上下文。Prometheus数据接入内存优化。问题修复 修复Docker环境下潜在的FD泄露和事件遗漏问题。修复Logtail采集配置更新时文件句柄泄露的问题。...
大数据实时计算性能调优服务
双方协调建立项目沟通汇报机制、争议问题与风险处理、升级与决策机制；双方确认交付物的提交方式、验收标准与验收流程；双方确认项目假设条件、项目变更管理程序与项目变更申请标准；乙方就执行本工作说明书的项目计划开展细项任务、分配、...
使用Topic通信
模拟设备 使用MQTT.fx接入物联网平台 设备模拟器：模拟真实设备与物联网平台建立连接，测试平台与设备端之间的通信功能。真实设备 设备端Link SDK：将真实设备接入物联网平台，并激活上线。设备与物联网平台通信。自定义Topic 如果设备的...
列存索引中HashMatch算子的实现
PolarDB IMCI执行器默认用行号表示执行的中间结果，当大查询所需数据量无法完全存放于内存时则可能会引发大量随机且重复IO，从而影响执行效率。为了解决上述问题，IMCI执行器实现了基于中间结果物化的算子集合，本文介绍了HashJoin算子的...
配置流程
数据传输服务DTS提供的数据加工功能ETL（Extract Transform Load），实现了流式数据的清洗和转换处理，能够准确、高效地提供您需要的数据。本文介绍如何通过DAG模式（可视化拖拽方式）配置ETL任务。背景信息 说明 ETL功能在公测阶段，支持...
组件参考：所有组件汇总
组件类型 组件 描述 自定义组件 自定义组件 支持在AI资产管理中创建自定义组件，自定义组件创建成功后，您可以在Designer中将该组件与官方组件串联使用进行模型训练。源/目标 读OSS数据 该组件用来读取对象存储OSS Bucket路径下的文件或...
LightGBM
它可以说是分布式的，高效的，有以下优势：更快的训练效率 低内存使用 更高的准确率 支持并行化学习 可以处理大规模数据 与常见的机器学习算法对比，速度是非常快的。计算逻辑原理 LightGBM 通过叶分裂(Leaf-wise)策略来生长树。每次从当前...
2020年
2020-03-20 华东2（上海）已下线 Mask精细化分割 对输入图像与粗糙mask进行精细化处理，输出精细化mask。2020-03-20 华东2（上海）Mask精细化分割 图像生产 台标标志擦除 擦除图片中的常见标志，如台标、互联网平台logo标志等。2020-03-20 ...
SubmitJobs-提交转码作业
小数型：代表水平偏移量与输出分辨率宽的比率。范围：（0,1)。支持四位小数，例如：0.9999，超出部分系统自动丢弃。1 Width string 水印图片宽。如果在请求参数中设置了此值，则覆盖水印模板对应水印图片宽。值有两种形式：整数型：代表...
快速入门
Logstash快速入门 Beats Beats是轻量级的数据采集工具，支持一键部署采集器，可视化采集与配置日志文件、网络数据、容器指标等多种类型数据，并集中管理多个采集器。Beats快速入门 高级监控报警 基于Elasticsearch开发的，具备采集、监控、...
SQL 诊断概述
可疑 SQL 可疑 SQL 是指平台根据规则、算法筛选出的将会带来性能问题的 SQL，常见的可疑 SQL 诊断结果及处理建议如下。诊断结果 处理建议 Hint 未生效 异常 SQL，需要 DBA 确认是否使用 OUTLINE 进行执行计划固化。全表扫描性能较差 请分析...
为数据加工任务开启监控告警
为数据加工任务开启监控告警后，日志服务会在数据加工存在异常时，为您发送告警通知，便于您快速发现数据加工过程中的异常问题。本文介绍如何为数据加工任务开启监控告警。前提条件 已创建数据加工任务。更多信息，请参见 创建数据加工任务...
Prompt最佳实践
Prompt 工程简介 Prompt（提示词）是一个指令、问题或者语句，能被 用来引导或指示一个语言模型生成特定的文本输出。Prompt是用户与语言模型交互的起始点，它告诉模型用户的意图，并且期望模型能以有意义且相关的方式回应。通过精心设计的...
- 产品推荐
- 这些文档可能帮助您