通过Logstash导入数仓版
以日志数据为例，由于 AnalyticDB MySQL 支持原生JDBC方式访问，您可以通过开源logstash output插件 logstash-output-jdbc 将日志数据导入 AnalyticDB MySQL 中进行进一步分析。但经过测试发现，在日志量非常大的情况下，通过JDBC方式将...
查询日志
调试日志默认关闭，您需要通过以下方式开启：安装logstash-output-file_extend插件，具体操作请参见 安装或卸载插件。在管道配置的output中配置 file_extend 参数，具体操作请参见 通过配置文件管理管道。开启调试日志后，您可以在调试日志...
Logstash FAQ
说明 阿里云Logstash默认不提供公网访问能力，如果您需要采集公网HTTP请求，可通过配置NAT网关实现。具体操作，请参见 配置NAT公网数据传输。如何通过Logstash，将日志服务数据同步到Elasticsearch上？您可以通过logstash-input-sls插件...
上传与安装自定义插件
当您需要使用自定义插件或系统默认插件中不包含的开源插件时，可通过阿里云Elasticsearch的自定义插件上传与安装功能，在实例中上传并安装对应插件。本文介绍具体的操作方法。前提条件 准备待上传的插件，并确保插件的可用性和安全性。插件...
什么是阿里云Logstash
为什么选择阿里云Logstash 阿里云Logstash除了支持所有官方预置插件外，还致力于打造包含logstash-input-sls、logstash-input-oss、logstash-output-oss等适用各类场景的插件中心，为您提供更为强大的数据处理和搬迁能力，实现云上数据生态...
通过Logstash导入数仓版
bin/plugin install$bin/plugin update Logstash从1.5版本开始集成Kafka，Logstash 1.5及以上版本中所有插件的目录和命名都发生了改变，插件发布地址为 Logstash-plugins。配置插件。Input配置示例 以下配置可以实现对Kafka读取端...
logstash-output-oss插件使用说明
通过logstash-output-oss插件，您可以将数据批量传送到阿里云对象存储服务OSS（Object Storage Service）中。本文介绍如何使用logstash-output-oss插件。说明 logstash-output-oss是阿里云维护的开源插件，详细信息，请参见 logstash-...
使用Logstash（流式数据传输）
您可以通过Logstash的输出插件 logstash-output-maxcompute，将Logstash收集的日志数据使用MaxCompute流式数据通道（Streaming Tunnel）功能上传到MaxCompute。前提条件 在执行操作前请确认您已完成如下操作：已安装 Logstash 并创建...
启用插件
在插件市场中可以使用平台提供的插件，以及当前主账号...在 插件市场 列表中单击需要启用的插件卡片。在 插件详情 页单击 插件配置。在 插件配置 页面，选择 应用范围 并在 插件配置 中编辑 YAML，打开 生效开关 并单击 确认 后插件立即生效。
FE参数配置
配置项列表 max_dynamic_partition_num 默认值：500 是否可以动态配置：true 是否为Master FE节点独有的配置项：true 说明：用于限制创建动态分区表时可以创建的最大分区数，避免一次创建过多分区。数量由动态分区参数中的 开始 和 结束 ...
获取实例目标数据库下所有插件的信息
该接口用于获取实例目标数据库下所有插件的信息。接口说明 适用引擎 RDS PostgreSQL 相关功能文档 注意 使用该接口前，请仔细阅读功能文档，确保完全了解使用接口的前提条件及使用后造成的影响后，再进行操作。管理插件 调试 您可以在Open...
TextRelevance
函数列表 函数原型 函数简介 TextRelevance create(OpsScorerInitParams params,CString indexName,CString fieldName)创建TextRelevance void setGroupScoreMergeOp(CString opName)设置多个query group结果的merge方式，可以是sum和max，...
自定义Pro版集群的控制面组件参数
支持自定义的参数，请参见 默认参数列表，具体请以控制台界面为准。修改参数之后，控制面会重启，建议您选择业务低谷期操作。修改参数之后，您输入的参数会覆盖原集群提供的默认参数，从而导致默认参数失效。自定义参数配置时，请确保您...
自定义Pro版集群的控制面组件参数
支持自定义的参数，请参见 默认参数列表，具体请以控制台界面为准。修改参数之后，控制面会重启，建议您选择业务低谷期操作。修改参数之后，您输入的参数会覆盖原集群提供的默认参数，从而导致默认参数失效。自定义参数配置时，请确保您...
自定义Pro版集群的控制面组件参数
支持自定义的参数，请参见 默认参数列表，具体请以控制台界面为准。修改参数之后，控制面会重启，建议您选择业务低谷期操作。修改参数之后，您输入的参数会覆盖原集群提供的默认参数，从而导致默认参数失效。自定义参数配置时，请确保您...
自定义Pro版集群的控制面组件参数
支持自定义的参数，请参见 默认参数列表，具体请以控制台界面为准。修改参数之后，控制面会重启，建议您选择业务低谷期操作。修改参数之后，您输入的参数会覆盖原集群提供的默认参数，从而导致默认参数失效。自定义参数配置时，请确保您...
获取实例目标数据库下所有插件的信息
该接口用于获取实例目标数据库下所有插件的信息。接口说明 适用引擎 RDS PostgreSQL 相关功能文档 注意 使用该接口前，请仔细阅读功能文档，确保完全了解使用接口的前提条件及使用后造成的影响后，再进行操作。管理插件 调试 您可以在Open...
基于已有工程且使用 CocoaPods 接入
参数列表 您可以通过配置参数，改变插件的一些默认行为。使用方法：在 podfile 中的 plugin"cocoapods-mPaaS"后方添加参数。示例如下：参数 功能 适用版本:guard_image_version=>6 生成 V6 保镖图片≥V0.9.6:guard_image_version=>5 生成 V...
logstash-input-oss插件使用说明
logstash-input-oss插件基于阿里云消息服务MNS（Message Notification Service），实现了当关联的对象存储服务OSS（Object Storage Service）文件变化时，触发MNS通知阿里云Logstash从OSS文件系统中获取最新的数据。您可以在OSS的事件通知...
logstash-input-maxcompute插件使用说明
通过logstash-input-maxcompute插件，您可以读取MaxCompute离线表的数据到其他数据源中。前提条件 您已完成以下操作：安装logstash-input-maxcompute插件。详情请参见 安装或卸载插件。开通阿里云MaxCompute产品，并创建项目、创建表和导入...
概述
输入插件列表 插件名称 说明 文件输入插件 支持采集主机、容器的文本日志。更多信息，请参见 采集主机文本日志、通过DaemonSet-控制台方式采集容器文本日志、通过Sidecar-控制台方式采集容器文本日志、通过DaemonSet-CRD方式采集容器日志、...
ListPluginForUuid-查询资产插件信息
查询资产的插件信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用...
创建自定义权限策略
["elasticsearch:ListLogstash"]查看Logstash实例列表的权限。授权后，RAM用户可在实例列表页面中，查看对应地域下包含的所有Logstash实例。["elasticsearch:GetEmonProjectList"]获取集群监控项目列表的权限。重要 此Action需要与[...
阿里云Elasticsearch数据采集解决方案
通过输入、过滤和输出插件，Logstash可以对任何类型的事件进行加工和转换。Logstash通过事件处理管道来执行任务，其中每个管道至少包含以下各项中的一个：输入 从数据源读取数据。官方支持多种数据源，包括文件、http、imap、jdbc、kafka、...
识别任务说明
调整系统默认任务扫描设置 系统默认任务默认每天凌晨执行一次扫描，您可以根据实际需要调整系统默认任务的扫描周期。建议您将扫描周期设置为与数据库内容更新的频率大致一致，以便及时发现数据库中的变化的数据中存在的敏感信息。可设置的...
基于函数计算快速部署可切换模型的Stable Diffusion
在扩展插件列表中，选择需要使用的插件，单击 Apply and quit，重启后的WebUI就会自带已选择的插件。内置的常用插件 ADetailer插件：修复崩坏脸。Deforum插件：瞬息宇宙视频制作。Prompt all in one插件：提示词翻译助手。Roop插件：一键...
Spring Cloud Gateway应用路由
EDAS使用Java Agent技术以无侵入的方式增强托管的Spring Cloud Gateway应用，支持动态路由和插件配置能力。本文介绍如何在EDAS中进行Spring Cloud Gateway的常见两类配置：路由（Route）和插件（GatewayFilter）。使用限制 支持Spring ...
自定义插件安装错误的排查与解决方法
在安装插件时，需要注意：不允许上传与阿里云Elasticsearch的系统默认插件同名的插件。如果您要上传同名的系统插件，需要先修改待上传的插件的名称。对于pingyin、IK等插件，在自建环境测试安装时，需要先删除对应的原生插件，然后手动修改...
更新 mPaaS 插件
mPaaS 插件在 5.0.5 版本中，增加了检查更新的功能。因此，在 5.0.5 之前和之后的版本需要采取不同的升级方式。您可以在 mPaaS 插件中点击 Edit>mPaaS>关于 中查看当前正在使用的 mPaaS 插件的版本号，以此选择不同的升级方式。插件版本...
使用云助手插件
默认情况下运行插件会检查本地是否已经安装了此插件，如果本地未安装此插件或者已安装插件版本号小于线上版本，那么会从线上下载插件安装并运行。使用-local 参数可以限制仅运行本地已安装的插件，如果插件未安装则会报错。删除插件 执行...
Logstash数据写入问题排查方案
在使用阿里云Logstash将数据写入阿里云Elasticsearch（output指定为阿里云Elasticsearch）时，您可能会遇到网络不通、管道配置错误、负载高、管道正常启动但无数据写入目标端以及服务正常但缺少数据等问题，此时您可以参考本文的排查方案...
BM25F
参数列表：fieldName—字段名称，字段需要为指定索引中含有的字段，如果在创建BM25F对象是指定了字段列表，fieldName需要在字段列表中出现，需要为字符串常量。paramB—b的值，默认为0.1。void setTotalDocNum(long totalDocNum)设置应用的...
Topic操作
注意：对于使用DTS、以及Logstash插件、Flume插件、OGG插件、Fluentd插件写入DataHub，暂不支持SchemaRegister,用户需要通过SDK appendField接口 或者 console工具 进行添加 名词解释:版本号:Tuple类型Topic在创建完成后会自动生成版本号，...
FieldMatchWeighted
参数列表：exactMatchBonus—加权分数，默认为1.0。void setNgramMatchBonus(double ngramMatchBonus)设置查询词是字段的一个片段时的加权分数，该函数必须在算分插件初始化阶段调用。参数列表：ngramMatchBonus—加权分数，默认为0.6。...
热搜和底纹
查询热搜列表 描述 查询热搜列表，默认返回模型推荐的热搜列表。方法 GET URL/v3/openapi/apps/{app_name}/actions/hot?hit={hit}&sort_type={sort_type}&user_id={user_id}&model_name={model_name} 说明 以上 URL 省略了请求Header参数及...
创建应用分组
初始化安装监控插件 开关默认打开。订阅事件通知 当应用分组中的资源产生严重或警告级别的事件时，云监控自动给报警联系人组中的报警联系人发送报警通知。订阅事件通知 开关默认打开。报警联系人组 用于接收报警通知的联系人组。关于如何...
可观测可视化 Grafana 版与开源Grafana对比
云服务默认集成 默认集成ARMS Prometheus（支持一键同步ARMS Prometheus大盘模板）、日志服务SLS和云监控CMS插件，并默认集成ARMS告警大盘，且后续将会增加其他监控默认大盘。不支持。SLA SLA保障，优势如下：多副本。独享高性能数据库。独...
可观测可视化 Grafana 版与开源Grafana对比
云服务默认集成 默认集成ARMS Prometheus（支持一键同步ARMS Prometheus大盘模板）、日志服务SLS和云监控CMS插件，并默认集成ARMS告警大盘，且后续将会增加其他监控默认大盘。不支持。SLA SLA保障，优势如下：多副本。独享高性能数据库。独...
Ark 包介绍
Maven 插件 SOFAArk 默认提供的 Maven 插件 sofa-ark-maven-plugin 可以将普通 Java 工程或者 Spring Boot 工程打包成标准格式 Ark 包。基于 Fat Jar 技术，您使用 java-jar 命令可以直接启动 Ark 包。Maven 插件坐标为：<plugin><groupId>...
场景编辑工作台
左侧面板 未选中3D模型前，左侧默认显示 我的资源 列表，展示已上传至孪生空间的 3D资源 及对应模型名称。可通过拖拽方式添加模型至场景编辑区。说明 如果当前实例下购买的是IoT孪生引擎旗舰版服务，IoT孪生引擎会提供官方3D模型。您可单击...
- 产品推荐
- 这些文档可能帮助您