利用配置中心规范构建 PaaS 服务配置
配置规范问题的产生 如果是单一应用的单一属性配置，使用以下配置文件即可完成，没有配置规范的问题。配置目录结构-app|-src|-config|-application.properties/配置内容 RCV_INTERVAL_TIME=20 但是，如果是为分布式 PaaS 服务编写分布式...
名词解释
配置 在系统开发过程中通常会将一些需要变更的参数、变量等从代码中分离出来独立管理，以独立的配置文件的形式存在。目的是让静态的系统工件或者交付物（如WAR，JAR包等）更好地和实际的物理运行环境进行适配。配置管理一般包含在系统部署...
配置扩展文件
当您需要在阿里云Logstash的配置文件中定义驱动文件时，可通过扩展文件配置功能，上传所需的驱动文件。同时扩展文件配置功能也提供了对所有扩展文件进行管理的能力。操作步骤 进入 阿里云Elasticsearch控制台的Logstash页面。进入目标实例...
入门概述
配置文件系统容灾方案 手把手教您配置通用型NAS容灾 配置文件系统的ACL权限 NAS SMB ACL NAS NFS ACL 常见问题 开通NAS服务后，就开始计费吗？NAS是否支持在非阿里云计算节点中挂载？NAS的存储类型、存储规格支持相互转换吗？多个计算节点...
使用Fuse-DFS挂载文件存储 HDFS 版
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Fuse-DFS 在Hadoop客户端上安装依赖并载入FUSE模块。执行以下命令，安装依赖。yum...
CDH6数据迁移
步骤二：配置 文件存储 HDFS 版 登录CDH6的Cloudera Manager管理页面。配置 文件存储 HDFS 版 实现类及Java SDK。在 主页 页面，选择 配置>高级配置代码段，进入 高级配置代码段 页面。在搜索框中输入 core-site.xml 进行搜索，在搜索结果...
入门概述
本文介绍从创建到使用CPFS文件系统的全流程，帮助您快速...配置文件系统的ACL权限 基于NFSv4协议的访问控制 常见问题 什么是文件存储CPFS？CPFS的使用场景有哪些？文件存储CPFS支持哪些访问协议？文件系统用于计费的存储容量是如何计算的？
下载SDK配置
connection-profile-standard.json:适用于 Java、Nodejs、python SDK 的配置文件，内容与 connection-profile-standard.yaml 一致，唯一区别在于是JSON格式。可执行脚本 bootstrap.sh：用于下载SDK源码、SDK相关的demo app、以及示例智能...
迁移开源HDFS的数据到文件存储 HDFS 版
在迁移集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储HDFS版文件系统。验证迁移集群和 文件存储 HDFS 版 实例之间的连通性。执行以下命令，在 文件存储 HDFS 版 上创建目录（例如/dfs_links）。hadoop fs-mkdir/dfs_...
编写配置化合规包模板
如果API与该配置文件均已填写合规包名称，则以配置文件的合规包命名为第一选择。riskLevel 否 合规包风险等级。用于区分不同合规包的重要性，取值：1：低风险。2：中风险。3：高风险。description 否 合规包描述。用于补充描述合规包的应用...
创建文件系统
在 创建 面板，配置文件系统相关信息。参数 说明 地域 选择需要创建文件系统的地域。重要 文件系统与待挂载的云服务器ECS实例必须在同一地域，不同地域的CPFS文件系统与云服务器ECS不能互通。可用区 可用区是指在同一地域内，电力和网络...
实时算法编排
回到Python脚本组件的配置栏，单击 动态输出配置 下的 Python输出。在 动态输出配置 面板，单击 添加，新增一条参数输入框，填写输出参数和中文描述后，单击 确定 按钮，完成Python脚本组件动态输出配置。重要 输出配置中填写的输出参数...
通过ACM动态推送配置
该应用包含一个配置文件app.cfg，该配置文件包含线程池大小 threadPoolSize 和日志级别 logLevel 这两个配置项。现在需要同时调整该应用在上述两台服务器上的配置，并动态刷新应用的状态。图 1.示例场景：通过ACM动态推送配置 步骤一：在...
在文件存储 HDFS 版上使用Apache HBase
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Apache HBase 将Hadoop中配置的core-site.xml复制到${HBASE_HOME}/conf目录下。cp...
配置基础告警规则
配置示例 例如：配置文件系统数据量连续3个周期大于或等于4,155,796,933,836字节时，触发紧急级别的报警。说明 当文件系统进行扩容操作后，由于总存储空间发生了变化，您需要修改报警规则，重新设置阈值。如果需要监控文件系统的多个性能...
Linux系统通过接入点访问文件系统
开启RAM策略后，未配置RAM策略 或.credential 配置文件中accessKeyID或accessKeySecret配置错误。使用STS Token超期。解决方案 检查挂载命令中填写的域名是否正确。关于如何查看接入点域名，请参见 查看接入点域名。检查接入点权限组配置。...
通过ECS实例RAM角色访问ACM
背景信息 以往，如果部署在ECS实例中的应用程序需要访问ACM，必须将AccessKey以配置文件或其他形式保存在ECS实例中，这在一定程度上增加了AccessKey管理的复杂性，并且降低了AccessKey的保密性。创建AccessKey的具体操作，请参见 获取...
第三方认证文件管理
Kerberos认证过程中需要使用keytab认证文件和krb5.conf配置文件完成认证行为，其中krb5.conf文件主要用于存储KDC服务器的相关配置，keytab文件用于存储资源主体的身份验证凭据，包含principals和加密principal key。使用Kerberos认证前，...
基本概念
ECS通过命令行挂载，容器集群（例如Kubernetes）通过控制台或配置文件挂载。挂载点 挂载点是NAS文件系统在网络环境中的连接点，以域名形式出现。通用型NAS最多可以配置两个挂载点，极速型NAS只能配置一个挂载点。一个网络环境中仅需要一个...
Logtail采集详情
本文介绍Logtail的采集过程，包括监听日志、读取日志、...说明 如果要调整数据的发送速度和最大并发数，您可以设置启动参数配置文件中的 max_bytes_per_sec 参数和 send_request_concurrency 参数。具体操作，请参见 设置Logtail启动参数。
开发PyODPS脚本
前提条件 已配置Python开发环境，详情请参见 配置Python开发环境。操作步骤 在Project区域右键单击 scripts，选择 New>MaxCompute Python。在 Create new MaxCompute python class 对话框，填写 Name，从 Kind 列表中选择 PyODPS Script。...
Logtail限制说明
Docker 采集容器标准输出的限制说明如下：必须在Docker的配置文件 daemon.json 中添加"log-driver":"json-file。如果是Centos 7.4及以上版本（除Centos 8.0以外），需设置 fs.may_detach_mounts=1。更多信息，请参见 Bug 1468249、Bug ...
Logtail
Docker 采集容器标准输出的限制说明如下：必须在Docker的配置文件 daemon.json 中添加"log-driver":"json-file。如果是Centos 7.4及以上版本（除Centos 8.0以外），需设置 fs.may_detach_mounts=1。更多信息，请参见 Bug 1468249、Bug ...
文件存储 HDFS 版和对象存储OSS双向数据迁移
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：Hadoop集群部署JindoSDK 下载最新的 JindoSDK安装包。本文以jindosdk-4.5.0为例。执行...
在文件存储 HDFS 版上使用Presto
步骤一：Hadoop集群挂载 文件存储 HDFS 版 实例 在Hadoop集群中配置 文件存储 HDFS 版 实例。具体操作，请参见 挂载文件存储 HDFS 版文件系统。步骤二：配置Presto 执行以下命令，解压Presto安装包。tar-zxf presto-server-0.265.1.tar.gz ...
集成WAF日志到Syslog系统
本文介绍了如何使用Python Program将Web应用防火墙（WAF）的日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。背景信息 该方案的整体集成架构如下图所示：阿里云日志服务为日志数据提供...
Linux系统挂载NFS协议文件系统
打开/etc/netconfig 配置文件，注释掉inet6相关的内容（如下图所示）。打开/etc/fstab 配置文件，添加挂载配置。如果您使用的是通用型NAS，配置示例如下。使用NFS v3协议挂载文件系统：file-system-id.region.nas.aliyuncs....
采集主机文本日志
文件黑名单 选择 文件黑名单，配置文件名为 app_inner.log，则表示采集时忽略所有名为 app_inner.log 的文件。目录黑名单 选择 目录黑名单，配置目录为/home/admin/dir1，则表示在采集时忽略/home/admin/dir1 目录下的所有文件。选择 目录...
多台ECS实例批量挂载同一NAS文件系统
SystemMissingFstab 操作系统缺少自动挂载配置文件/etc/fstab。SystemBashOutdated 操作系统的Bash版本太旧，请升级到4.0或更高版本。BadInputMountTarget 输入的挂载点参数错误，请使用以.nas.aliyuncs.com 结尾的挂载点。...
Linux系统挂载SMB协议文件系统
打开/etc/fstab配置文件，添加自动挂载配置。挂载点地址>/myshare/mnt cifs vers=3,guest,uid=0,gid=0,dir_mode=0755,file_mode=0755,mfsymlinks,cache=strict,rsize=1048576,wsize=1048576 0 0 示例中主要参数说明，请参见 SMB（Linux）...
在云桌面内挂载CPFS文件系统
打开/etc/fstab 配置文件，添加挂载配置。file-system-id.region.nas.aliyuncs.com:/share/path /mnt cpfs-nfs vers=3,rsize=1048576,wsize=1048576,hard,timeo=600,retrans=2,_netdev,noresvport 0 0 上述命令中的参数说明如下表所示。...
在文件存储 HDFS 版上使用Apache Tez
方式二：安装Tez时使用集群环境中的Hadoop依赖 如果Hadoop环境中已配置 文件存储 HDFS 版 Java SDK，则不需要额外配置。不支持Hadoop集群滚动升级。方式三：安装Tez时使用额外的Hadoop依赖 需要将 文件存储 HDFS 版 Java SDK放到Tez的依赖...
配置CDH6使用文件存储 HDFS 版
数据迁移完成后，您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务，才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令，将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...
安装CLI
若提示pip3命令无法识别，则说明您未配置Python环境变量，此时您可以使用 cd 进入Python安装路径后，再执行安装命令。执行如下安装命令安装CLI。pip3 install aliyun-log-python-sdk aliyun-log-cli-U-no-cache 验证安装结果。运行命令如下...
PyMySQL 连接 OceanBase 数据库示例程序
示例如下：obclient-hxxx.xxx.xxx.xxx-P3306-utest_user001-p*-Dtest 步骤四：修改 config.py 文件中的数据库连接信息 根据 步骤三：获取 OceanBase 数据库连接信息 中的信息修改项目文件 python-pymysql/config.py 中的数据库连接信息。...
导入历史日志文件
如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。如果您需要采集历史日志，可使用Logtail自带的导入历史日志文件功能。前提条件 已在服务器上安装0.16.15（Linux系统）或1.0.0.1（Windows系统）及以上版本的...
FTP Check节点
如果文件存在，则启动调度下游任务，不存在，则按照配置的间隔时间重复检测，直到满足检测的停止条件时停止检测。该节点通常作为DataWorks调度系统与其他调度系统之间传递信号使用。本文为您介绍使用FTP Check节点的流程和注意事项。前提...
Python SDK使用说明
然后，可以使用以下 Python 代码读取配置文件并调用阿里云 SDK。此处以v20161101版本为例，调用DescribeCasters接口：#!usr/bin/env python#coding=utf-8 from configparser import ConfigParser from aliyunsdkcore.client import ...
防盗链
您可以使用Python SDK在OSS中配置基于请求标头Referer的访问规则，包括白名单Referer、黑名单Referer以及是否允许空Referer等，阻止某些Referer访问您的OSS文件，防止其他网站盗用您的文件，并避免由此引起的不必要的流量费用增加。...
PythonArtifact
名称 类型 描述 示例值 object 本数据结构代表 Python 类型作业必填的信息。pythonArtifactUri string Python 类型作业 URL 全路径。https://oss/bucket/test.py mainArgs string 启动参数。start from main entryModule string Python 的...
- 产品推荐
- 这些文档可能帮助您