使用Python依赖
您可以在Flink Python作业中使用自定义的Python虚拟环境、第三方Python包、JAR包和数据文件等，本文为您介绍如何在Python作业中使用这些依赖。背景信息 本文通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三...
Flink Python参考
使用Python依赖 通过以下场景为您介绍如何使用Python依赖：使用自定义的Python虚拟环境 使用第三方Python包 使用JAR包 使用数据文件 使用自定义的Python虚拟环境 方式一：在DataFlow集群中的某个节点创建Python虚拟环境 在DataFlow集群的...
管理其他云厂商服务的数据接入任务
您可以直接修改目标配置文件，也可以复制一个配置文件，修改其配置信息。配置腾讯云服务的配置文件 qcloud-redis-product.yml。说明 以配置文件 qcloud-redis-product.yml 为例。执行以下命令，编辑文件 qcloud-redis-product.yml。vi ...
访问云虚拟主机上的网站提示“Internal Server Error...
具体操作，请参见 Linux操作系统云虚拟主机如何修改文件目录权限。PHP文件配置错误 本步骤以WordPress网站为例，访问该网站后出现“Internal Server Error”报错，请参考以下步骤解决问题。将./wp-includes/class-http.php 文件进行备份。...
单机部署
解压后的文件结构如下：ossimport├─bin│└─ossimport2.jar#包括Master、Worker、TaskTracker、Console四个模块的总jar├─conf│├─local_job.cfg#Job配置文件│└─sys.properties#系统运行参数配置文件├─console.bat#Windows命令...
Linux系统云虚拟主机添加MIME类型
将修改后的.htaccess 文件上传至Linux系统云虚拟主机。相关文档 如果您的云虚拟主机为Windows系统云虚拟主机，您可以在主机管理控制台添加MIME类型，用于指定某扩展名文件的打开方式。具体操作，请参见 Windows系统云虚拟主机添加MIME类型...
搭建Linux开发环境
在实际操作中，您需要先上传文件后才可以引用文件，上传文件方式有以下两种，任选其中一种即可：方式一：通过Spark参数上传文件 MaxCompute Spark支持Spark社区版原生的-jars、-py-files、-files、-archives 参数，您可以在提交作业时，...
离线Spark消费示例
如果您EMR集群使用的是Spark2，则应修改上面命令中的 spark3 应该换成 spark2。如果您希望在本地电脑的开发环境中使用Spark3依赖SLS，类似于Spark2的操作方式，可以按照以下步骤操作：下载集群/opt/apps/SPARK-EXTENSION/spark-extension-...
Java SDK 说明
K1，则需安装 Netty 依赖到本地仓库，注意请选择对应平台 netty-tcnative-openssl-static 版本，并修改相应的 classifier，macOS：osx-x86_64，Linux：linux-x86_64，Windows：windows-x86_64 mvn install:install-file-Dfile=netty-...
本地开发环境准备
IDEA 配置方式：将 settings 文件保存到任意方便使用的位置，比如/example/abc/，修改自己的 IDE（集成开发环境），配置 maven settings 文件地址到/example/abc/settings.xml，使得 IDE 能够使用这个 settings 文件作为运行 Maven 时使用...
如何在Linux和Windows系统之间挂载NTFS格式的云盘？
本文主要介绍在不修改云盘的文件系统前提下，在Linux和Windows系统之间挂载云盘。Linux系统常见的文件系统类型为XFS、EXT3、EXT4等，Windows系统常用的文件系统类型为NTFS、FAT32等，本文使用的文件系统类型为NTFS。操作步骤 场景一：卸载...
Spark
您需下载 hive-serde-3.1.2.jar 和 hive-hcatalog-core-2.3.9.jar 并上传至OSS中，在提交Spark SQL应用时添加 add jar oss:/<testBucketName>/hive-hcatalog-core-2.3.9.jar;add jar oss:/<testBucketName>/hive-serde-3.1.2.jar;语句。...
JindoData版本说明
主要功能 JindoFS存储系统 JindoFS服务能力 支持文件随机写，文件可修改写入。支持HDFS回收站，系统后台按过期时间清理回收站文件。完善HDFS快照功能，快照支持随机修改文件。改进目录删除机制，大幅提升操作性能。实现NsWorker框架，支持...
漏洞管理常见问题
export DEBIAN_FRONTEND=noninteractive 如果您无需使用新内核的默认设置，可手动修改GRUB引导顺序，相关操作参见 ECS Linux CentOS 修改内核引导顺序。漏洞修复完成后我是否还需要重启系统？Windows服务器：在云安全中心控制台完成Windows...
ossimport概述
分布式模式下文件结构如下：ossimport├─bin│├─console.jar#Console模块jar包│├─master.jar#Master模块jar包│├─tracker.jar#Tracker模块jar包│└─worker.jar#Worker模块jar包├─conf│├─job.cfg#Job配置文件模板│├─sys....
通过 Prometheus 监控 OceanBase 数据
muticloud_metric_config.yaml：指标配置文件，此文件默认不需要修改。application.yaml：采集配置文件。obcloud-exporter-1.0-SNAPSHOT-jar-with-dependencies.jar：OBCloud Exporter 程序。readme.md：项目说明。编辑配置文件 ...
通过Canal将MySQL数据同步到阿里云ES
54)~[client-adapter.es7x-1.1.5-jar-with-dependencies.jar:na]A：将canal.adapter-1.1.5\plugin下的client-adapter.es7x-1.1.5-jar-with-dependencies.jar替换为canal-1.1.5-alpha-2版本下的对应文件。说明 您可以参考Canal的issues解决...
Alibaba Cloud Linux 2使用说明
查看或修改参数 查看或修改系统参数 Alibaba Cloud Linux 2在配置文件/etc/sysctl.d/50-aliyun.conf 中更新了下列内核配置参数，运行 sysctl 命令，可查看或修改Alibaba Cloud Linux 2运行时的系统参数。系统参数 说明 kernel.hung_task_...
将Spring Cloud应用托管到SAE
XX:+UseG1GC-Dspring.profiles.active=yace-Dnacos.use.endpoint.parsing.rule=false-Dnacos.use.cloud.namespace.parsing=false-jar/home/admin/app/xx-server.jar 修改后：java-XX:+UseContainerSupport-XX:InitialRAMPercentage=70.0-XX...
基于eRDMA增强型实例部署Spark集群
eRDMA-1.0-for-spark-3.2.1.jar:/path/disni-2.1-jar-with-dependencies.jar spark.executor.extraClassPath/path/spark-eRDMA-1.0-for-spark-3.2.1.jar:/path/disni-2.1-jar-with-dependencies.jar spark.shuffle.manager org.apache....
应用采集器常见问题
分别修改collector/collector.config和javaagent/javaagent.config配置项。collector.listen.port=9996 profiler.collector.port=9996 找不到JAVA_HOME报错如何处理？如果是Linux系统在collector/run.sh和javaagent/attach.sh中手动添加...
修改Linux云虚拟主机的网站文件权限
网站程序文件上传到Linux云虚拟主机后，您可以根据网站访问需要修改文件权限。本文以使用FileZilla为例，介绍修改Linux操作系统独享虚拟主机标准版的网站文件权限的方法。前提条件 已安装FTP客户端。说明 建议您使用FileZilla工具，具体...
制作Java镜像
Spring Cloud、Dubbo、HSF框架下开发并编译的应用WAR包或JAR包，如果需要在 Serverless 应用引擎 SAE（Serverless App Engine）上以镜像方式部署，需要将WAR包或JAR包制作为应用镜像，以便部署时使用。本文介绍镜像制作的使用规范、以不同...
手动部署Java Web环境（Alibaba Cloud Linux 2）
vi/etc/selinux/config 在/etc/selinux/config 文件内，将光标移动到 SELINUX=enforcing 一行，按 i 键进入编辑模式，修改为 SELINUX=disabled，然后按 Esc 键，再输入:wq 并回车，保存关闭SELinux配置文件。说明 如果您想重新开启SELinux...
使用PyJindo访问阿里云OSS-HDFS
x86_64.whl│├─pyjindo-x.y.z-cp36-abi3-linux_x86_64.whl│├─pyjindo-x.y.z-cp37-abi3-linux_x86_64.whl│├─pyjindo-x.y.z-cp38-abi3-linux_x86_64.whl│└─pyjindo-x.y.z-cp39-abi3-linux_x86_64.whl├─plugins│└─xxxx├─...
HBase使用OSS-HDFS服务作为底层存储
您可以通过将 hbase-site 配置文件中的参数 hbase.rootdir 的值修改为OSS地址（格式为 oss:/bucket.endpoint/hbase-root-dir）的方式，指定HBase和WAL文件的存储路径。重要 如果要释放集群，需要先禁用table，确保WAL文件已全量更新到存储...
通过RootPolicy访问
您可以通过RootPolicy为OSS-HDFS服务设置自定义前缀，在无需修改原有访问 hdfs:/前缀作业的基础上，将作业直接运行在OSS-HDFS服务上。前提条件 已创建Hadoop环境、Hadoop集群或者Hadoop客户端。具体操作，请参见 创建Hadoop运行环境。已...
开启或关闭IPv6
在镜像 aliyun_2_1903_64_20G_alibase_20190619.vhd 及之前的版本中，/etc/systemd/network/目录下的.network 文件只配置了 DHCP=ipv4，您可以按照以下步骤修改文件内容来暂时开启IPv6。远程连接ECS实例。具体操作，请参见 通过密码或密钥...
手动部署Java Web环境（Alibaba Cloud Linux 3）
本篇教程介绍如何在Alibaba Cloud Linux 3系统的ECS实例上部署Java web项目，适用于刚开始使用阿里云进行建站的个人用户。准备工作 部署Java Web环境时，已有ECS实例必须满足以下条件：实例已分配公网IP地址或绑定弹性公网IP（EIP）。具体...
配置ECS实例的IPv6地址
sysctl-p Debian 8/9 执行以下命令，修改/etc/default/grub 配置文件。vi/etc/default/grub 按 i 键进入编辑模式，删除 ipv6.disable=1 内容。修改完成后按 Esc 键退出编辑模式，输入:wq 后按下回车键，保存并退出。执行以下命令，修改/...
Hadoop使用JindoSDK访问OSS-HDFS服务
tar zxvf jindosdk-x.x.x-linux.tar.gz 说明 x.x.x表示JindoSDK JAR包版本号。配置环境变量。编辑配置文件。vim/etc/profile 配置环境变量。export JINDOSDK_HOME=usr/lib/jindosdk-x.x.x-linux 配置HADOOP_CLASSPATH。export HADOOP_...
Spark常见问题
示例：#以下配置必须在DataWorks配置项/spark-defaults.conf文件中添加#同时引用多个资源：同时引用public.python-python-2.7-ucs4.zip和public.myjar.jar spark.hadoop.odps.cupid.resources=public.python-python-2.7-ucs4.zip,public....
常见问题
arm64_linux环境集成方式 问题背景 arm64_linux环境下如何集成mychain-java-sdk。解决方案 在官网下载对应版本的Jar包。V0.10.2.12 JAR包 V0.10.2.6 JAR包 说明 V0.10.2.24.5无需下载Jar包，通过Maven坐标即可引入，具体参见 Java SDK说明...
Linux实例的/etc/fstab文件配置错误导致系统启动异常
etc/fstab 文件主要用于保存服务器的磁盘挂载信息，如果该配置文件中写入不正确的挂载信息或者该文件自身存在访问错误，例如：权限配置、文件丢失等，系统启动时就可能出现异常，导致启动失败。解决方案 说明 如果您对实例或数据有修改、...
弱口令安全最佳实践
set password for"<UserName>"="<NewPassword>"Jboss6、7 Jboss6：编辑配置文件/conf/props/jmx-console-users.properties，修改配置文件中的弱口令，修改后的格式为<UserName>=。重启Jboss6。执行 ps-ef|grep jboss 查看当前Jboss6进程。...
如何计算MQTT签名参数
ln-s/root/node-v16.5.0-linux-x64/bin/npm/usr/local/bin/ln-s/root/node-v16.5.0-linux-x64/bin/node/usr/local/bin/执行以下命令，先退出 node-v16.5.0-linux-x64 文件目录，然后创建项目文件 signTool，来存放JavaScript文件和签名库...
挂载文件系统失败故障排查
通过自动检查脚本定位问题 Linux挂载NFS协议文件系统失败自动检查脚本 Windows挂载SMB协议文件系统失败自动检查脚本 交叉挂载失败排查思路 Linux挂载SMB协议文件系统失败排查思路 Windows系统挂载NFS协议的通用型NAS文件系统失败排查思路 ...
配置辅助弹性网卡
Alibaba Cloud Linux 2（systemd-networkd）对网络服务类型为systemd-networkd的Alibaba Cloud Linux 2系统，您需要通过修改网卡配置文件手动配置。执行以下命令，打开辅助弹性网卡的配置文件。vi/etc/systemd/network/60-eth1.network 按 ...
使用文件管理器管理文件
您可以使用FTP客户端管理云虚拟主机上的网站文件，也可以使用云虚拟主机管理控制台中的文件管理器来管理网站文件。本文为您介绍使用文件管理器管理网站文件的方法。前提条件 已自行准备网站文件到本地主机。背景信息 本文以Linux操作系统...
获取Linux镜像文件
在虚拟机完成安装配置后，您可以按照本文操作获取制作好的Linux镜像文件。操作步骤 打开Oracle VM VirtualBox管理器，选择虚拟机，例如 centos VM。单击 设置。依次选择 存储>centos VM.vhd。在右侧 明细 列表中，查看磁盘文件的存储位置，...
- 产品推荐
- 这些文档可能帮助您