通过导入工具导入至数仓版

步骤二:导入数据准备 说明 您还可以使用Linuxsplit 命令对大文件进行切分(建议切分后的文件大小为1 GB~2 GB),文件切分后会形成更多的分片,更利于 AnalyticDB MySQL版 导入工具执行并行导入,从而提升导入速度,缩短导入时间。...

UDF示例:获取字符串(不含分隔符)Value

} }/*使用split对键值对进行分割,将分割后的结果缓存到keyValueCache中*@param keyValueCache 分割后的键值对缓存*@param keyValue 待分割的键值对*@param split 分割符*/private void storeKeyValue(Map,String>keyValueCache,String ...

性能说明FAQ

通过在文件系统写入空洞文件使用Truncate命令生成一个文件来增加文件系统使用容量,从而提升文件系统的读写吞吐。同时,空洞文件和Truncate命令生成的文件在阿里云NAS上占用实际容量,按实际大小计费。更多信息,请参见 通用型NAS计费。...

通过WinSCP上传或下载文件(本地主机为Windows)

重要 若您的本地主机为Linux或macOS系统,请参考 通过SFTP/SCP上传或下载文件(本地主机为Linux或macOS)或 使用SCP命令上传文件Linux云服务器。以下情况,还可以通过Workbench或云助手上传下载文件(不限制本地主机类型):(单个文件不...

文件管理

如果您的文件大小超过限制,可以通过以下方式上传或下载:Linux实例:本地主机为Linux/macOS:通过SFTP/SCP上传或下载文件(本地主机为Linux或macOS)或 使用SCP命令上传文件Linux云服务器。本地主机为Windows:通过WinSCP上传或下载文件...

使用Workbench上传或下载文件

如果您的文件大小超过500 MB,可通过以下方式上传或下载:Linux实例:本地主机为Linux/macOS:通过SFTP/SCP上传或下载文件(本地主机为Linux或macOS)或 使用SCP命令上传文件Linux云服务器。本地主机为Windows:通过WinSCP上传或下载文件...

Linux实例使用df和du命令查看磁盘时结果不一致

本文主要介绍Linux实例使用df和du命令查看磁盘时结果不一致问题的解决方案。问题描述 执行如下命令,查看Linux实例文件系统的使用率。df-h 系统显示类似如下,查看/dev/xvdb1 磁盘分区已占用空间为27 GB,挂载目录为/opt。依次执行如下命令...

Tunnel命令常见问题

本文为您介绍使用Tunnel命令过程中的常见问题。问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式?Tunnel Upload对文件大小是否有限制?记录大小是否有限制?是否要使用压缩?同一个表或分区是否可以并行上传数据...

搭建Linux开发环境

在实际操作中,您需要先上传文件后才可以引用文件,上传文件方式有以下两种,任选其中一种即可:方式一:通过Spark参数上传文件 MaxCompute Spark支持Spark社区版原生的-jars、-py-files、-files、-archives 参数,您可以在提交作业时,...

数据库采集器问题

将大文件拷贝到一个临时目录下,使用 split-b 10m eoa_tmp_objects_ext.csv 命令将大文件切分成小文件分别查看(内容与大文件一致)即可。其中,小文件以 xaa/xab 等文件名存在同级目录下。终端提示“transaction log is not configured,...

cli

更正文档 概述 在日常嵌入式开发中,用户经常会自行实现一套类似Linux Shell的交互工具来实现通过串口命令控制设备进入某种特定的状态,或执行某个特定的操作。如系统自检,模拟运行,或者进入手动模式进行设备点动。AliOS Things原生实现...

安全告警概述

进程异常行为 检测资产中是否存在超出正常执行流程的行为,包括但不限于以下子项:Linux系统计划任务配置文件写入 Linux计划任务文件异常篡改 Linux可疑命令执行 反弹Shell,更多信息,请参见 云安全中心反弹Shell多维检测技术详解。...

检测范围说明

进程异常行为 检测资产中是否存在超出正常执行流程的行为,包括但不限于以下子项:Linux系统计划任务配置文件写入 Linux计划任务文件异常篡改 Linux可疑命令执行 反弹Shell,更多信息,请参见 云安全中心反弹Shell多维检测技术详解。...

如何将ECS实例中的数据备份到本地

概述 本文主要介绍如何将阿里云ECS实例中的数据备份到本地,方便您管理数据。详细信息 您可以将整个ECS的镜像导出到本地,然后将导出的镜像在本地的...关于使用OSS命令行上传文件的方法,请参见 使用命令行上传文件至OSS。适用于 云服务器 ECS

注册MySQL(本地)

使用tar命令解压Linux备份客户端。tar-zxvf hbr-uni-install-linux.tar.gz 登录本地服务器,执行命令激活Linux备份客户端。以下示例中的命令从云备份控制台获取。sudo./client init local-uni-uniUserInfoToken"eyJ1cmwiOiJodHRwczovL2...

扩容分区和文件系统(Linux

重要 CentOS 6操作系统在扩容至2 TiB以上或者扩容GPT分区表时,需要参考 离线扩容分区和文件系统(Linux数据盘)使用 parted 命令进行操作,不能使用本文档介绍的 growpart 命令进行操作,否则会有分区表被破坏的风险。判断是否为GPT分区,...

通过密钥认证登录Linux实例

ssh-i[.pem私钥文件在本地机上的存储路径]username@[公网IP地址]示例如下:ssh-i~/.ssh/ecs.pem ecs-user@10.10.xx.xxx 在支持SSH命令的环境中使用密钥对(通过config文件配置信息)本节介绍如何在支持SSH命令的环境(例如Linux、Windows下...

UDF示例:获取字符串(含分隔符)Value

string UDF_EXTRACT_KEY_VALUE_WITH_SPLIT(string,string<split1>,string<split2>,string)函数功能:在键值对字符串 s 中使用 split1 分割出键值对后,再根据 split2 分割键值对获得键和值,最后返回键 keyname 对应的值。与 获取键值对...

注册Oracle(本地)

使用tar命令解压Linux备份客户端。tar-zxvf hbr-uni-install-linux.tar.gz 登录本地服务器,执行命令激活Linux备份客户端。以下示例中的命令从云备份控制台获取。sudo./client init local-uni-uniUserInfoToken"eyJ1cmwiOiJodHRwczovL2...

Linux系统常用内核网络参数介绍与常见问题处理

本文介绍常见的Linux系统内核网络参数及常见问题的解决方案。注意事项 在修改内核参数前,您需要注意以下几点:从实际需求出发,尽量有相关数据的支撑,不建议您随意调整内核参数。了解参数的具体作用,需注意不同类型或版本的环境中,内核...

生成keytab配置文件

su-hive 在Linux的终端,使用 kinit 命令,缓存Hive principal和keytab文件,并使用 klist 命令,查看是否缓存成功。缓存Hive principal和keytab文件 kinit-kt/tmp/hive.keytab hive-查看是否缓存成功 klist 登录Hive客户端,如果可以访问...

挂载访问FAQ

您可以登录 ECS管理控制台,选择 运维与监控>发送命令/文件(云助手)。在云助手页面中的操作记录查看任务执行成功、执行失败或部分失败状态,单击目标任务操作列的 查看,即可查询每台ECS实例的执行状态。通过云助手控制台批量挂载文件...

Linux实例在修改文件时遇到“Read-only file system*...

使用 chattr 命令修改 sshd_config 文件时,提示 Read-only file system*。使用 mkidr 命令创建一个目录时,提示 cannot create directory 'test':Read-only file system*。使用 cat 命令查看文件时,提示 cannot create temp file for ...

登录Linux服务器失败并报“login:Module is unknown”...

本文介绍登录Linux实例失败并报“login:Module is unknown”错误时的问题原因和解决方案。问题描述 登录Linux实例失败并且在secure日志中出现类似以下报错信息。login:Module is unknown.login:PAM unable to dlopen(/lib/security/pam_...

ECS实例数据传输的实现方式

当您需要为云服务器ECS进行软件部署、数据备份和...如果您使用Workbench远程连接Linux实例,则您可以通过Workbench可视化地管理Linux文件,包括上传文件和下载文件等。具体操作,请参见 使用Workbench上传或下载文件(单个文件不大于500MB)。

TFRecord数据转换

PAI提供多种数据转换功能,可以将图片文件快速转换为TFRecord文件,从而使用训练组件进行模型训练。如果通过PAI智能标注平台进行数据标注,则系统会自动生成标记结果文件,您可以直接调用数据转换组件生成TFRecord文件。如果通过其他平台...

多任务支持

除了cmd 和 job_name 外,其他的选项,都是通过 bcs sub-h 看到的长选项名称,等同于使用命令—${option}。2.多任务支持 说明 config 文件也可以配置多个任务,可以指定任务间依赖关系。job.cfg 内容:[DEFAULT]job_name=log-count ...

C++

具体操作如下:将上述示例代码存储为test.cpp文件,并使用如下命令编译,部分代码需要按照以下要求进行修改:第19行:此处以图像分割能力为例,对应的Endpoint为 imageseg.cn-shanghai.aliyuncs.com 。更多关于访问域名(Endpoint)信息,...

出错提示“Btrfs has been removed”

问题原因 待迁移的操作系统使用了Btrfs文件系统,而迁移后Anolis/Alibaba Linux不再支持Btrfs文件系统,这会导致使用了Btrfs文件系统的硬盘分区中的文件在迁移后将无法读取,从而导致操作系统迁移失败。解决方案 远程连接ECS实例。具体操作...

读写访问文件类问题

当您访问文件系统中的文件时,文件系统中的文件会受到某些限制影响,导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...

ossimport概述

└─workers#Worker列表├─console.sh#命令行工具,目前支持只Linux├─logs#日志目录└─README.md#说明文档,强烈建议使用前仔细阅读 配置文件 单机模式下有两个配置文件 sys.properties、local_job.cfg,分布式模式下有三个配置文件 ...

配置用户标识

ni C:\LogtailData\users\17*745 使用命令提示符(cmd)。type nul>C:\LogtailData\users\17*745 容器环境 如果Logtail部署在阿里云Kubernetes集群中,且为Logtail-ds 1.7.3及以上版本,则您可以通过 容器服务管理控制台 设置用户自定义...

系统类故障排查

硬盘(磁盘)查看当前系统已挂载磁盘使用情况,可以使用以下命令:sudo df-TH 查看当前系统inode信息,可以使用以下命令:sudo df-i 查看具体文件夹占用大小可使用以下命令:sudo du-sh*流量带宽 iftop是Linux系统一个免费的网卡实时流量...

通过Magisk安装EdXposed

由于Xposed框架停更,版本仅支持到Android 7,如果您需要在Android 9和11上继续使用Xposed的强大能力,您可以通过Magisk安装EdXposed(Elder driver Xposed)。本文主要介绍如何在云手机中通过Magisk安装EdXposed框架。警告 使⽤EdXposed...

MapReduce作业提交

本文向您介绍如何使用Jar命令在MaxCompute客户端运行和提交MapReduce作业。MaxCompute客户端提供Jar命令用于运行MapReduce作业,举例如下。jar-conf \home\admin\myconf-resources a.txt,example.jar-classpath.\lib\example.jar:.\other_...

检查Linux实例是否存在SSH服务所需的必备文件或目录

Linux实例中SSH访问所需要的关键文件或目录丢失,可能会导致无法登录Linux实例。本文主要介绍,在无法远程连接轻量应用服务器实例时,检查该实例中是否存在 sshd_config 配置文件的方法。操作步骤 使用救援远程连接Linux服务器。具体操作,...

YARN高安全特性使用指南

说明 yarn.admin.acl=hadoop 配置值的通常格式为 用户 用户组,前面是用户,后面是用户组,中间使用空格分割,用户和用户组可配置多个,均使用逗号(,)分割。例如,user1,user2 group1,group2,只有用户组的情况下,必须在最前面加上空格...

创建用户自定义标识机器组

日志服务支持使用用户自定义标识动态定义机器组,本文介绍创建自定义标识机器组的操作步骤。前提条件 已创建Project和Logstore。更多信息,请参见 创建项目Project 和 创建Logstore。已安装Logtail,安装步骤请参见 安装Logtail(Linux系统...

挂载文件系统失败故障排查

通过自动检查脚本定位问题 Linux挂载NFS协议文件系统失败自动检查脚本 Windows挂载SMB协议文件系统失败自动检查脚本 交叉挂载失败排查思路 Linux挂载SMB协议文件系统失败排查思路 Windows系统挂载NFS协议的通用型NAS文件系统失败排查思路 ...

自定义表值函数(UDTF)

types=[DataTypes.STRING(),DataTypes.STRING()])def split(s:str):splits=s.split("|")yield splits[0],splits[1]在下载文件中udx所在的目录(即 \python_demo 目录)下执行如下命令打包文件。zip-r python_demo.zip udx \python_demo\ ...
共有159条 < 1 2 3 4 ... 159 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI 金融分布式架构 对象存储
新人特惠 爆款特惠 最新活动 免费试用