HDFS数据源
您也可以指定column字段信息（文件数据列和常量列配置二选一），配置如下。{"type":"long","index":0/从本地文件文本第一列（下标索引从0开始计数）获取INT字段，index表示从数据文件中获取列数据。},{"type":"string","value":"alibaba"/...
基于YUM的安全更新操作
背景信息 关于Alibaba Cloud Linux安全更新记录，请参见 Alibaba Cloud Linux 3安全公告 和 Alibaba Cloud Linux 2安全公告。Alibaba Cloud Linux安全更新根据CVE的通用漏洞评估方法（CVSS3）的评分，将安全更新分为以下四个等级：Critical...
查看快照容量
本文为您介绍如何查看单个数据库文件系统所有快照的容量。前提条件 您已经为某个文件系统至少创建过一份快照。具体操作，请参见 创建快照。根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一...
DescribeDataFlowTasks-查询数据流动任务列表
Completed：数据流动任务执行结束，可以通过查看数据流动任务报告，查看所有文件已正确传输。Canceled：数据流动任务被取消并且没有完成。Canceling：数据流动任务正在被取消。Executing ReportPath string 数据流动任务报告在 CPFS 文件...
历史版本下载
API 变更 新增一个命令行功能，用于数据脱敏，查看 数据脱敏 了解如何使用：desensitize 用来脱敏优化问题的模型文件。通过移除变量名约束名这些带有业务信息的数据，仅留下看不出业务场景的数值数据。sensitize 用来恢复脱敏的文件。新的...
挂载访问FAQ
目前仅支持Linux操作系统挂载NFS文件系统，Windows操作系统挂载SMB文件系统、Windows操作系统挂载NFS文件系统及Linux操作系统挂载SMB文件系统场景，请您登录ECS实例执行命令挂载。更多信息，请参见 Windows系统挂载SMB文件系统、Windows...
CSV
注意：“serialization.encoding”参数：需要根据原始文件的编码来配置，其中Linux平台查看文件编码可以使用“file filepath”查看。（原始文件编码为“ISO-8859”，对于中文乱码可以设置’serialization.encoding’=’gbk’）OpenCSVSerDe...
边界生成器功能介绍
查看选中并浏览要素 当选中属性表中的一行或者多行数据内容后，单击属性表面板上方的 定位 按键，您可以在地图面板中定位并浏览查看被选中的数据内容选区。多选、全选、反选和清空属性表内容 单击勾选属性表内的一行或多行内容即可完成单选...
边界生成器功能介绍
查看选中并浏览要素 当选中属性表中的一行或者多行数据内容后，单击属性表面板上方的 定位 按键，您可以在地图面板中定位并浏览查看被选中的数据内容几何图形。多选、全选、反选和清空属性表内容 单击勾选属性表内的一行或多行内容即可完成...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
ECS实例数据传输的实现方式
文件传输原理 文件传输是信息传输的一种形式，它是在数据源和数据宿之间传送文件数据的过程，也称为文件数据通信。操作系统把文件数据提取到内存中做暂存，再复制到目的地，加密是在文件外加了一个壳，文件本身仍然是一个整体，复制只是把...
将NAS数据迁移至本地
重要 下载文件数据需要占用ECS公网带宽，建议您新购一台ECS实例专门负责文件数据下载，避免占用业务带宽。具体操作，请参见 使用新购ECS作为数据传输中转节点。通过SFTP客户端迁移数据 当有少量文件需要一次性下载时，建议您在本地系统上...
OSS-HDFS数据源
说明 文件数据列（index）和常量列（value）配置二选一。{"type":"long","index":0/从本地文件文本第一列（下标索引从0开始计数）获取LONG字段，index表示从数据文件中获取列数据。},{"type":"string","value":"alibaba"/HDFS Reader内部...
求解器SDK下载和安装
当前最新版本：V1.2.0 发布时间：2024.04.19 V0.25.1 V1.2.0（最新版）Linux linux64x86 文件：mindopt-install-linux64x86-0.25.1.sh 同意协议并下载 文件：mindopt-install-linux64x86-1.2.0.sh 同意协议并下载 linux64aarch 文件：...
高级管理FAQ
目标目录的所有文件数据只要满足生命周期管理策略，即会自动转储至低频存储或归档存储中。设置生命周期管理策略后，文件多久会被转储到低频存储或归档存储？转储时间会和文件系统的大小和转储数据量有关，功能开启后，符合生命周期管理策略...
远程连接Linux服务器
在 Load private key:对话框的底部，选择 All Files(*.*)查看所有格式的文件。在 PuTTYgen Notice 对话框，找到并选择保存在本地的.pem格式的私钥文件，然后单击 确定。在 Parameters 区域，单击 RSA。在 Actions 区域，单击 Save private ...
Tunnel命令常见问题
本文为您介绍使用Tunnel命令过程中的常见问题。问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式？Tunnel Upload对文件大小是否有限制？记录大小是否有限制？...导入文件夹中的文件数据时，提示字段不匹配，但是...
迁移数据至阿里云NAS
以ECS为例，您可以用Linux系统挂载NFS文件系统或Windows系统挂载SMB文件系统，然后就像访问本地数据一样访问NAS上的文件数据。具体操作，请参见 Linux系统挂载NFS文件系统 和 Windows系统挂载SMB文件系统。您也可以在云上搭建业务应用，在...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
离线扩容分区和文件系统（Linux数据盘）
dos Disk identifier:0x9277b47b Device Boot Start End Blocks Id System/dev/vdb1 2048 41943039 20970496 83 Linux 查看数据盘的挂载路径，根据返回的文件路径卸载分区，直至完全卸载已挂载的分区。查看挂载（mount）信息。mount|grep"/...
将MongoDB物理备份文件恢复至自建数据库
本文介绍如何将MongoDB物理备份文件中的数据恢复至本地自建MongoDB数据库。前提条件 实例类型为副本集。实例存储类型为本地盘版。实例未开启 TDE功能。实例的存储引擎为WiredTiger或RocksDB。如果实例的存储引擎为TerarkDB，请使用 逻辑...
产品规格
本文列举了在相同文件系统容量下使用不同客户端访问文件系统时，100 MB/s/TiB基线、200 MB/s/TiB基线、400 MB/s/TiB基线的文件系统性能指标、适用的高级功能、数据流动性能等，您可以根据业务需求选择合适的CPFS存储规格。文件系统实例性能...
从自建PostgreSQL迁移至PolarDB PostgreSQL版
本文介绍通过 pg_dumpall、pg_dump 和 pg_restore 命令将自建PostgreSQL数据库迁移至 PolarDB PostgreSQL版 中。迁移的源库为RDS for PostgreSQL实例时，请参考 从RDS PostgreSQL迁移至PolarDB PostgreSQL版。前提条件 PolarDB PostgreSQL...
将MongoDB物理备份文件恢复至自建数据库
在命令行中执行如下命令将认证文件的权限修改为 400，保证该文件内容仅对该文件所有者可见。sudo chmod 400/test/mongo/keyFile/mongodb.key 说明 此认证文件将应用于所有副本集节点。通过下列步骤为副本集准备两个空的节点。执行如下命令...
RDS MySQL逻辑备份文件恢复到自建数据库
MySQL自带的mysqldump工具可以实现将RDS MySQL逻辑备份文件恢复到自建数据库。本文介绍详细的逻辑备份恢复数据库操作步骤。说明 关于如何选择数据恢复方案，请参见 数据恢复方案概览。通过物理备份文件恢复到自建数据库请参见 RDS MySQL...
单机部署
可以分布执行调入任务├─console.sh#Linux命令行，可以分布执行调入任务├─import.bat#Windows一键导入，执行配置文件为conf/local_job.cfg配置的数据迁移任务，包括启动、迁移、校验、重试├─import.sh#Linux一键导入，执行配置文件为...
2022年
2022-07-14 全部地域 聚合函数 2022-6 功能名称 功能描述 发布时间 发布地域 相关文档 支持在DataWorks公共表中查看外部数据源的元数据信息 支持在DataWorks公共表中查看外部数据源的元数据信息，使基于湖仓的数据开发人员方便查看外部数据...
分布式部署
conf│├─job.cfg#Job配置文件模板│├─sys.properties#系统运行参数配置文件│└─workers#Worker列表├─console.sh#命令行工具，目前支持只Linux├─logs#日志目录└─README.md#说明文档，使用前请仔细阅读 OSS_IMPORT_HOME：...
命令行界面
下载CLI 根据操作系统的不同，下载合适的二进制包，下载地址如下：macOS(amd64)Linux(amd64)Windows 解压下载的压缩包，进入到解压后的文件夹，可获得命令行工具 influx（Windows下为 influx.exe）。启动influx 在cmd终端启动 influx。成功...
集群恢复：按时间点恢复
通过一个完整的数据全量备份（快照）以及后续一段时间的Redo日志，就可以将PolarDB集群恢复到日志保存期限内的任意时间点。在知晓误操作发生的时间点后，可以通过此方式，将整个集群恢复到误操作发生之前。前提条件 已存在备份集。因为按...
如何使用Linux系统的atop监控工具
atop是一款用于监控Linux系统资源与进程的工具，能够报告所有进程的活动。其以一定的频率记录系统和进程活动，采集的数据包含CPU、内存、磁盘、网络的资源使用情况和进程运行情况，并能以日志文件的方式保存在磁盘中。对于每个进程，会显示...
Go-SQL-Driver/MySQL 连接 OceanBase 数据库示例程序
插入一行数据到表 t1 中，设置该行数据的 str 字段的值为 Hello OceanBase。代码如下：_,err=db.Query("insert into t1 values('Hello OceanBase')")if err!nil { log.Fatal(err)} 查询数据。查询表 t1 中的所有数据，并将查询结果赋值给...
使用Influx CLI（命令行界面）连接TSDB For InfluxDB...
通过Influx CLI，用户可以方便地连接到TSDB For InfluxDB®，进行数据读写。本文主要介绍如何使用Influx CLI连接到阿里云上的TSDB For InfluxDB®，以及如何通过CLI写入数据和查询数据。准备工作 首先，需要在阿里云官网上 购买TSDB For ...
手把手教您配置通用型NAS容灾
打开CMD命令行窗口，执行以下命令，将业务文件系统中的数据迁移到容灾文件系统中。cd c:\cwRsync rsync.exe-avP/cygdrive/X/cygdrive/Y/-no-perms-no-owner-no-group 其中，X 和 Y 请根据实际挂载盘符进行替换。说明 阿里云SMB默认不支持...
Alibaba Cloud Linux 3系统关闭CPU漏洞修复的方法
kpti=0 参数 不涉及 不涉及 不涉及 添加 mitigations=off 参数关闭所有漏洞修复 说明 ① 漏洞状态文件表示Alibaba Cloud Linux 3系统所在实例的CPU是否存在漏洞以及采取的处理措施，各状态表示：Not affected：表示当前CPU不存在该漏洞。...
搭建FTP服务器（Linux）
vsftpd（very secure FTP daemon）是Linux操作系统下的一款小巧轻快、安全易用的FTP服务器软件。本文介绍如何在Linux服务器中安装、配置vsftpd，并测试连接FTP服务器。前提条件 已创建Linux轻量应用服务器。具体操作，请参见 创建轻量应用...
部署和使用SVN
cd svnrepos ls Subversion目录说明如下表：目录 说明 db 存放所有的版本控制数据文件。hooks 放置hook脚本文件。locks 用来追踪存取文件库的客户端。format 一个文本文件，文件中只包含一个整数，表示当前文件库配置的版本号。conf SVN...
Presto FAQ
原因：在Linux中使用 file 命令查看文件编码，之后建表的时候使用 LazySimpleSerDe作为Serde。解决方案：如果原始编码为 ISO-8859，您可以进行如下配置 serialization.encoding=gbk。使用Insert类型的SQL语法时，如何减小输出的文件数？您...
审计配置
在使用 数据安全中心DSC（Data Security Center）提供的安全审计功能前，您需要先完成审计配置。DSC 根据您配置的审计模式采集审计日志，并根据已开启的审计规则上报审计告警。本文介绍如何进行审计配置。前提条件 已购买 DSC 企业版。具体...
2023年
使用do-while节点实现复杂的数据分析 2023-09-20 新增通过跨项目数据访问实现不同地域MaxCompute项目数据迁移 新说明 本文为您介绍如何通过跨项目数据访问实现不同Region的MaxCompute项目数据迁移，包括两种使用场景：同云账号内不同Region...
- 产品推荐
- 这些文档可能帮助您