OSS数据源
支持 不支持 支持且仅支持读取TXT格式的文件，且要求TXT中schema为一张二维表。支持类CSV格式文件，自定义分隔符。支持ORC、PARQUET格式.支持多种类型数据读取（使用String表示），支持列裁剪、列常量。支持递归读取、支持文件名过滤。支持...
常见问题
检查文件读取的权限设置是否正常，没有读取权限可能会导致调用失败。问题仍未解决时，建议通过下面的入口获取帮助。模型是否支持私有化部署？目前提供API接口和离线SDK两种调取方式，如需私有化部署，请加入官方钉钉群（群号：23157231）...
任务拆分和执行
} 如果需要打开关闭文件，可以使用接口 IStreamWriter：public interface IStreamWriter<T>extends IStream,IWriter<T>{ } 该接口继承了 IStream 接口，提供了 open 和 close 方法，这两个方法分别会在执行分片前和执行分片后调用。...
ConvertOfficeFormat-文档（例如OFFICE文档）格式的...
DocumentConvertFailed.ExportFileError 文档转换时，处理文件内容失败，请检查源文档是否能够正常打开。DocumentConvertFailed.NeedPassword 该文档需要密码才能打开，请设置 Password 参数。ExecutionTimeout 执行超时，请检查文档大小和...
FS-文件系统
本文介绍FS-文件系统的使用方法及示例。硬件平台 产品型号 是否支持 硬件类型 固件版本号 HaaS600Kit 是 开发板 4.0.1 HaaS510 是 DTU 4.0.1 HaaS520 是 DTU 4.0.1 HaaS530 是 DTU 4.0.1 HaaS531 是 DTU 4.0.1 HaaS632-LT32V 是 蜂窝模组 4...
OSS
CLI命令行输入：测试OSS上传本地文件 oss_test 1/sdcard/oss.txt#上传本地文件，例如SD卡读取oss.txt上传 CLI关键日志：oss upload begin 1.objectfile_path:sdcard/oss.txt localfile_path:/sdcard/oss.txt[106.852]<A>AOS open file/...
Delta Lake 快速开始二
例：读取在存储空间名称为databricks-demo-hangzhou文件路径为demo/The_Sorrows_of_Young_Werther.txt的文件/从oss地址读取文本文档 val dataRDD=sc.textFile("oss:/databricks-demo-hangzhou/demo/The_Sorrows_of_Young_Werther.txt")创建...
Logtail基本问题
网络异常、写入Quota满时，Logtail会停止读取正在采集的日志，保持文件打开，并在稍后进行重试。Logtail日志采集延时如何？Logtail基于事件进行日志采集，一般会在3秒内将日志发往日志服务。如何采集历史日志？如果日志的时间与Logtail处理...
热修复接入检查
如果使用了混淆，新包-apply旧包的mapping.txt文件。确保新旧包混淆规则一致。如果使用了加固，打包使用的新旧包必须是加固前的正常包。若是梆梆加固，需配置忽略sophix文件夹。如果有SO库的修复，确保所需要修复的SO都是以System....
文字识别常见错误码
阿里云视觉智能开放平台能够读取文件并获取真实的文件类型，不是通过文件后缀名进行类型判断，只看文件后缀名是无效的，关于更多文件类型判断和处理信息，请参见 文件类型判断和处理。400 InvalidFile.URL 文件无法下载，请检查本地网络...
人脸人体常见错误码
阿里云视觉智能开放平台能够读取文件并获取真实的文件类型，不是通过文件后缀名进行类型判断，只看文件后缀名是无效的，关于更多文件类型判断和处理信息，请参见 文件类型判断和处理。400 InvalidFile.URL 文件无法下载，请检查本地网络...
导入OSS数据
新数据导入延迟 当存量文件较多时，如果您未开启 使用OSS元数据索引 配置，则可能无法按照新文件的检查周期对新文件进行采集。存在100万左右的存量文件时，新文件采集的延迟时间大约为2分钟。其他数量的存量文件，可依次进行线性类推。
诊断项与诊断结果说明
系统防火墙状态检查 检查系统防火墙是否打开。检查该实例的防火墙。如果实例开启了防火墙，并设置了屏蔽外界访问的规则，可能会导致无法远程连接实例。开启和关闭防火墙的方法，请参见 开启或关闭Linux实例中的系统防火墙 ...
常用错误码ErrorCode
1000 IO 通信错误 检查文件的输入输出-1001 读取文件数据失败 检查待读取文件是否正确-1002 写文件数据失败 检查待写数据是否正确，是否有写入数据权限-1003 路径错误 检查路径是否存在，是否有写入数据权限-1100 文件解析错误 检查待解析...
Red Hat Enterprise Linux（RHEL）7升级为RHEL 8
进入新的操作系统后，可以通过/var/log/leapp/leapp-upgrade.txt 文件查看升级的执行日志，也可以通过/var/log/leapp/leapp-report.txt 文件查看升级报告，报告中包含了升级系统的详细信息：如下日志信息表示一些软件包可能无法安装或升级...
上传代码包到函数计算后文件显示乱码如何处理？
上传代码包到 函数计算 后，遇到代码文件名称或文件内容乱码，您可以参考本文排查原因并处理。文件名称乱码 代码上传到 函数计算 后，文件名称乱码，可能由以下几个原因导致。文件名称编码不一致 函数计算 环境中默认使用UTF-8处理文件名，...
检测攻击类型说明和防护建议
任意文件读取 对于网站提供的文件下载和读取功能，如果是直接通过绝对路径或目录穿越符对文件进行读取和下载，没有相关文件路径的限制，那么，攻击者就可以利用这种方式获取敏感信息，对服务器进行攻击。请检查文件读取操作是否正常。如果...
HDFS数据源
HDFS是一个分布式文件系统，为您提供读取和写入HDFS双向通道的功能，本文为您介绍DataWorks的HDFS数据同步的能力支持情况。支持的版本 目前不支持阿里云文件存储HDFS版。使用限制 离线读 使用HDFS Reader时，请注意以下事项：由于连通默认...
简单上传
bucket.put_object('exampleobject.txt',b'Hello OSS')上传Unicode字符 以下代码用于将Unicode字符上传到目标存储空间examplebucket中的exampleobject.txt文件。上传Unicode字符时，OSS会将Unicode字符自动转换为UTF-8编码的Bytes进行上传...
OSS-HDFS数据源
OSS-HDFS服务（JindoFS服务）是一款云原生数据湖存储产品，OSS-HDFS数据源为您提供读取和写入OSS-HDFS的双向通道，本文为您介绍DataWorks的OSS-HDFS数据同步的能力支持情况。使用限制 离线读 使用OSS-HDFS Reader时，请注意以下事项：由于...
性能监控
您可以通过阿里云云监控来监控文件系统读请求频率、读取请求大小、每秒读取字节数、存储空间等。并通过设置报警规则，及时获取异常信息。本文介绍如何查看性能监控详情及创建报警规则。前提条件 已创建 文件存储 HDFS 版 文件系统。具体...
OSS
The_Sorrows_of_Young_Werther.txt%spark/从oss地址读取文本文档（注意oss文件在账号下上传到对应目录）val text=sc.textFile("oss:/databricks-data-source/demo/The_Sorrows_of_Young_Werther.txt")/使用Scala做WordCount处理 val counts...
批量导出
下载完成后，您可以打开下载的txt文件，查看规则或配置内容。关于txt文件中配置内容的格式，请参见 导出格式说明。（可选）在 任务列表 页面，定位到不再需要的任务，单击 删除。导出格式说明 导出的文件均为txt格式，根据批量导出类型的...
访问部署在ECS实例上的Web站点，提示“No ...如何处理？
解决方案 在.user.ini 隐藏配置文件中手动添加Web站点目录 您需要检查Web站点目录下是否存在.user.ini 隐藏配置文件，如果存在，再检查该文件中的 open_basedir 配置所指定的目录列表是否包含了该Web站点目录。如果未包含，您需要手动添加...
导入概述
Spark Load Spark导入，即通过外部资源（例如Spark）对数据进行预处理生成中间文件，StarRocks读取中间文件导入。Spark Load是一种异步的导入方式，您需要通过MySQL协议创建导入，并通过查看导入命令检查导入结果。FE Frontend，StarRocks...
元数据性能测试
如果为true,则读取文件并报告平均读取时间.默认为false.非必选项>create_write性能测试 使用20个Map，10个Reduce的MapReduce作业，创建1000个文件。hadoop jar./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.6-tests.jar...
Alibaba Cloud Linux 3系统的NFS文件系统读取文件性能...
在NFS（Network File System）文件系统中通过read、copy_file_range等系统调用读取文件时，与同场景下的Alibaba Cloud Linux 2相比，可能会存在明显的性能退化情况。本文介绍在Alibaba Cloud Linux 3系统的ECS实例中，在NFS文件系统下读取...
符号版本管理
符号表格式 Android符号表 xxx.zip|-mapping.txt-存在多个mapping.txt文件时，需手动合并到一个文件中。libxx1.so-要求与发布的so文件同名。libxx2.so|-armeabi-v7a|-libxx3.so-多个架构时，需将文件放到对应的架构目录中。x86|-libxx3.so-...
流式上传
上传文件流 以下代码用于将文件流上传到目标存储空间examplebucket中exampledir目录下的exampleobject.txt文件。const OSS=require('ali-oss');const fs=require('fs');const client=new OSS({/yourRegion填写Bucket所在地域。以华东1...
表实用程序命令
如果您确定在此表上执行的操作没有超过计划指定的保留时间间隔，你可以通过设置ApacheSpark属性spark.databricks.delta.retentionDurationCheck.enabled设置为false来关闭此安全检查。选择的时间间隔，必须比最长的并发事务长，也必须比...
什么是应用防护
任意文件读取 对于网站提供的文件下载和读取功能，如果是直接通过绝对路径或目录穿越符对文件进行读取和下载，没有相关文件路径的限制，那么攻击者就可以利用这种方式获取敏感信息，并对服务器进行攻击。请检查文件读取操作是否正常。如果...
导入OSS数据
您可以将OSS Bucket中的日志文件，通过数据导入方式导入到日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到OSS Bucket中。具体操作，请...
阿里云OSS服务访问
常见问题 如果在OSS文件管理页没有看到 fileFromEdge.txt 文件，可能有如下几种原因：函数触发时间还没到：函数定时每分钟运行一次，如果刚部署完成，函数有可能还没有运行。请等待2分钟刷新页面查看。网关本地系统时间不正确：本地时间可...
导入Amazon S3文件
错误处理机制 错误项 说明 读取文件失败 读文件时，如果遇到文件不完整的错误（例如由网络异常、文件损坏等导致），导入任务会自动重试，重试3次后仍然读取失败，将跳过该文件。重试间隔和检查新文件周期一致。如果检查新文件周期为永不...
TensorFlow常见问题
使用 tf.gfile.Glob、tf.gfile.FastGFile、tf.WhoFileReader()及 tf.train.shuffer_batch()，适用于批量读取文件（读取文件之前需要获取文件列表。如果批量读取，还需要创建Batch）。使用 Designer 搭建深度学习实验时，通常需要在界面右侧...
视觉搜索常见错误码
阿里云视觉智能开放平台能够读取文件并获取真实的文件类型，不是通过文件后缀名进行类型判断，只看文件后缀名是无效的，关于更多文件类型判断和处理信息，请参见 文件类型判断和处理。400 InvalidFile.URL 文件无法下载，请检查本地网络...
商品理解常见错误码
阿里云视觉智能开放平台能够读取文件并获取真实的文件类型，不是通过文件后缀名进行类型判断，只看文件后缀名是无效的，关于更多文件类型判断和处理信息，请参见 文件类型判断和处理。400 InvalidFile.URL 文件无法下载，请检查本地网络...
前言
示例代码包括以下内容：示例文件 示例内容 Object.php 文件的相关操作，包括 上传文件、下载文件 和 管理文件 等 MultipartUpload.php 分片上传 Signature.php URL签名授权访问 Callback.php 上传回调 Image.php 图片处理 LiveChannel.php ...
图像分析处理常见错误码
阿里云视觉智能开放平台能够读取文件并获取真实的文件类型，不是通过文件后缀名进行类型判断，只看文件后缀名是无效的，关于更多文件类型判断和处理信息，请参见 文件类型判断和处理。400 InvalidFile.URL 文件无法下载，请检查本地网络...
使用Fuse-DFS挂载文件存储 HDFS 版
本文主要介绍如何使用Fuse-DFS工具实现 文件存储 HDFS 版 在本地文件系统的映射。前提条件 已 创建文件系统 和 添加挂载点。已为Hadoop集群所有节点安装JDK，且JDK版本不低于1.8。建议您使用的Hadoop版本不低于2.7.2，本文使用的Hadoop版本...
- 产品推荐
- 这些文档可能帮助您