Excel
当不输入另存路径的时候就是保存当前已打开的Excel 参数说明 file另存为的文件路径 调用样例-rpa.app.microsoft.excel.Sheet.Excel.save-#注意事项：使用前需确认已安装MicroSoft相关软件#进行保存操作并不会关闭Excel进程#如果excel文件为...
JAR作业开发
方式 方法 具体步骤 方式一 在JAR作业中使用代码去读取存储在本地的配置文件。在Flink全托管开发控制台左侧 资源管理 页面，上传该文件。上传的附件依赖文件会固定被保存在oss:/ossBucketName/artifacts/namespaces/namespaceName/目录，也...
离线同步常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少...
Excel
当不输入另存路径的时候就是保存当前已打开的Excel 参数说明 file另存为的文件路径 调用样例-rpa.app.wps.excel.Excel.save-#注意事项：使用前需确认已安装WPS相关软件#进行保存操作并不会关闭Excel进程#如果excel文件为新建的，...
上下游存储
Flink和Kafka之间的网络连通并不意味着能读取数据，只有Kafka Broker在bootstrap过程中返回的集群metadata中描述的Endpoint，才可以连通Flink和Kafka，并读取到Kafka的数据，详情请参见 Flink-cannot-connect-to-Kafka。检查办法为：使用...
管理数据
本文为您介绍如何在数据填报中新增表单并对填报的数据进行管理。前提条件 已新建数据填报，请参见 新建数据填报。使用限制 表单的开发者和项目空间的管理员能够管理所有数据，填报的人只能管理自己填报的数据。没有被分享或只有公开链接的...
使用Python读文件
cat>openfile.py<<EOF @resource_reference{"test.xlsx"}#-*-coding:utf-*-import os import sys sys.path.append('/tmp/chars/')import openpyxl print '=python execute ok=' print("start=")args=sys.argv#打开excel文件，获取sheet名 wb...
读写访问文件类问题
当您访问文件系统中的文件时，文件系统中的文件会受到某些限制影响，导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...
MySQL
API种类 Datastream和SQL 是否支持更新或删除结果表数据 是 特色功能 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证不多读一条也不少读一条数据。即使发生故障，也能保证通过Exactly ...
使用Python读文件
cat>openfile.py<<EOF @resource_reference{"test.xlsx"}#-*-coding:utf-*-import os import sys sys.path.append('/tmp/chars/')import openpyxl print '=python execute ok=' print("start=")args=sys.argv#打开excel文件，获取sheet名 wb...
我是数采实施商
前面的例子中，点位表的样例如下：MODBUS点位接入流程 该章节包含以下内容 MODBUS的excel模板表配置说明 MODBUS的excel设备表配置说明 MODBUS的excel点位表配置说明 如何接入模板设备 如何接入散点设备 异常点位排查方法 模板表配置说明 ...
配置脚本代码节点
例如，读取数据生成的Excel脚本，读取数据发邮件的脚本等。使用限制 目前仅支持Shell脚本文件。说明 您也可以通过Shell脚本调度其他程序，在其他程序中实现其各类脚本文件的调度。脚本文件名只能包含字母、数字、下划线（_）和半角句号（....
挂载访问FAQ
本文介绍挂载NAS文件系统的常见问题。如果您有任何反馈或疑问，请单击下方按钮联系NAS技术支持进行咨询。NAS技术支持 通过控制台一键挂载文件系统 一键挂载功能支持哪些操作系统和文件系统协议？经典网络或者已打通VPC的ECS实例怎么通过...
Kafka数据源
单表实时写 写入数据不支持去重，即如果任务重置位点或者Failover后再启动，会导致有重复数据写入。整库实时写 实时数据同步任务仅支持使用 独享数据集成资源组。对于源端同步表有主键的场景，同步时会使用主键值作为kafka记录的key，确保...
编辑器使用说明
7.数据视图 1)数据视图工具栏 说明：导入：导入本地Excel文件，需要列名和Excel中对应。导出：将数据视图中的数据导出到本地，输出形式为Excel文件。8.参数面板 1)参数面板可选择多种参数类型。2)点击设置值可以设置默认值和修改参数名称。...
通过DMS导入数据库文件
Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。SQL脚本 附件 单击 上传文件 上传本地主机待导入的文件。说明 支持SQL、CSV、TXT、XLSX和ZIP文件类型。附件最大不能超过5 GB。qdm16*_sql.zip 在弹出的 数据导入工单详情 ...
生命周期管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
Logview诊断实践
在实际业务开发过程中，企业通常要求作业能在期望的时间节点前产出结果，并根据结果做进一步决策，这就需要作业开发人员及时关注作业运行状态，识别并优化慢作业。您可以通过MaxCompute的Logview功能诊断慢作业。本文为您介绍导致出现慢...
添加数据集
双击表头行内的字段名，可对该字段重命名。数据表编辑完成后，单击页面右下角的 下一步。保存数据集。在 保存数据集 页面内，您可以自定义输入当前数据集的名称。说明 数据集名称是必填项，务必填写完成后再进行下一步操作。在下方描述框内...
TensorFlow常见问题
使用 tf.gfile.Glob、tf.gfile.FastGFile、tf.WhoFileReader()及 tf.train.shuffer_batch()，适用于批量读取文件（读取文件之前需要获取文件列表。如果批量读取，还需要创建Batch）。使用 Designer 搭建深度学习实验时，通常需要在界面右侧...
SQL处理优化
SQL引擎对于操作Transactional Table 2.0的DML语法也是做了专门的改造开发，包括特定语法的解析，特定算子的Planner优化，针对pk列的去重逻辑，以及runtime构造Upsert格式数据并发写入等等。数据处理完成之后，会由Meta Service来执行事务...
特性
file:file A:OWNER@:rwatTnNcCy A:GROUP@:rtncy A:EVERYONE@:rtncy ACE按照一定顺序排列并去重，使ACL显示结果更清晰易懂。用户增加或修改ACE时，如果ACL中已经存在继承类型完全的ACE，则新的ACE会和旧的ACE的Allow bits进行合并。例如：...
在文件存储 HDFS 版上使用Presto
node.environment=production node.id=ffffffff-ffff-ffff-ffff-ffffffffffff node.data-dir=var/presto/data 配置JVM参数。创建etc/jvm.config文件。vim presto-server-0.265.1/etc/jvm.config 在etc/jvm.config文件中添加如下内容。...
检测攻击类型说明和防护建议
任意文件读取 对于网站提供的文件下载和读取功能，如果是直接通过绝对路径或目录穿越符对文件进行读取和下载，没有相关文件路径的限制，那么，攻击者就可以利用这种方式获取敏感信息，对服务器进行攻击。请检查文件读取操作是否正常。如果...
如何使用Prometheus监控Cassandra
mcac_table_row_cache_hit_out_of_range_total Recommand row_cache命中但还是去访问磁盘的次数 该指标过高可能会导致应用程序的读取速度变慢，影响用户体验。mcac_table_bloom_filter_false_ratio Major 布隆过滤器的误判率 当布隆过滤器...
高级管理FAQ
以下操作会更新访问时间：读取文件 写入文件 以下操作不会更新访问时间：重命名一个文件 修改文件的用户（user）、用户组（group）、模式（mode）等文件属性 如果一个目录配置了多项生命周期管理策略，文件系统会执行哪一项策略？...
如何使用Prometheus监控Cassandra
mcac_table_row_cache_hit_out_of_range_total Recommand row_cache命中但还是去访问磁盘的次数 该指标过高可能会导致应用程序的读取速度变慢，影响用户体验。mcac_table_bloom_filter_false_ratio Major 布隆过滤器的误判率 当布隆过滤器...
NFS协议
消费者ECS订阅消息队列，读到消息X（文件X生产完毕），此时，消费者ECS再去open这个文件，通过open返回的fd去读取这个文件，则一定能够读到文件X的所有内容。如果消费者ECS在生产者ECS生产完毕之前，就open了文件X，并且持有了fd，当收到...
RAM凭据插件
如果应用无法设置从classpath和可执行jar包中读取默认配置文件（managed_credentials_providers.properties），或需自定义配置文件名称时，可调用以下代码设置自定义配置文件,并按以下顺序读取：1."your-config-name"配置绝对路径+文件名称...
离线同步并发和限流之间的关系
在产品中配置位置如图所示：文件类型（OSS、FTP、HDFS、S3）数据读取，主要基于文件粒度并发读取，待读取的文件数量少于任务配置并发数。上面任务期望最大并发数：即是任务配置的并发数，由于数据集成资源组或者任务本身特性等原因，任务...
列存索引配置参数说明
loose_imci_max_enum_join_pairs 在使用列存索引功能并开启连接重排序时，允许列存索引优化器搜索的等价执行计划数量。取值范围：0~4294967295。默认值为2000。loose_imci_min_virtual_memory 使用列存索引进行查询的最小内存。取值范围：1...
插件配置概述
Edn codec plugin logstash-codec-edn_lines 读取并产生以新行分隔的EDN格式数据。Edn_lines codec plugin logstash-codec-es_bulk 将Elasticsearch bulk格式解码到单独的事件中，并将元数据解码到[@metadata](/metadata)字段。Es_bulk ...
FTP数据源
使用限制 FTP Reader实现了从远程FTP文件读取数据并转为数据同步协议的功能，远程FTP文件本身是无结构化数据存储。对于数据同步而言，目前FTP Reader支持的功能如下所示：支持 不支持 支持且仅支持读取TXT的文件，并要求TXT中的schema为...
OSS与文件系统的对比
对象存储 OSS 文件系统 Object 文件 Bucket 主目录 Region 无 Endpoint 无 AccessKey 无 无 多级目录 GetService 获取主目录列表 GetBucket 获取文件列表 PutObject 写文件 AppendObject 追加写文件 GetObject 读文件 DeleteObject 删除...
在云桌面内挂载CPFS文件系统
您可以在阿里云控制台创建CPFS文件系统，通过NFS协议服务把CPFS文件系统挂载至对应工作区下的无影云桌面，挂载成功后便可以在云桌面上把CPFS文件系统当作一个普通的目录来访问和使用。本文介绍如何将CPFS文件系统挂载至云桌面以及如何验证...
导入数据
Excel格式：Excel文件中可以有表头（属性），也可以直接是数据。目标表 选择导入数据的目标表。数据位置 选择数据的位置：第1行为属性：表格首行是字段名。第1行为数据：表格首行是数据。写入方式 选择文件的写入方式：INSERT：插入数据时...
Excel导入
批量提交按钮会触发文件上传，并按Excel导入组件数据源对应实体字段解析上传的文件，将文件中的每一条数据添加到数据库中的对应实体表中。属性配置 Excel导入组件属性由以下部分组成：分类 参数 示例 说明 样式 宽度 Excel导入组件 宽度、...
性能说明FAQ
本文介绍NAS SMB/NFS协议文件系统性能相关的常见问题及解决方案。文件系统的读写吞吐阈值与什么相关？通用型NAS 单个文件系统的读写性能上限（峰值）与文件系统的当前使用容量线性相关且成正比例关系，即使用容量越大，吞吐性能上限（峰值...
OSS数据源
OSS数据源为您提供读取和写入OSS的双向通道，本文为您介绍DataWorks的OSS数据同步的能力支持情况。支持的字段类型与使用限制 离线读 OSS Reader实现了从OSS读取数据并转为数据集成协议的功能，OSS本身是无结构化数据存储。对于数据集成而言...
设置列索引的排序键
重复执行步骤3，直到合并文件有序排列，然后读取合并文件中的每一行记录，根据偏移值读取数据文件中对应的记录并追加到列存索引中。增量数据排序流程 增量数据的排序流程是渐进式的，不能保证数据完全有序。总体流程如下：将所有的数据块...
- 产品推荐
- 这些文档可能帮助您