UDF开发（Python2）
为确保编写Python UDF过程中使用的数据类型与MaxCompute支持的数据类型保持一致，您需要关注二者间的数据类型映射关系。具体映射关系如下。MaxCompute SQL Type Python 2 Type BIGINT INT STRING STR DOUBLE FLOAT BOOLEAN BOOL DATETIME ...
通过文件管理优化性能
Z-Ordering(多维聚类)Z-Ordering将相关联的信息存储到同一组文件中，这种聚集会自动被Delta Engine的Data-Skipping算法使用，显著减少需要扫描的数据数量。如何使用？想要使用ZOrder来优化你的数据布局，仅需要在OPTIMIZE时，增加ZORDER BY...
如何使用参数化模拟多用户注册或登录
说明 此文件中仅有10行数据，这些数据可以在压测中循环使用或仅使用一次。您也可以准备更多行数据，构造更多用户的登录注册请求。步骤二：导入参数文件 登录 PTS控制台，在左侧导航栏选择 性能测试>创建场景，然后单击 PTS压测。在 创建PTS...
Python 2 UDTF
为确保编写Python UDTF过程中使用的数据类型与MaxCompute支持的数据类型保持一致，您需要关注二者间的数据类型映射关系。具体映射关系如下。MaxCompute SQL Type Python 2 Type BIGINT INT STRING STR DOUBLE FLOAT BOOLEAN BOOL DATETIME ...
使用PyJindo访问阿里云OSS-HDFS
本文将以两种方式为您介绍如何在Python 3.6及更高版本中，利用Python的工具包PyJindo来操作OSS-HDFS。背景信息 方式一：直接使用PyJindo包 是直接使用PyJindo包的原生接口来操作OSS-HDFS。这种方式更依赖于PyJindo自己的API，且通常需要更...
Logview诊断实践
与前面介绍过的 子查询多阶段执行 类似，Merge作业也是作为一个单独的 tab 页显示，自动合并小文件多出来的Merge Task，虽然会增加当前作业整体执行时间，但是会让结果表在合并后产生的文件数和文件大小更合理，从而避免对文件系统产生过大...
HDFS数据源
否 utf-8 nullFormat 文本文件中无法使用标准字符串定义null（空指针），数据集成提供nullFormat定义哪些字符串可以表示为null。例如您配置 nullFormat:"null"，如果源头数据是null，数据集成会将其视作null字段。说明 字符串的null（n、u...
通过脚本模式生成API
说明 当数据服务的API在编辑页面右侧导航栏的 返回参数 已经开启了 返回结果分页，如果您在该API编辑页面的 编写查询SQL 区域，使用SQL语句配置了 limit 限制（即返回结果的条数限制），则该 limit 限制不生效，返回结果的条数限制仍然会以...
点播资源迁移
使用OSS的API/SDK，列举bucket下的所有文件，得到object列表。详情请参见 列举文件。调用 RegisterMedia-注册媒资信息 接口注册媒资文件生成音/视频ID，其中，RegisterMetadatas 中的 FileURL 参数为OSS列举文件得到的object的完整路径，即...
OSS-HDFS数据源
使用限制 离线读 使用OSS-HDFS Reader时，请注意以下事项：由于连通资源组到OSS-HDFS的网络链路比较复杂，建议您使用 独享数据集成资源组 完成数据同步任务。您需要确保您的独享数据集成资源组具备OSS-HDFS的网络访问能力。OSS-HDFS Reader...
Jindo DistCp使用说明
说明 如果您想在开源Hadoop集群环境中使用编解码器lzo，则需要安装gplcompression的native库和hadoop-lzo包。outputManifest和-requirePreviousManifest-outputManifest 可以指定生成DistCp的清单文件，用来记录copy过程中的目标文件、源...
Jindo DistCp使用说明
说明 如果您想在开源Hadoop集群环境中使用编解码器lzo，则需要安装gplcompression的native库和hadoop-lzo包。outputManifest和-requirePreviousManifest-outputManifest 可以指定生成DistCp的清单文件，用来记录copy过程中的目标文件、源...
Jindo DistCp使用说明
说明 如果您想在开源Hadoop集群环境中使用编解码器lzo，则需要安装gplcompression的native库和hadoop-lzo包。outputManifest和-requirePreviousManifest-outputManifest 可以指定生成DistCp的清单文件，用来记录copy过程中的目标文件、源...
Jindo DistCp使用说明
说明 如果您想在开源Hadoop集群环境中使用编解码器lzo，则需要安装gplcompression的native库和hadoop-lzo包。outputManifest和-requirePreviousManifest-outputManifest 可以指定生成DistCp的清单文件，用来记录copy过程中的目标文件、源...
SQL查询
因此，旧版SQL查询中归属于您个人名下不同工作空间、不同数据源的SQL文件，会统一在 我的文件 中呈现。目录树中 所有的表 没有了？SQL查询新版升级后，您可以在 添加目录 中按需添加可查询数据源下的数据表，添加对应的数据表目录后，如果...
步骤二：创建资源栈组
如果不指定资源组，资源栈组将加入默认资源组。关于如何创建资源组，请参见 创建资源组。标签 为资源绑定标签或移除绑定，每个资源最多可绑定20条标签。最大并发账号数 每个地域中可同时部署资源栈的账号数。关于如何设置最大并发账号数，...
步骤三：创建资源栈组
如果您要使用OSS Bucket上存储的ROS模板文件的URL，需要设置跨域访问。更多信息，请参见 跨域访问ROS模板。输入模板：在 模板内容 区域输入JSON或YAML两种类型的模板。关于如何编写模板，JSON或YAML格式请参见 模板结构说明。我的模板：...
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
创建资源栈
如果您想创建并管理一组新资源，您可以使用ROS模板或Terraform模板创建资源栈。使用ROS模板创建资源栈 登录 资源编排控制台。在左侧导航栏，单击 资源栈。在顶部菜单栏的地域下拉列表，选择资源栈的所在地域，例如：华东1（杭州）。在 资源...
Apache网站常见问题排查
概述 本文主要介绍使用阿里云ECS实例搭建Apache网站时，遇到的一些常见问题的处理方法。详细信息 说明 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于...
访问OSS数据源
读取OSS中的文件并打印出来行数和第一行内容。同账号访问OSS数据 {"args":["oss:/testBucketName/data/readme.txt"],"name":"spark-oss-test","file":"oss:/testBucketName/data/example.py","conf":{"spark.driver.resourceSpec":"small",...
媒体上传概述
媒体上传完成后可使用的视频点播服务及后续分发播放的注意事项如下：点播服务 描述 相关文档 媒资管理（上传后）上传完成后，可使用点播服务管理媒体文件，如视频源文件、转码后的流文件、图片文件等。媒资管理 媒体处理 点播支持媒体文件...
自定义组件
步骤三：使用自定义组件 在资源管理的文件夹中，找到刚刚定义的自定义组件或者直接从文件夹中选择现有的自定义组件，拖拽到画布中使用。步骤四：管理自定义组件 选中某个自定义组件，将其拖拽到左侧的已有或新建的文件夹下。二、进阶 步骤...
使用SDK示例代码消费订阅数据
在完成数据订阅通道的配置（创建好订阅任务和消费组）后，您可以自行编写SDK示例代码或使用DTS提供的SDK示例代码来订阅数据变更信息，本文介绍示例代码的使用方法。操作步骤 重要 如果数据源是PolarDB-X 1.0或DMS LogicDB，消费订阅数据的...
数据导入方式介绍
为满足多样化的数据导入需求，云原生数据仓库AnalyticDB MySQL版 提供了多种数据导入方式，包括：通过外表导入数据、使用DataWorks导入数据和利用JDBC通过程序导入数据等。本文介绍各导入方式的特性及适用场景，帮助您选择正确的数据导入...
我是系统集成商
可以下载资产模板的Excel模板文件，在文件中编辑资产模型内容，然后上传Excel文件批量创建资产模型，也可以从工业边缘数采中整理的设备模板表的Excel文件导入：资产模型可以设置在不同的业务实体进行访问，单击资产模型的 业务实体与地点...
2023年
了解更多 代码检测服务支持使用云效流水线 Flow 企业设置的 Maven 配置进行编译构建，生效优先级如下：优先用户通过 mvn-settings 手动指定的配置文件 其次云效 Flow 中企业设置的 Maven 配置 支持创建分支时分支名称末尾使用/TASK-ID 格式...
配置同步任务
数据同步支持使用 copy from 将数据加载到表中，并且在遇到冲突时会使用新数据覆盖旧数据，建议您在遇到性能问题时再尝试使用该策略。冲突策略 当AnalyticDB for PostgreSQL数据源的加载策略选择 Copy模式 时，需要配置 冲突解决策略，包括...
查看数据安全配置
在多方安全分析控制台中，进行数据分析前，需要先确认离线样本的使用限制。离线样本的使用限制取决于原始数据的安全配置。数据安全配置说明 离线样本被授权到多方安全分析项目时，数据...这些使用限制将影响后续 SQL 脚本文件中对数据的使用。
配置Nginx文件（增强版云虚拟主机）
使用限制 为保证Nginx服务的稳定性，云虚拟主机管理控制台只支持使用以下指令编写Nginx文件，具体指令如下所示：location allow deny try_files rewrite return if set 说明 allow、deny、try_files、rewrite、return、if 和 set 这些指令...
DAO 存储
[:AMap]：返回数组，数组里是使用 xml 里定义的 AMap 映射出来的对象。AMap：只有一个结果，使用配置文件里定义的 AMap 来描述对象。例如，上面的例子中，返回类型为:messageModelMap。具体返回的 Objective-C 类型，以及需要特殊映射的...
JSON_INSERT
说明 若input参数中包含数组，数组中的JSON内容插入规则，假设input中数组的长度为n，指定插入的位置为m时：如果 m>=n，在数组末尾添加值value。如果 m，在数组开头添加值value。如果-n，根据insert_after的值确定添加值value的位置。若...
编写及编译合约
例如您可以在 contract.cpp 中定义合约，在 utils.cpp 中定义一些工具函数，则编译命令为：$my+contract.cpp utils.cpp-o contract.wasm 构建静态库 您可以使用 MYCDT 提供的工具，将一组源文件编译打包成一个 wasm 的静态库，提供给合约...
编写及编译合约
例如您可以在 contract.cpp 中定义合约，在 utils.cpp 中定义一些工具函数，则编译命令为：$my+contract.cpp utils.cpp-o contract.wasm 构建静态库 您可以使用 MYCDT 提供的工具，将一组源文件编译打包成一个 wasm 的静态库，提供给合约...
文件中转站
当您需要将本地电脑中保存的大模型或其它较大文件上传到DSW实例时，文件中转站可加速文件上传流程，且不会产生额外费用。在此基础上，您的大文件仅需上传一次，就可以在同RAM账号下的多个DSW实例中保存和使用。使用限制 支持多选文件同时...
任务结果
3.规则维度列表 规则维度列表，展示当前任务所使用的质检规则相关的统计数据，如下图：抽检文件数：使用该规则质检的文件数，也就是当前任务中的文件总数；命中文件数：抽检文件中命中了该规则的文件数；命中率：命中文件数/抽检文件数*100...
CSV数据文件格式
SET属性数组字段：可以使用双引号（""）将整个字段括起来，解析时会去掉字段前后的双引号，例如整型数组字段"32;45;12。SET属性数组字段类型是字符串：单个数组元素不能包含有分号;字符，会被解析成元素分隔符。数据类型 属性值类型 字段...
DescribeFileReport
使用数组表示，数组的元素取值包括DDOS木马、挖矿程序、网络层入侵、网络服务扫描、网络共享发现、矿池、漏洞利用、暗网、恶意登录、恶意下载源、中控、Web Shell、Web攻击等。RequestId String 3F2BBCA2-4EE5-456F-93B1-DE0B69CAFD71 阿里...
UDTF概述
序号 可选/必选步骤 功能介绍 工具平台 相关文档 ① 可选 当您使用Maven编写代码时，需要先在Pom文件中添加代码相关SDK依赖，确保后续编写的代码可编译成功。例如开发自定义函数需要添加的SDK依赖为：<dependency><groupId>...
UDAF概述
步骤 步骤描述 支持的工具平台 注意事项/相关文档 ① 可选 当您使用Maven编写代码时，需要先在Pom文件中添加代码相关SDK依赖，确保后续编写的代码可编译成功。例如开发自定义函数需要添加的SDK依赖为：<dependency><groupId>...
- 产品推荐
- 这些文档可能帮助您