Wi-Fi设备配网适配开发
参数说明 参数 数据类型 方向 说明 cb awss_recv_80211_frame_cb_t 输入 回调函数指针，当Wi-Fi接收到帧时会调用此函数/*@brief 802.11帧的处理函数，可以将802.11 Frame传递给这个函数*@param[in]buf@n 80211 frame buffer,or pointer to ...
为RAM用户授权
权限策略/角色 E-MapReduce使用的策略如下。策略名称 描述 包含的权限 AliyunEMRFullAccess E-MapReduce管理员权限 EMR on ECS和EMR on ACK的所有权限。AliyunEMRDevelopAccess E-MapReduce开发者权限 除集群的创建和释放等权限外的所有...
开发入门
E-MapReduce SDK基于“SPECIAL_TIMER_CURSOR”模式支持用户强制在指定时间点开始消费，在LoghubUtils#createStream接口中，以下参数需要组合使用：cursorPosition：LogHubCursorPosition.SPECIAL_TIMER_CURSOR forceSpecial：true E-...
数据开发常见问题
为什么Spark Streaming作业已经结束，但是E-MapReduce控制台显示作业还处于“运行中”状态？如何在MR作业中使用本地共享库？如何在MR或Spark作业中指定OSS数据源文件路径？为什么AppMaster调度启动Task的时间过长？使用数据开发提交的作业...
E-MapReduce数据迁移方案
在开发过程中我们通常会碰到需要迁移数据的场景，本文介绍如何将自建集群数据迁移到E-MapReduce集群中。背景信息 适用范围：线下Hadoop到E-MapReduce迁移。线上ECS自建Hadoop到E-MapReduce迁移。迁移场景：HDFS增量上游数据源包括RDS增量...
社交网络
示例数据如下：点文件：~id,name:string 1,a0e05a4a-65c0-11e9-a5ce-00163e0416f8 2,a0e05e28-65c0-11e9-a5ce-00163e0416f8 3,a0e05f86-65c0-11e9-a5ce-00163e0416f8 4,a0e0606c-65c0-11e9-a5ce-00163e0416f8 5,a0e0613e-65c0-11e9-a5ce-...
GetLiveRecordTemplate-获取实时录制模板明细
传入 JobId 获取该任务使用的模板快照。ab0e3e76-1e9d-11ed-ba64-0c42a1b73d66 返回参数 名称 类型 描述 示例值 object Schema of Response RecordTemplate object 录制模板。RecordFormatList object[]录制格式列表。Format string 格式。...
E-HPC集群调度器插件
例如，在EDA业务场景下，通常情况使用的调度器为商用调度器，但E-HPC平台无法提供商用License供您安装，此时，您可以自行安装调度器并通过调度器插件接入E-HPC平台的能力。调度器插件为您提供了插件模版及配置文件，并将功能定义进行模块化...
802.11n short GI 工作原理
概述 short gi功能可以缩短两个数据传输间隔，用于提高效率，802.11a/b/g传输间隔是800ns，short gi将间隔缩短至400ns，可以将效率提高10%左右。详细信息 射频芯片在使用OFDM调制方式发送数据时，整个帧是被划分成不同的数据块进行发送的，...
解析CSV格式日志
e_set("time_local",dt_strptime(v("time"),"%d/b/Y:%H:%M:%S+0800"))返回的日志为：time_local:2019-06-13 13:45:11 综上解决方案具体如下：e_if(e_search("_program_=access"),e_compose(e_psv("content","remote_addr,time_local,host,...
UpdateSet-更新媒体集的显示名称
Set-e8dd5e4e-99f7-43d4-80d5-3456a5bd5077 示例 正常返回示例 JSON 格式 {"ModifyTime":"2020-11-19T07:49:01.975Z","RequestId":"45234D4A-A3E3-4B23-AACA-8D897514462E","CreateTime":"2020-11-19T07:49:01.975Z","SetName":"mysetnew",...
数据迁移
E-MapReduce（简称EMR）支持将您本地自建的Kudu集群迁移至EMR上。本文为您介绍如何迁移自建Kudu集群的数据到E-MapReduce上的Hadoop集群。前提条件 您已自建Kudu集群。已创建E-MapReduce的Hadoop集群，并选择了Kudu服务，详情请参见 创建...
使用Druid
EMR-3.11.0及其后续版本，E-MapReduce支持Druid作为单独的一种集群类型。背景信息 E-MapReduce将Druid作为单独的集群类型，主要基于以下几方面的考虑：E-MapReduce Druid可以完全脱离Hadoop来使用。大数据量情况下，E-MapReduce Druid对...
云模组HAAS210规格介绍
参数 最小值 平均值（典型值）最大值 单位 RF平均输出功率，802.11b CCK Mode 11M-20-dBm RF平均输出功率，802.11g OFDM Mode 54M-18-dBm RF平均输出功率，802.11n OFDM Mode MCS7-17-dBm BLE@1Mbps-5 15 dBm 频率误差-10-10 ppm 接收性能 ...
Flannel
Flannel是一种容器网络接口CNI（Container Network Interface）插件，在阿里云上使用的Flannel网络模式采用阿里云VPC模式。您可以通过使用Flannel网络组件实现Kubernetes集群内部的网络互通。本文为您介绍了Flannel相关内容的最新动态。...
访问权限控制
{"Version":"1","Statement":[{"Action":["acms:R"],"Resource":["*:*:*:*:cfg/1ca01ca0-11b0-1e01-0df1-d1010101bc10/DEFAULT_GROUP","*:*:*:*:cfg/1ca01ca0-11b0-1e01-0df1-d1010101bc10/DEFAULT_GROUP_1"],"Effect":"Allow"}]} 授予单个...
ListDialogueFlows
47b6-9e1d-400a2722fcf0"}],"branchName":"本人"},{"branchId":"7e49f0e0-b363-11e9-a287-e59394e73583","intents":[{"name":"关系人","id":"55280cca-401c-4297-afcb-6cf21ead3b65"}],"branchName":"关系人"},{"branchId":"810da4c0-b363-...
事件统计
描述 requestId String FD200FAE-E98F-496E-BFE6-4CE61E59A2E9 requestId data Object data myResponse Integer 1 我的待响应 myFinish Integer 11 我的完结 allResponse Integer 12 所有待响应 allFinish Integer 113 所有完结 示例 请求...
常见问题
当您使用阿里云E-MapReduce（简称EMR）on ACK 时，可以根据本文查找对应的问题场景和解决方案。为什么当ShuffleServiceMaster组件中容器组数量为1时，无法启动？为了保证高可用和正常运行，建议至少将该组件的容器组数量配置为3个。这是...
音频处理
{"VideoTracks":[{"VideoTrackClips":[{"MediaId":"3f7e62d41a334dec9ac802b0f165*","Effects":[{"Type":"Volume","Gain":"0"}]}]}]} 指定区间静音 指定区间静音与视频整体静音的参数相比，增加了针对Volume Effect进行的入出点参数的设置...
在测试环境使用加密服务
privateKeyRSAKEK=Forms.hexStringToByteArray("6B2FB2BCC75604ABF5761FFA1027FF...11CF3535650E431181717FDD1D7BBD9FB675FB027134BBF7F10F65245D9A82251A9171DAA439C175895904A2BB74F31BD94FF550023F6245C01DF83B2FCEDDF241307DDC831162AD...
使用密码机实例
privateKeyRSAKEK=Forms.hexStringToByteArray("6B2FB2BCC75604ABF5761FFA1027FF...11CF3535650E431181717FDD1D7BBD9FB675FB027134BBF7F10F65245D9A82251A9171DAA439C175895904A2BB74F31BD94FF550023F6245C01DF83B2FCEDDF241307DDC831162AD...
在生产环境使用加密服务
privateKeyRSA=Forms.hexStringToByteArray("000202703D0652C7027B7D94B45A896646...11D0D791C8FF53D0E0786ED192CF1105FCF82160921EEF23E7BD72F13587B316BD9A771CEABBD0186B45E09C86E718AD4E5444EFFE747FE0C39E85D6190F3347656E72F486C321D5EA...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
数字农业可信上链最佳实践
{"code":"00000","data":{"plainData":"{\"温度\":\"25.2\"}","privacyData":"tiq9SV1EkVkUhZSamwP2unmenPc7Hv6E4YH/VhlJngv/BmKj3cjL8k20mq+pENQo","privacyRuleId":"0387453157147937"},"message":"","requestId":"802E77DD-C5F3-1B11-93...
Flink Table Store与Trino集成
E-MapReduce的Flink Table Store服务支持在Trino中查询数据。本文通过示例为您介绍如何在Trino中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Trino中查询Flink Table Store中的数据。操作步骤...
签名机制
说明 计算签名时使用的Key就是您持有的AccessKey Secret并加上一个“&”字符（ASCII:38）,使用的哈希算法是SHA1。按照Base64编码规则把上面的HMAC值编码成字符串，即得到签名值（Signature）。将得到的签名值作为 Signature 参数添加到请求...
基本概念
本文介绍开源大数据平台E-MapReduce使用过程中遇到的常用名词的基本概念和简要描述。集群 E-MapReduce产品中的一个独立的机器组合，为上层业务提供一些基础的引擎服务。一个E-MapReduce集群是由一个或多个阿里云ECS实例组成的。ECS实例 在E...
功能发布记录
本文介绍弹性高性能计算产品功能和对应的文档动态。2023年 2023年9月 功能名称 变更类型 功能描述 发布时间 相关文档 通过Serverless集群提交作业 新增 Serverless集群的计算节点由ECI实例组成，您只...2018-01-11 什么是弹性高性能计算E-HPC
使用独立的Trino集群
配置连接器 在待使用的连接器中配置查询对象。本文以Hive连接器为例介绍。进入集群服务页面。登录EMR on ECS控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。在 EMR on ECS 页面，单击目标集群操作列的 集群服务。在 集群服务 ...
消息通知
RetryCount":"0","Progress":"0","StdoutRedirectPath":"oss:/bucket/tests/a44c0ad8-a003-11e6-8f8e-fefec0a80e06/logs/stderr.job-0000000058184218000008150000000D.task.0","StderrRedirectPath":"oss:/bucket/tests/a44c0ad8-a003-11...
key-auth插件
consumers:credential:2bda943c-ba2b-11ec-ba07-00163e1250b5 name:consumer1-credential:c8c8e9ca-558e-4a2d-bb62-e700dcc40e35 name:consumer2 keys:apikey-x-api-key#使用_rules_字段进行细粒度规则配置_rules_:#规则一：按路由名称匹配...
Flink Table Store与Hive集成
E-MapReduce的Flink Table Store服务支持在Hive中查询数据。本文通过示例为您介绍如何在Hive中查询Flink Table Store中的数据。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持在Hive中查询Flink Table Store中的数据。操作步骤 ...
存储说明
本文介绍E-MapReduce集群中数据存储相关的信息，包括磁盘角色、云盘与本地盘，以及OSS。背景信息 关于存储的类型、性能和相关的限制信息，请参见 什么是块存储。存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...
常见问题
如果您有配置多Hive MetaStore、多MySQL的需求，或默认提供的连接器不包含您想要使用的服务时，您可以使用EMR Trino提供的5个占位连接器，即connector1~connector5，您可以选择其中任意一个，将其 connector.name 配置为hive或您所需要的...
消息通知
0","Progress":"0","StdoutRedirectPath":"oss:/bucket/tests/a44c0ad8-a003-11e6-8f8e-fefec0a80e06/logs/stderr.job-0000000058184218000008150000000D.task.0","StderrRedirectPath":"oss:/bucket/tests/a44c0ad8-a003-11e6-8f8e-fefec...
Celeborn
本文为您介绍如何使用Celeborn服务。背景信息 目前Shuffle方案的缺点如下：Shuffle Write在大数据量场景下会溢出，导致写放大。Shuffle Read过程中存在大量的网络小包导致的Connection reset问题。Shuffle Read过程中存在大量小数据量的IO...
Flink Table Store与Flink集成
E-MapReduce的Flink Table Store服务支持通过Flink SQL对Flink Table Store进行读写操作。本文通过示例为您介绍如何通过Flink SQL对Flink Table Store进行读写操作。使用限制 仅EMR-3.45.0版本、EMR-5.11.0版本的集群，支持通过Flink SQL对...
字段值提取函数
分隔符提取 e_csv、e_psv、e_tsv 使用自定义的分隔符与预定义的字段名，从特定字段中提取多个字段。e_csv：默认分隔符为半角逗号（,）。e_psv：默认分隔符为竖线（|）。e_tsv：默认分隔符为\t。支持和其他函数组合使用。相关示例，请参见 ...
RefreshUploadMedia-刷新媒资上传凭证
411bed50018971edb60b0764a0ec6*返回参数 名称 类型 描述 示例值 object RequestId string 请求 ID*11-DB8D-4A9A-875B-275798*MediaId string 媒资 ID c2e77390f75271ec802f0674a2ce6*UploadAddress string 上传地址。说明 接口返回的上传...
- 产品推荐
- 这些文档可能帮助您