混合云DevOps关闭的项目可以再重新打开吗？
问题描述：混合云DevOps关闭的项目可以再重新打开吗？还是说要新增项目才行？解决方案 关闭的项目只有搜索才能看到，不能打开。如需使用建议您新增项目。适用于 移动DevOps
有的图片可以打开，有的图片不能
问题描述 Quick BI订阅任务推动报表图片，在客户端查看历史记录，有的图片可以打开，有的图片不能打开。问题原因 推送报表图表在Quick BI服务器是存储24小时，就失效了；可以看到24小时之外的报表图表历史记录，那是因为当时用户在客户端...
Spark UI
本文介绍如何在作业运行中和结束后查看Apache Spark web UI。操作步骤 登录 Data Lake Analytics管理控制台。...过期后Spark UI虽然不能打开，但是OSS上的日志数据是未被删除的，您可以根据需求通过OSS客户端查看日志数据或删除。
授权服务账号
对于通过HoloWeb新建连接方式连接的实例，不能打开和关闭服务账号，连接实例详情请参见 连接实例。打开服务账号 登录 Hologres管理控制台。在页面左上角，选择实例所在地域。在 实例列表 页面，单击对应实例ID。在 实例详情 页左侧导航栏，...
资源
w：写模式，只能写入而不能读文件，注意用写模式打开，文件内容会先被清空。a：追加模式，只能写入内容到文件末尾。r+：读写模式，可以任意读写内容。w+：类似于 r+，但会先清空文件内容。a+：类似于 r+，但写入时只能写入文件末尾。同时，...
Python SDK示例：资源
w：写模式，只能写入而不能读文件，注意用写模式打开，文件内容会先被清空。a：追加模式，只能写入内容到文件末尾。r+：读写模式，可以任意读写内容。w+：类似于 r+，但会先清空文件内容。a+：类似于 r+，但写入时只能写入文件末尾。同时，...
部署容器
同一容器不能同时打开相同的端口。单击 下一步，配置响应公网。具体参数说明如下表所示。参数 说明 容器选择 选择相应的容器。只支持选择打开HTTP端口的容器。端口选择 选择容器后，才可以选择HTTP端口，否则此参数不显示。健康检查 选择...
ALIYUN:ROCKETMQ:Instance
长度为1~128个字符，不能以 aliyun 和 acs:开头，不能包含 http:// 或者 https:// 。Value String 否 否 标签值。长度为0~128个字符，不能以 aliyun 和 acs:开头，不能包含 http:// 或者 https:// 。返回值 Fn:GetAtt InstanceId：实例ID。...
排查日志
DexPatch 接入方式问题排查日志如下：无论基于什么基线，都不能使用自定义 Application，包括继承 QuinoxlessApplication 或者 LauncherApplication 的 Application。可以使用白名单修复内部类，但是要检查内部类名的完全限定名。请正确...
自建数据源Apache Doris
请输入规范的名称，不要使用特殊字符，前后不能包含空格。数据库地址 部署Apache Doris数据库的地址，包括IP或域名。端口 数据库的对应的端口号。数据库 部署Apache Doris数据库时自定义的数据库名称。用户名 和 密码 登录Apache Doris数据...
SSL接入点PLAIN机制收发消息
注意该值不要改得太大，如果Poll太多数据，而不能在下次Poll之前消费完，则会触发一次负载均衡，产生卡顿。props.put(ConsumerConfig.MAX_POLL_RECORDS_CONFIG,30);消息的反序列化方式。props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_...
作业启动问题
当Flink作业以Detached模式提交时，不能以Collect、Print、PrintToErr或Count等Operator做结尾；当作业以Blocking模式提交时，没有这些限制。解决方案 使用SQL作业运行。TableAPI JAR作业不要以Collect、Print、PrintToErr或Count等...
2023-11-27版本
缺陷修复上，我们修复了Apache Flink 1.17.1版本上发现的多个缺陷（包括Apache社区已修复待发布的缺陷），同时还修复了在引擎上发现的问题，旨在提高系统的稳定性和可靠性。我们计划将在两周内在全网进行分步骤的灰度，灰度完毕后，欢迎您...
使用OSS Java SDK时报NoClassDefFoundError或...
问题描述 使用OSS Java SDK时，报类NoClassDefFoundError或NoSuchFieldError错误，说明工程中可能有包冲突，详细报错如下：Exception in thread"main"java.lang.NoClassDefFoundError:org/apache/...268)at com.aliyun.oss.OSSClient.<init>...
默认接入点收发消息
注意该值不要改得太大，如果poll太多数据，而不能在下次poll之前消费完，则会触发一次负载均衡，产生卡顿。props.put(ConsumerConfig.MAX_POLL_RECORDS_CONFIG,30);消息的反序列化方式 props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_...
使用实例接入点收发消息
与sasl路径类似，该文件也不能被打包到jar中。props.put(SslConfigs.SSL_TRUSTSTORE_LOCATION_CONFIG,kafkaProperties.getProperty("ssl.truststore.location"));根证书store的密码，保持不变。props.put(SslConfigs.SSL_TRUSTSTORE_...
使用MongoDB存储日志数据
按时间戳字段分片：使用时间戳来进行分片（如ObjectId类型的_id，或者time字段），这种分片方式存在如下问题：因为时间戳一直顺序增长的特性，新的写入都会分到同一个shard，并不能扩展日志写入能力。很多日志查询是针对最新的数据，而最新...
通过缓存优化性能
它可以提高各种查询的性能，但不能用于存储任意子查询的结果。Spark缓存可以存储任何子查询数据的结果以及以Parquet以外的格式（例如CSV，JSON和ORC）存储的数据。性能：Delta缓存中存储的数据比Spark缓存中的数据读取和操作速度更快。这是...
2024-04-01版本
概述 2024年4月1日正式对外发布实时计算Flink版的引擎新版本VVR 8.0.6，该版本是基于Apache Flink 1.17.2的企业级Flink引擎，主要包含以下变更：在实时湖仓方面，本版本主要支持了将数据写入OSS-HDFS、并且支持通过CTAS和CDAS语句写入...
内核发布记录
修复了因为改变 VARCHAR 长度导致 dynamic partition 不能新建 Partition 的问题。修复了 SHOW CREATE TABLE DECIMAL 不兼容 SmartBI 的问题。修复了列类型转换功能可能会不可用的问题。修复了行存表属性不生效的问题。修复了 base ...
常见问题
报错Bad status:Network error:Could not obtain a remote proxy to the peer.:unable to resolve address for<hostname>:Name or service not known 问题原因：无法解析，导致kudu tablet的raft server不能获取自己的peer机器类型，不清楚...
接入方式
不宜设置过大，需要考虑消费端消费速率，如果poll太多数据，而不能在下次poll之前消费完，则会触发一次负载均衡，产生卡顿。props.put(ConsumerConfig.MAX_POLL_RECORDS_CONFIG,30);设置单次拉取的字节数，推荐设置为每次poll的消息最大...
Celeborn
false：不打开监控。true CELEBORN_WORKER_MEMORY Worker堆内内存大小。1g CELEBORN_MASTER_MEMORY Master堆内内存大小。2g 重启Celeborn组件 在Celeborn服务的 状态 页面，选择CelebornMaster组件操作列的>restart_clean_meta。说明 如果...
上下游存储
为什么Kafka源表数据基于Event Time的窗口后，不能输出数据？Flink中的Commit Offset有什么作用？为什么Flink和Kafka之间的网络是连通的，但是依然会有timeout expired while fetching topic metadata的报错？如何通过Kafka Connector解析...
负载均衡
性能测试 测试环境 数据库节点：1个读写（RW）节点、7个只读（RO）节点 测试使用的SQL：SET NAMES utf8mb4，SELECT 1 测试工具：Sysbench，且每次的并发数量一样 测试场景：不打开连接池、打开会话级连接池和打开事务级连接池三种场景，每...
Quick BI中如何使用原始的HttpClient调用产品提供的...
但是实际应用中，有些客户由于其他原因，不能使用Quick BI库本身封装的客户端代码，而必须使用原始的HttpClient。这种情况下，可以参考如下代码实现调用：package com.alibaba.quickbi.openapi;import ...
Databricks Runtime
不能使用Databricks Light运行笔记本作业或交互式工作负载。Databricks Light可以与在其他Databricks Runtime和定价层上运行的集群一起在同一工作空间中使用。您无需请求单独的工作区即可上手。Databricks Light中有什么？Databricks Light...
2023-04-13版本
说明 CPU Load不能反映CPU使用情况，CPU Usage会作为唯一CPU使用率的监控指标。连接器指标变更 Elasticsearch连接器新增numRecordsOut和numRecordsOutPersecond指标，提高运行可观测性。MySQL CDC连接器新增Enumerator指标 Elasticsearch ...
使用Flume写入JindoFS
通过支持Flush接口，虽然不能让数据立刻可见，但是可以确保数据暂存在云端，当写入程序发生Crash时，您可以通过调用SDK或命令行，恢复程序在Crash之前已经写入JindoFS Cache模式或OSS的数据。使用Flume写入JindoFS Block模式 您需要配置...
安装Docker并使用（Linux）
MAINTAINER DTSTACK#RUN后面接容器运行前需要执行的命令，由于Dockerfile文件不能超过127行，因此当命令较多时建议写到脚本中执行。RUN mkdir/dtstact#开机启动命令，此处最后一个命令需要是可在前台持续执行的命令，否则容器后台运行时会...
2023-08-21版本
引擎侧将正式对外发布VVR 8.0.1版本，该版本是基于Apache Flink 1.17.1的全新企业级Flink引擎。在该版本中，我们将包含Apache Flink 1.17.1的所有新功能、性能提升与缺陷修复。在Apache Flink 1.17中，通过通用增量Checkpoint（GIC）功能，...
ESS（仅对存量用户开放）
ESS（EMR Remote Shuffle Service）是E-MapReduce（简称EMR）在优化计算...false：不打开监控。false ess_worker_offheap_memory Worker堆外内存大小。4g ess_worker_memory Worker堆内内存大小。4g ess_master_memory Master堆内内存大小。4g
分库分表（Alias功能）
date_dt与当前时间的差值，防止写入过大的时间字段或者过小的时间值，样例中给出的是100天，即不能写入一条数据的时间比当前时间大100天或小100天 collection.collection.configName_indexer_default 代表创建的索引表依赖的配置集，可以...
自定义函数迁移指南
null，只能获得pipeline.global-job-parameters里定义的内容，而不能获得任意的作业配置项。自定义聚合函数（UDAF）getResultType 如果您的Blink UDAF中实现了getResultType方法用于设定返回类型，则您需要删除这个方法并通过@FunctionHint...
分库分表（Alias功能）
router.maxFutureMs 8640000000 代表最大容忍写入的时间字段your_date_dt与当前时间的差值，防止写入过大的时间字段或者过小的时间值，样例中给出的是100天，即不能写入一条数据的时间比当前时间大100天或小100天。collection.collection....
迁移上云操作
请确保此次迁移涉及的所有生产者应用和消费者应用均已完成接入点更换，不能有遗漏。如果部分生产者应用未更换接入点，则会导致部分消息发送失败。如果部分消费者应用未更换接入点，则会导致消息堆积部分消息消费不到。接入点修改示例 ...
Hudi
String 否 当前table名 hudi同步到Hive的表名不能使用中划线（-）。dlf.catalog.region DLF服务的地域名。String 否 无 详情请参见 已开通的地域和访问域名。说明 仅当hive_sync.mode设置为hms时，dlf.catalog.region参数设置才生效。请和...
Spark使用OSS Select加速数据查询
背景信息 本文所有操作基于 Apache Impala(CDH6)处理OSS数据 搭建的CDH6集群及配置。说明 文中所有${} 的内容为环境变量，请根据您实际的环境修改。步骤一：配置Spark支持读写OSS 由于Spark默认没有将OSS的支持包放到它的CLASSPATH里面，...
游标
游标不能是已经打开的，并且它必需已经被声明为一个未绑定的游标变量（也就是声明为一个简单的 refcursor 变量）。该查询必须是一条 SELECT 或者其它返回行的东西（例如 EXPLAIN）。该查询会按照其它PL/SQL中的 SQL 命令同等的方式对待：先...
常见问题
在Windows操作系统中，使用IE浏览器打开网站提示”增强安全配置正在阻止来自下列网站内容“如何处理？我在服务器中基于宝塔面板搭建运行环境以及网站程序后，为什么无法访问网站程序对应的站点？Linux服务器基于宝塔面板部署LNMP或LAMP运行...
- 产品推荐
- 这些文档可能帮助您