进度条
设置进度回调函数打印进度条。put.setProgressCallback(new OSSProgressCallback(){@Override public void onProgress(PutObjectRequest request,long currentSize,long totalSize){/currentSize表示已上传文件的大小，单位为字节。...
教程示例：结合消息服务实现OSS事件通知
场景描述 某企业在华东1（杭州）地域创建了名为srcbucket的存储空间（Bucket），Bucket内包含了不同日期持续生成的以log为前缀的日志文件log/date1.txt、log/date2.txt和log/date3.txt等，以及以周为单位收集的以destdir为前缀的客户案例...
C SDK V4.x版开发指南
SDK日志级别*/typedef enum iotx_log_level_t {/*debug level*/LF_LOG_DEBUG=0,/*info level*/LF_LOG_INFO=1,/*warn level*/LF_LOG_WARN=2,/*error level*/LF_LOG_ERROR=3,} iotx_log_level_t;SDK日志输出类型*/typedef enum iotx_log_dest...
Kafka常见问题
如何清理Kafka组件输出日志 当组件服务输出日志过大，占用存储空间过多时，您可以进入Kafka服务输出日志的存储目录$LOG_DIR_ROOT（默认存储实际目录为/mnt/disk1/log），进入后根据需要删除kafka、cruise-control、kafka-schema-registry、...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
Jindo sql命令介绍
jindo sql-d access_log_path=oss:/test-sh/oss-accesslog-d partition.table.enabled=true 代码中的 access_log_path 为OSS访问日志存储路径，partition.table.enabled 指定是否为分区表，true表示为分区表。常见问题 Q：如何修改初始资源...
创建存储空间
在上传文件（Object）到OSS之前，您需要创建一个用于存储文件的存储空间（Bucket）。存储空间具有各种配置属性，包括访问权限、存储类型等。您可以根据实际需求，创建不同类型的存储空间来存储不同的数据。注意事项 创建存储空间本身不收取...
云手机常见问题
ADB生成的密钥对以adbkey（私钥）和adbkey.pub（公钥）的形式存储存放位置如下：macOS操作系统：~/.android。Windows操作系统：C:\Users\xxx\.android。Linux操作系统：/root/.android。ADB访问客户端与云手机网络是否连通，如是公网访问，...
Custom Runtime支持Loggie Agent日志扩展
如果出现进程异常退出或者执行超时的报错，可以尝试调大内存或CPU规格。相关文档 关于Loggie的更多信息，请参见 Loggie简介。在本文示例中，Loggie采集到日志后原样上传，没有经过任何加工处理。如果需要对日志数据加工后再上传，例如解析...
SetSparkAppLogRootPath-更改用户Spark的日志配置
操作 访问级别 资源类型 条件关键字 关联操作 adb:SetSparkAppLogRootPath Write DBClusterLakeVersion acs:adb:{#regionId}:{#accountId}:dbcluster/{#DBClusterId} 无 无 请求参数 名称 类型 必填 描述 示例值 DBClusterId string 是 ...
缓存
入参 名称 类型 必填 描述 key String 是 缓存数据的 key data Object/String 是 要缓存的数据 success Function 否 调用成功的回调函数 fail Function 否 调用失败的回调函数 complete Function 否 调用结束的回调函数（调用成功、失败...
安装Logtail组件（自建Kubernetes集群）
kubectl get ds-n kube-system logtail-ds-o yaml>logtail-ds.yaml kubectl get deployment-n kube-system alibaba-log-controller-o yaml>alibaba-log-controller.yaml kubectl get crd aliyunlogconfigs.log.alibabacloud....
日志回调
通过阅读本文，你可以了解外部日志回调和内置日志回调函数的详情。外部日志回调 外部日志回调函数声明如下所示：int(*output_log)(void*s,int level,const char*fmt,va_list args);参数说明 参数 类型 描述 s void*通过 preconfig（...
数据类型
typedef enum { RTS_LOG_NONE=0,RTS_LOG_DEBUG=1,RTS_LOG_INFO=2,RTS_LOG_WARN=3,RTS_LOG_ERROR=4,} RTS_LOG_LEVEL;数据成员 描述 max_file_size 单个日志文件最大文件大小，单位MB。log_keep_count 保留日志文件个数。log_level 打印日志...
简单上传
上传性能调优 如果您在上传大量Object时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量Object索引集中存储于存储空间中某个特定分区的情况，进而导致请求速率下降。建议您在上传大量Object时，不要使用顺序前缀的Object...
文件
入参 名称 类型 必填 描述 apFilePath String 是 文件路径 success Function 否 调用成功的回调函数 fail Function 否 调用失败的回调函数 complete Function 否 调用结束的回调函数（调用成功、失败都会执行）success 返回值说明 名称 ...
通过Spark SQL读写C-Store表数据
前提条件 湖仓版（3.0）集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群。已在湖仓版（3.0）集群中创建Job型资源组。具体操作，请参见 新建资源组。已创建湖仓版（3.0）集群的数据库账号。如果是通过阿里云账号访问，只需创建高...
参数配置
LOG相关配置 配置项 默认值 描述 qe_slow_log_ms 5000 Slow query的认定时长，单位为ms。元数据与集群管理相关配置 配置项 默认值 描述 catalog_try_lock_timeout_ms 5000 Catalog Lock获取的超时时长，单位为ms。edit_log_roll_num 50000 ...
通知设置相关接口
设置大图标和大图下载失败监控回调 设置大图标和大图下载失败监控回调，感知大图标和大图下载失败的状态和失败原因。重要 SDK版本v3.8.2及以上支持 接口定义 void setLargeIconDownloadListener(OnLargeIconDownloadListener listener);...
CreateTrail-创建跟踪
本文将提供一个示例，为您创建一个名为 trail-test 的单账号跟踪，将操作事件投递到名为 audit-log 的 OSS 存储空间中。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
2022-09-19版本
管理Hive Catalog 表格存储OTS Source Connector发布 支持读取OTS的增量Log。表格存储Tablestore源表 JDBC Connector发布 内置社区JDBC Connector。JDBC源表 JDBC结果表 JDBC维表 RocketMQ源表支持并发数大于Topic分区数 该模式可以让用户...
参数配置
FE动态参数 LOG相关配置 参数 默认值 描述 qe_slow_log_ms 5000 Slow query的认定时长，单位为ms。元数据与集群管理相关配置 参数 默认值 描述 catalog_try_lock_timeout_ms 5000 Catalog Lock获取的超时时长，单位为ms。edit_log_roll_num...
调整innodb_flush_log_at_trx_commit和sync_binlog...
innodb_flush_log_at_trx_commit和sync_binlog参数分别控制了MySQL中Redo log日志的记录方式和Binlog的更新策略。根据业务需求，您可通过调整参数取值进行实例调优，以在数据库性能和数据安全性之间取得平衡。背景 优化innodb_flush_log_at...
BUILD
例如，配置数据库 adb_demo1 中表 test1 的BUILD调度优先级为30，数据库 adb_demo2 中表 test2 的BUILD调度优先级为10。SET ADB_CONFIG RC_BUILD_TASK_PRIORITY_LIST=`adb_demo1.test1.30;adb_demo2.test2.10`;配置同一数据库的所有表具有...
管理 Pilot 日志
Pilot 启动日志参数-log_target=stdout/日志输出目标-log_rotate=home/admin/logs/discovery.log/日志文件路径-log_rotate_max_size=512/日志滚动大小，单位是 KB-log_rotate_max_backups=24/日志滚动时间，时间单位是 s-log_as_json=false...
OSS性能与扩展性最佳实践
反转文件名 如果您使用了毫秒精度的Unix时间戳生成文件名，同样属于顺序前缀：sample-bucket-02/1513160001245.log sample-bucket-02/1513160001722.log sample-bucket-02/1513160001836.log sample-bucket-02/1513160001956.log.sample-...
导入与导出
您可以调大单次导入的 批量插入条数 及增加 任务期望最大并发数，数据导入性能会随着导入压力的增加而线性增加。DataWorks导入数据至AnalyticDB MySQL集群时，为什么导入的目标表存在数据倾斜？当导入的目标表存在数据倾斜时，集群部分节点...
LLM+ADB快速构建企业专属Chatbot
随着ChatGPT推出Retrieval plugin的方案，向量数据库（企业知识库）+大语言模型可以快速帮助企业构建专属的chatbot；本服务是对文章《云原生数据仓库AnalyticDB(ADB)+LLM：构建AIGC时代下企业专属Chatbot》的一个开源实现部署。服务介绍 ...
使用前须知
根据《网络安全法》日志至少存储180天的要求，推荐每台服务器配置40GB的日志存储容量。云安全中心 免费版 不支持开通日志分析功能。云安全中心 旗舰版、企业版 支持查看网络日志、安全日志和主机日志，高级版、防病毒版 仅支持查看安全日志...
常见问题
JavaSDK实现数据流分片上传的代码样例 对象存储OSS使用JavaSDK的ContentMD5提示“log4j”错误 设置跨域规则后调用OSS时仍然报“No 'Access-Control-Allow-Origin'”的错误 对象存储OSS使用Java实现签名Header上传的示例 Python Python SDK...
PutBucketLifecycle
您可以基于最后一次修改时间以及最后一次访问时间的策略创建生命周期规则，定期将存储空间（Bucket）内的多个文件（Object）转储为指定存储类型，或者将过期的Object和碎片删除，从而节省存储费用。本文为您介绍如何调用 ...
JVM内存配置最佳实践
如果JVM堆空间大小设置过大，可能会导致Linux系统的OOM Killer被激活，进而结束（kill）Java应用进程，在容器环境下可能会表现为频繁异常重启。本文介绍在容器环境下JVM堆参数的配置建议，以及OOM的相关常见问题。通过-XX:MaxRAMPercentage...
容器服务ACK服务角色
AliyunCSManagedCsiRole ACK托管集群 和 ACK Serverless集群 的存储组件使用该角色访问您在ECS、NAS服务中的资源。AliyunCSManagedCmsRole ACK托管集群 和 ACK Serverless集群 的监控组件使用该角色访问您在CMS、SLS服务中的资源。...
日志说明
默认的日志输出等级为 LOG_LEVEL_DEBUG，用户如需修改日志等级，请参考接口：默认的日志输出等级为LOG_LEVEL_DEBUG，用户如需修改日志等级，请参考接口aiot_state_set_log_level/*@brief 设置SDK的日志信息输出等级*@param level 日志等级*...
自定义Spark镜像
背景信息 使用 AnalyticDB for MySQL Spark默认镜像时，可能无法满足部分场景，例如：执行作业前需要进行复杂的环境初始化，例如下载较大的模型文件到指定本地目录、需要安装和升级特定Linux开发工具包等。使用Python进行机器学习、数据...
通过外表导入至数仓版
您可以使用以下语句在目标数据库 adb_demo 中创建一张目标表，用于存储从HDFS导入的数据：创建普通外表对应的目标表（本文示例中目标表名为 adb_hdfs_import_test），语法如下。CREATE TABLE IF NOT EXISTS adb_hdfs_import_test(uid ...
解析Java报错日志
在大数据、高并发场景下的Java应用中，通过有效方式分析Java报错日志并提供运维指导，能有效减轻产品运营维护成本。日志服务支持采集各云产品的Java报错日志，通过数据加工解析Java错误日志。前提条件 已采集各SLS、OSS、SLB、RDS的Java...
exZset
通过TairZset（exZset）可实现256维度的double类型的分值排序，适用于游戏、直播、音乐、电商等行业的排行榜场景，可极大提升数据处理效率，且客户端适配简易，无需任何编解码封装。TairZset简介 原生Redis支持的排序结构Sorted Set（也称...
日志配置
语言 默认路径 Java {$HOME}/logs/rocketmq/rocketmq-client.log C++ {$HOME}/logs/rocketmq/client.log C#{$HOME}/logs/rocketmq/rocketmq-client.log Go {$HOME}/logs/rocketmq/rocketmq_client_go.log 日志参数 客户端启动后，会按照...
- 产品推荐
- 这些文档可能帮助您