从OSS获取CSV文件进行数据富化
本文档介绍如何通过资源函数和映射富化函数从OSS中获取数据对日志数据进行富化。前提条件 已创建访问密钥（AccessKey），用于访问OSS Bucket，详情请参见 创建AccessKey。推荐创建一个只读权限的AccessKey，用于从OSS获取文件；一个只写...
日期/时间类型
日期/时间类型 名字 存储尺寸 说明 最小值 最大值 解析度 timestamp[(p)][without time zone]8字节 包括日期和时间（无时区）。4713 BC 294276 AD 1微秒 timestamp[(p)]with time zone 8字节 包括日期和时间，有时区。4713 BC 294276 AD 1...
Cron
可选：如果需要，在 高级设置 区域还可以设置 时间偏移 和 时区。当时间类型选择Cron后，可以进行高级配置。高级配置参数说明如下：配置名称 意义 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据...
Cron
可选：如果需要，在 高级设置 区域还可以设置 时间偏移 和 时区。当时间类型选择Cron后，可以进行高级配置。高级配置参数说明如下：配置名称 意义 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据...
扫描（Scan）查询概述
日期和时间函数 函数类型 函数名称 语法 说明 日期和时间函数 date_format函数 date_format(x,format)将timestamp类型的日期和时间表达式转化为指定格式的日期和时间表达式。from_unixtime函数 from_unixtime(x)将UNIX时间戳转化为无时区的...
日期时间函数
修改日期时区 dt_astimezone 将值或时间表达式的值转换为特定时区的日期时间对象。获取差异 dt_diff 按照特定粒度获取两个值或时间表达式值的差异值。dt_parse 将值或时间表达式的值转换为日期时间对象。函数格式 dt_parse(value,tz=None)...
时区
在Hologres中所有日期和时间都用全球统一时间UTC格式存储，所有Region默认是 UTC-08（中国东八区时间），比世界协调时间（UTC）和格林尼治时间（GMT）快八小时的时区。同时Hologres提供两种存储时间戳的数据类型：不带时区的TIMESTAMP和带...
Cron
可选：如果需要，在 高级设置 区域还可以设置 时间偏移 和 时区。当时间类型选择Cron后，可以进行高级配置。高级配置参数说明如下：配置名称 意义 默认值 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。无 时区 ...
流计算实现细节
合并从Meta表中获取的实时消费位点和从Tunnel服务端定时获取消费位点checkpoints，得到当前所有Channel的消费位点。根据最新的checkpoints和EndOffset对应的UUID等信息来构建SourceRDD。RDD是Spark中最基本的数据抽象，它代表一个不可变、...
函数概览
extract函数 通过指定的field，提取日期和时间表达式中的日期或时间部分。hour函数 提取日期和时间表达式中的小时数，按24小时制计算。minute函数 提取日期和时间表达式中的分钟数。month函数 提取日期和时间表达式中的月份。quarter函数 ...
时间/日期函数和操作符
text)→timestamp with time zone 在规定的时区中截断到指定的精度 date_trunc('day',timestamptz '2001-02-16 20:38:40+00','Asia/Shanghai')→2001-02-16 16:00:00+00 date_trunc(text,interval)→interval 截断到指定的精度 date_trunc...
HTTP任务
高级配置参数说明如下：配置名称 说明 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。第三步：报警配置 HTTP任务支持错误...
HTTP任务
高级配置参数说明如下：配置名称 说明 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。第三步：报警配置 HTTP任务支持错误...
Tableau
本文为您介绍Tableau如何连接Hologres并可视化分析数据。...例如如下例子中，希望将 l_shipdate 作为日期&时间格式使用，那么在Hologres建表时应该直接将该列设置为TIMESTAMP或者TIMESTAMPTZ格式，以避免多余的字段类型转换。
时间和日期转换函数
978969600 date_part(text,timestamp)返回类型：DOUBLE PRECISION 描述：从时间戳中获取子字段，等效于 extract(field FROM timestamp)。说明 输入的field常量值包括century、day、decade、dow（一周中的第几天，周日为0）、isodow（一周中...
HTTP任务（Serverless）
高级配置参数说明如下：配置名称 说明 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。第三步：报警配置 HTTP任务支持错误...
表达式函数概览
本文列举数据加工任务所涉及的表达式函数。函数分类 函数名称 说明 事件检查函数 e_has 判断日志字段是否存在。e_not_has 判断日志字段是否不存在。...res_oss_file 从OSS中获取特定Bucket下的文件内容，支持定期更新数据。
表达式
本文介绍表达式的基本概念，以及表达式使用过程中的运算符和函数，帮助您理解并使用表达式。简介 表达式是数字、算符、数字分组符号、自由变量和约束变量等的组合。在魔笔中，您可以通过运算符、函数以及变量组成表达式，并在逻辑流、工作...
函数总览
dt_utcnow 获取当前时区的当前日期时间对象。dt_fromtimestamp 将Unix时间戳转换为日期时间对象。dt_utcfromtimestamp 将Unix时间戳转换为当前时区的日期时间对象。dt_strptime 将时间字符串解析为日期时间对象。dt_currentstamp 获取当前...
日期函数
返回值说明 返回当前日期和时间，DATETIME类型。ISDATE 命令格式 boolean isdate(string,string)命令说明 判断一个日期字符串能否根据指定的格式串转换为一个日期值。如果能转换成功，返回 True；否则返回 False。参数说明 date：必填。...
任务管理
在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为2019-01-01 10:00:00。重刷任务的起止日期为2018-10-01~2018-10-07，默认...
任务管理
在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为2019-01-01 10:00:00。重刷任务的起止日期为2018-10-01~2018-10-07，默认...
任务管理
在 重刷任务 面板，设置 起止日期 和 数据时间，单击 确定。起止日期：指定重刷的日期区间。数据时间：指定重刷日期区间内的重刷时间。示例重刷配置如下：当前时间为2019-01-01 10:00:00。重刷任务的起止日期为2018-10-01~2018-10-07，默认...
实时数仓Hologres
Flink和Hologres的时区详情，请参见 Flink与Hologres时区说明。源表独有 参数 说明 数据类型 是否必填 默认值 备注 field_delimiter 导出数据时，不同行之间使用的分隔符。String 否"\u0002"无。binlog 是否消费Binlog数据。Boolean 否 ...
支持的函数
CURRENT_DATE 返回本地时区中的当前SQL日期。CURRENT_TIMESTAMP 返回本地时区的当前SQL时间戳。NOW()返回本地时区的当前SQL时间戳，这是 CURRENT_TIMESTAMP的同义词。CURRENT_ROW_TIMESTAMP()返回本地时区的当前SQL时间戳。EXTRACT...
403错误
解决方案：临时访问凭证最终获取的权限是 步骤四 设置的角色权限和 步骤五 中Policy设置权限的交集。请通过以下示例检查您在这两个步骤中设置的权限交集。示例1 如下图所示，A代表RAM角色的权限，B代表通过policy参数设置的权限，C代表临时...
报警任务概述
Cron表达式中的每个域依次表示秒、分钟、小时、日期和月，每个域可以是确定的取值，也可以是具有逻辑意义的特殊字符。报警任务配置Cron表达式时，需要注意以下内容：Cron表达式采用UTC+0时区，在配置Cron表达式时，您需要把本地时间换算成...
场景：切换调度时区
调度场景下（不包括数据开发临时运行），若您在DataWorks脚本任务（例如Shell，pyodps）中，直接执行获取时间命令（例如Shell节点中执行date命令），系统会根据您调度时区返回时间。如果是在底层计算引擎侧解析的，请参考底层计算引擎侧的...
2024年
FROM_CHARSET 2024-03-21 新增MaxCompute TIMESTAMP_NTZ数据类型介绍 新说明 MaxCompute 2.0新增了无时区时间戳类型（TIMESTAMP_NTZ），该类型表示不包含时区信息的日期和时间点，所有数据均基于统一的时间基准（如UTC）。相较于其他带有...
PostObject
当请求头和文件表单域中同时指定 x-oss-object-acl 时，文件表单域中设置的访问权限的优先级高于请求中设置的访问权限。取值：default（默认）：Object遵循所在存储空间的访问权限。private：Object是私有资源。只有Object的拥有者和授权...
Web应用防火墙的审计事件
Web应用防火墙已与操作审计服务集成，您可以在操作审计中查询用户操作Web应用防火墙产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户...
3D数字人视频合成接入指南
当任务状态为已完成时，可以从TaskResult中获取到对应的视频和字幕的URL，然后可以进行视频和字幕文件的下载。警告 该接口调用方可能会进行轮询调用，强烈建议 轮询间隔不要小于1s，建议设置为3s，当任务量较大的情况要增加间隔时间，避免...
统计聚合
使用统计聚合功能可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等；...
统计聚合
使用统计聚合功能可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等；...
日期和时间函数
日志服务提供时间函数、日期函数、日期和时间提取函数、时间间隔函数和时序补全函数，支持对日志中的日期和时间进行格式转换，分组聚合等处理。本文介绍日期和时间函数的基本语法及示例。日志服务支持如下日期和时间函数。重要 日志服务中...
RAM Policy
OSS Condition中的条件操作类型和条件关键字如下：条件操作类型 条件操作类型 支持类型 字符串类型（String）StringEquals StringNotEquals StringEqualsIgnoreCase StringNotEqualsIgnoreCase StringLike StringNotLike 数字类型（Number...
iOS播放器SDK
新增支持Metal渲染（仅支持设置背景颜色、缩放模式和画中画功能），详情请参见 Metal渲染。修复部分已知问题。2023-12-08 日期 版本 修改内容 2023-12-08 6.8.0 支持单码率混合HLS流的音轨切换功能，详情请参见 切换音轨。私有加密支持URL...
API 概览
my.getBluetoothDevices 获取所有已发现的蓝牙设备，包括已经和本机处于连接状态的蓝牙设备。my.getConnectedBluetoothDevices 获取处于已连接状态的设备。my.connectBLEDevice 连接低功耗蓝牙设备。my.disconnectBLEDevice 断开与低功耗...
Web播放器SDK
2024-01-12 日期 版本 修改内容 2024-01-12 2.20.0 支持在画面中设置自定义Logo图片，详情参见 接口说明 中的 setLogo 方法和 logo 属性。支持关闭火狐浏览器的画中画按钮（火狐浏览器需为116以上版本）。支持 autoplay 事件，详情参见 ...
Android播放器SDK
2020-03-16 日期 版本 修改内容 下载地址 2020-03-16 4.7.4 增加获取FPS的接口，增加视频渲染回调接口。提升SDK的稳定性。暂不提供，建议下载最新版本使用 2019-12-11 日期 版本 修改内容 下载地址 2019-12-11 4.7.3 支持设置多码率流的启...
- 产品推荐
- 这些文档可能帮助您