XML函数
这个数组应该是一个二维 text 数组，其第二轴长度等于 2（即它应该是一个数组的数组，其中每一个都由刚好 2 个元素组成）。每个数组项的第一个元素是名字空间的名称（别名），第二个元素是名字空间的 URI。并不要求在这个数组中提供的别名...
ARRAY_DISTINCT
去除ARRAY数组 a 中的重复元素。命令格式 array<T>array_distinct(array<T><a>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回ARRAY类型。返回规则如下：新ARRAY数...
内建函数概述
聚合函数 支持将多条输入记录聚合成一条输出值，实现求和、求平均值、求最大最小值、求平均值、参数聚合、字符串连接等业务处理能力。字符串函数 支持处理STRING类型字符串，实现截取字符串、替换字符串、查找字符串、转换大小写、转换字符...
Logview诊断实践
有时候是由于某些特定的数据值引起的，比如出现某个值的时候会引起死循环。MaxCompute Studio支持下载表的部分Sample数据到本地运行，进行排查，详情请参考MaxCompute Studio开发手册：Java UDF、Python UDF。检查UDF函数是否与内置函数...
JSON函数和操作符
text→boolean 文本字符串是否作为JSON值中的顶级键或数组元素存在?'{"a":1,"b":2}':jsonb?'b'→t '["a","b","c"]':jsonb?'b'→t jsonb?text[]→boolean 文本数组中的字符串是否作为顶级键或数组元素存在?'{"a":1,"b":2,"c":3}':jsonb?...
CString
简介 CString类在包cava....参数：srcBegin—待拷贝的第一个字符的位置srcEnd—待拷贝的最后一个字符的位置dst—目标数组dstBegin—字符串在目标数组中的存储位置 代码示例：byte[]dst=new byte[10];CString a="abc;a.getChars(0,1,dst,0);
CString
简介 CString类在包cava....参数：srcBegin—待拷贝的第一个字符的位置srcEnd—待拷贝的最后一个字符的位置dst—目标数组dstBegin—字符串在目标数组中的存储位置 代码示例：byte[]dst=new byte[10];CString a="abc;a.getChars(0,1,dst,0);
JSON和JSONB类型
JSON储存的数据是对数据的完整拷贝，会保留源数据的空格、重复键和顺序等，如果一个值中的JSON对象包含同一个键超过一次，所有的键、值对都会被保留。而JSONB在解析时会删除掉不必要的空格、重复键和数据的顺序等，如果在输入中指定了重复...
2023年
按量付费闲时版 2023-07-17 新增PyODPS DataFrame的代码运行环境 新说明 使用PyODPS DataFrame编写数据应用时，同一个脚本文件中的代码会在不同位置执行，可能导致一些无法预期的问题，本文为您介绍当出现相关问题时，如何确定代码的执行...
消息过滤
消费者订阅了某个主题后，云消息队列 RocketMQ 版 会将该主题中的所有消息投递给消费者。若消费者只需要关注部分消息，可通过设置过滤条件在 云消息队列 RocketMQ 版 服务端进行过滤，只获取到需要关注的消息子集，避免接收到大量无效的...
MapReduce API
给定某个Collection和它的某个列计算的 sequence1，对另外一个 sequence2 进行布隆过滤时，sequence1 不存在于 sequence2 中的数据一定会被过滤掉，但可能无法完全过滤。所以这种过滤方式是一种近似的过滤方法。这样的好处是对Collection...
复杂类型函数
ARRAY_DISTINCT 去除ARRAY数组中的重复元素。ARRAY_EXCEPT 找出在ARRAY A中，但不在ARRAY B中的元素，并去掉重复的元素后，以ARRAY形式返回结果。ARRAY_INTERSECT 计算两个ARRAY数组的交集。ARRAY_JOIN 将ARRAY数组中的元素按照指定字符串...
函数概览
filter函数 结合Lambda表达式，用于过滤数组中的元素。只返回满足Lambda表达式的元素。flatten函数 把将二维数组转换为一维数组。reduce函数 根据Lambda表达式中的定义，对数组中的各个元素进行相加计算，然后返回计算结果。reverse函数 ...
JSON类型
还有，如果一个值中的 JSON 对象包含同一个键超过一次，所有的键/值对都会被保留（处理函数会把最后的值当作有效值）。相反，jsonb 不保留空格、不保留对象键的顺序并且不保留重复的对象键。如果在输入中指定了重复的键，只有最后一个值会...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
参数映射与校验规则
入参映射（过滤未知参数）模式：API网关会根据用户配置的所有参数执行校验与映射，如果客户端传递了未在配置中的参数，参数将会被API网关过滤掉，不会转发给后端，详细请参考 章节4。入参映射（透传未知参数）模式：在此模式下，如果用户...
列存索引如何实现高效数据过滤
列存索引中TopK算子的实现 一文中介绍了PolarDB IMCI如何利用统计信息在运行时进行剪枝，以提高TopK算法的查询性能。本文将进一步全面介绍PolarDB IMCI的查询剪枝（pruning or data skipping）技术。背景与作用 在HTAP场景中，PolarDB IMCI...
ARRAY_EXCEPT
找出在ARRAY数组 a 中，但不在ARRAY数组 b 中的元素，并去掉重复的元素后，返回新的ARRAY数组。命令格式 array<T>array_except(array<T><a>,array<T><b>)参数说明 a、b：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中...
DataWorks数据服务对接DataV最佳实践
这是因为DataV对数据格式有一定要求，不能识别结构较深的字段，因此需要添加一个数据过滤器，过滤掉不必要的字段，在本例中直接返回rows数组即可。勾选 使用过滤器，单击 新建 图标。此处支持编写JS代码对数据结果进行二次过滤和处理，过滤...
FILTER
将ARRAY数组 a 中的元素利用 func 进行过滤，返回一个新的ARRAY数组。命令格式 array<T>filter(array<T><a>,function,boolean>)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。func...
Bloom
向布隆过滤器中添加元素时，通过k个Hash函数将元素映射到Bit中的k个点，并将这些位置的值设置为1，一个Bit位可能被不同数据共享。下图展示了假设布隆过滤器的k为3，向其插入X1、X2的过程。查询元素时，仍通过k个Hash函数得到对应的k个位，...
过滤器
在服务端对读取结果再进行一次过滤，根据过滤器（Filter）中的条件决定返回的行。使用过滤器后，只返回符合条件的数据行，从而有效降低网络传输的数据量，减少响应时间。场景 直接过滤结果 以物联网中的智能电表为例，智能电表按一定的频率...
Stream Load
如需过滤掉不需要的数据，则可以通过设置该参数来实现。例如，只导入k1列等于20180601的数据，则可以在导入时指定-H"where:k1=20180601。max_filter_ratio 最大容忍可过滤（例如，因为数据不规范等原因而过滤）的数据比例。默认为0，取值...
使用函数计算作为Transform
如果是数组格式的数据，则数组中的每条数据都不能超过下游服务能接收的最大值。针对目标端为 函数计算 来说。返回值不能超过16 MB。异常处理机制 Transform的异常处理策略与当前任务的异常处理策略保持一致，即“任务属性”对Transform也...
TS
EXTS.S.RAW_INCRBY EXTS.S.RAW_INCRBY Pkey Skey ts value[DATA_ET time][CHUNK_SIZE size][UNCOMPRESSED][LABELS label1 val1.]该命令中的value值会与指定Skey中Datapoint数据的value相加实现递增，也可以指定该命令中的value为负数实现...
聚合函数
聚合函数主要应用于一组数据计算出一个结果。除了 count(),count_if(),max_by(),min_by()和 approx_distinct()之外,所有这些聚合函数均会忽略null值并且在没有输入数据或者所有数据 均是null值的情况下返回空结果。比如，sum()会返回null而...
数据问答干预
说明 该示例中，指导老师这个表头对应的环境参数的值为“迈特”，故会先以“指导老师=迈特”为条件，过滤掉其它数据。可以看到示例的表格中有两个姓名都为“张三”的学生，但学号为“430485”的“张三”对应的指导老师不是“迈特”，被过滤...
使用DataV可视化应用展示数据返回结果
因此需要添加一个数据过滤器，过滤掉不必要的字段，在本案例中直接返回 rows 数组即可。在组件的 数据 面板中，勾选 数据过滤器，单击 添加过滤器。在 设置数据源 页面中，单击 添加过滤器 右侧的+。在过滤器代码编辑框中输入 return data....
统计聚合
使用统计聚合功能可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等；...
控制结构
说明 如上所述，目前 RETURN NEXT 和 RETURN QUERY 的实现在从函数返回之前会把整个结果集都保存起来。这意味着如果一个PL/SQL函数生成一个非常大的结果集，性能可能会很差：数据将被写到磁盘上以避免内存耗尽，但是函数本身在整个结果集都...
数字类型
重要 因为 smallserial、serial 和 bigserial 是用序列实现的，所以即使没有删除过行，在出现在列中的序列值可能有“空洞”或者间隙。如果一个从序列中分配的值被用在一行中，即使该行最终没有被成功地插入到表中，该值也被“用掉”了。...
HTTP请求处理程序（HTTP Handler）
queries Array 存放来自HTTP URL中的查询部分的键值对，键值对中的值可以是字符串或数组。method String HTTP方法。clientIP String HTTP客户端的IP地址。requestURI String 请求中除host以外的URL。body String HTTP请求中的请求体数据。...
轨迹层
重要 该配置项为一个数组，配合数据分级使用，从类型1到类型n为递增的设置，例：类型1设置为10，则表示value值为0~10的数据将展示为10的大小，类型2设置为20，则表示value值为11~20的数据将展示为20的大小，如果数据分级配置项设置为3级，...
报表嵌入数据权限控制和传参的安全增强方案
GlobalParam，全局参数的参数值是一个 JSON 数组：[{"paramKey":"price",/全局参数 Key"joinType":"and",/连接方式，使用 and 即可"conditionList":[{"operate":"=",/操作符，参考以下说明"value":"1"/操作值，在多个值的情况下使用数组["1...
轮播列表柱状图
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
查看、删除、移动、克隆、批量操作、代码搜索API
查看API 登录 DataWorks控制台，单击左侧导航栏的 数据服务，在下拉框中选择对应工作空间后单击 进入数据服务。在 服务开发 页面，展开目标API所在的 业务流程>API。右键单击相应的API名称，选择 详情。说明 仅已发布的API支持通过右键单击...
消息过滤
消费者订阅了某个Topic后，云消息队列 RocketMQ 版 会将该Topic中的所有消息投递给消费端进行消费。若消费者只需要关注部分消息，可通过设置过滤条件在 云消息队列 RocketMQ 版 服务端完成消息过滤，只消费需要关注的消息。本文介绍消息...
DBMS_SQL
显示结果如下：Number of rows processed:1 BIND_VARIABLE_CHAR 存储过程 BIND_VARIABLE_CHAR 将一个CHAR类型的值和SQL命令中的IN或IN OUT绑定变量相关联。BIND_VARIABLE_CHAR(c INTEGER,name VARCHAR2,value CHAR[,out_value_size INTEGER...
JindoCube使用说明
JindoCube在E-MapReduce 3.24.0及之后版本...可能导致Cache数据不完整的情况包括：用户在Cache详情页主动删除查询需要的Cache Partition数据，构建、更新Cache时指定的过滤条件过滤掉了查询需要的数据，查询需要的数据还未及时更新到Cache等。
- 产品推荐
- 这些文档可能帮助您