加工数据
INSERT OVERWRITE TABLE data4ml PARTITION(ds=${bdp.system.bizdate})SELECTa.uid,trend,xiansun,warnindicator,flag FROM(SELECT uid,trend FROM clean_trend_data where dt=${bdp.system.bizdate})a FULL OUTER JOIN(SELECT uid,xiansun...
长周期指标的计算优化方案
select item_id-商品id,count(distinct visitor_id)as ipv_uv_1d_001 from 用户访问商品日志明细表 where ds${bdp.system.bizdate} and ds>=to_char(dateadd(to_date(${bdp.system.bizdate},'yyyymmdd'),-29,'dd'),'yyyymmdd')group by ...
血缘关系
血缘关系为您展示当前节点和其它节点的关系，展示依赖关系图和内部血缘图两部分。依赖关系图 依赖关系图根据节点的依赖关系，展示当前节点的依赖是否为自己预期的情况。如果不是，可以返回调度配置界面重新设置。内部血缘图 内部血缘图根据...
Quick BI仪表板中图表的导出功能，导出为Excel对于...
概述 本文主要介绍仪表板图表导出Excel后字段的先后排序问题。...图表为线图、柱图及组合图，导出结果按照“先维度，后度量”的顺序排布，维度及度量内部的顺序见下图箭头指向。适用于 Quick BI 说明：本文适用于可视化组件模块。
启动并配置
启动命令行工具后，配置AccessKey或者表格存储（Tablestore）实例等接入信息。前提条件 已获取AccessKey（包括AccessKey ID和AccessKey Secret）。具体操作，请参见 获取AccessKey。...key 是 7NR2DiotscDbauohSq9kSHX8BDp99bjs7eNpCR7o*
MaxCompute在电商场景中如何进行漏斗模型分析
INSERT INTO dw_user_trace_data PARTITION(dt='${bdp.system.bizdate}')SELECT uid,device_brand,system_type,customize_event,use_time,customize_event_content FROM ods_user_trace_data WHERE dt='${bdp.system.bizdate}';按照如下建...
实例操作
本文介绍如何使用Tablestore CLI以命令行的方式管理表格存储实例。开通表格存储服务 如果已经开通表格存储服务，请跳过此操作。服务仅需开通一次，开通过程免费。...AccessKeySecret 是 7NR2DiotscDbauohSq9kSHX8BDp99bjs7eNpCR7o*
分区剪裁合理性评估
explain select.from xxxxx_base2_brd_ind_cw where ds=concat(SPLIT_PART(bi_week_dim('${bdp.system.bizdate}'),',',1),SPLIT_PART(bi_week_dim('${bdp.system.bizdate}'),',',2))说明 UDF已支持分区裁剪，详情请参见 WHERE子句过滤...
在推荐系统中应用FeatureStore管理特征
单击周期任务列表中的目标任务，打开该任务的DAG图。右键单击目标节点，选择 补数据>当前节点，选择相应的补数据模式。业务日期 选择 2023-10-22 至 2023-10-24，单击 确定。完成上述操作后，您可以在自己的工作空间内查看用户表 rec_sln_...
整库离线同步至OSS
同时，在写where子句时，您可以使用系统内置变量，例如使用${bdp.system.bizdate} 指代业务日期，格式为 yyyymmdd，使用${bdp.system.cyctime} 指代定时时间，格式为 yyyymmddhh24miss 等。说明 您可以使用调度参数来指定同步源表及目标表...
RDS增量数据同步至MaxCompute
在 数据来源 中设置数据过滤为 date_format(optime,'%Y%m%d')=${bdp.system.bizdate}，在 数据去向 中设置分区信息为${bdp.system.bizdate}。说明 通过配置数据过滤，在15日凌晨进行同步时，您可以查询14日源头表全天新增的数据，并同步至...
RDS增量数据同步至MaxCompute
在 数据来源 中设置数据过滤为 date_format(optime,'%Y%m%d')=${bdp.system.bizdate}，在 数据去向 中设置分区信息为${bdp.system.bizdate}。说明 通过配置数据过滤，在15日凌晨进行同步时，您可以查询14日源头表全天新增的数据，并同步至...
整库离线同步至MaxCompute
同时，在写where子句时，您可以使用系统内置变量，例如使用${bdp.system.bizdate} 指代业务日期、使用${bdp.system.cyctime} 指代定时时间等。说明 您可以使用调度参数来指定同步源表及目标表的数据范围，调度参数使用说明请参见：数据集成...
整库离线同步至MaxCompute
同时，在写where子句时，您可以使用系统内置变量，例如使用${bdp.system.bizdate} 指代业务日期、使用${bdp.system.cyctime} 指代定时时间等。说明 您可以使用调度参数来指定同步源表及目标表的数据范围，调度参数使用说明请参见：数据集成...
如何复制数据表的表结构
使用myinstance实例配置接入信息，示例如下：config-endpoint https://myinstance.cn-hangzhou.ots.aliyuncs.com --instance myinstance --id NTSVLeBHzgX2iZfcaXXPJ*-key 7NR2DiotscDbauohSq9kSHX8BDp99bjs7eNpCR7o*导出表信息到本地JSON...
通过命令行工具CLI使用时序模型
config-id NTSVLeBHzgX2i*-key 7NR2DiotscDbauohSq9kSHX8BDp9*执行 enable_service 命令，开通 表格存储 服务。步骤三：创建实例 通过create_instance命令创建一个高性能实例。更多信息，请参见 实例操作。执行以下命令，在华东1（杭州）...
数据集成侧同步任务配置
同时，在写where子句时，您可以使用系统内置变量，例如使用${bdp.system.bizdate} 指代业务日期、使用${bdp.system.cyctime} 指代定时时间等。说明 您可以使用调度参数来指定同步源表及目标表的数据范围，调度参数使用说明请参见：数据集成...
整库离线同步至Elasticsearch
同时，在写where子句时，您可以使用系统内置变量，例如使用${bdp.system.bizdate} 指代业务日期、使用${bdp.system.cyctime} 指代定时时间等。周期设置 由于需要进行周期性调度，所以需要在此定义周期性调度任务时的相关属性，包括 调度...
DRDS（PolarDB-X）数据源
通常会选择当天的数据进行同步，您可以指定 where 条件为 STRTODATE('${bdp.system.bizdate}','%Y%m%d')(STRTODATE('${bdp.system.bizdate}','%Y%m%d'),interval 1 day)。否 无 Writer脚本Demo {"type":"job","version":"2.0",/版本号。...
准备数据
分区信息 输入要同步的分区列，此处默认为 dt=${bdp.system.bizdate}。清理规则 选择 写入前清理已有数据。空字符串作为null 选择 否。配置字段映射。配置 通道控制。参数 描述 任务期望最大并发数 数据同步任务内，可以从源并行读取或并行...
通过命令行工具使用宽表模型
config-id NTSVLeBHzgX2i*-key 7NR2DiotscDbauohSq9kSHX8BDp9*执行 enable_service 命令，开通 表格存储 服务。步骤三：创建实例 通过create_instance命令创建一个高性能实例。更多信息，请参见 实例操作。执行以下命令，在华东1（杭州）...
数据质量风险监控
单击+，选择 分区表达式 为 dt=$[yyyymmdd-1]，对应表ods_user_trace_log的分区格式为${bdp.system.bizdate}（即获取到前一天的日期）。分区表达式的详细信息请参见 基础属性：调度参数。如果表中无分区列，可以配置无分区。单击 计算，...
数据质量风险监控
单击+，选择 分区表达式 为 dt=$[yyyymmdd-1]，对应表ods_user_trace_log的分区格式为${bdp.system.bizdate}（即获取到前一天的日期）。分区表达式的详细信息请参见 调度参数支持的格式。如果表中无分区列，可以配置无分区。单击 计算，...
Tablestore Stream配置同步任务
truncate":true,"partition":"pt=${bdp.system.bizdate}",/分区信息。column":[/目标列名。id","colname","version","colvalue","optype","sequenceinfo"]} },"setting":{"speed":{"mbps":7,/作业速率上限，此处1mbps=1MB/s。...
MaxCompute数据开发规范
代码如果有时间或日期参数，需采用类似 {bdp.system.cyctime} 的调度参数，以方便调试。自定义参数，采用${变量名} 在发布任务时进行配置。变量名即为调度参数。编码规范 编写原则 代码行清晰、整齐，具有一定的可观赏性。代码编写要充分...
查询集群基本信息
调用DescribeClusterV2接口，查询集群的基本信息，包括：付费、ECS机器概况和E-MapReduce服务列表等。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。...
Linux系统常用内核网络参数介绍与常见问题处理
对于较大的BDP可以增大这些值（其单位是内存页而不是字节）。net.ipv4.tcp_rmem 为自动调优定义Socket使用的内存。第一个值是为Socket接收缓冲区分配的最少字节数。第二个值是默认值（该值会覆盖rmem_default），缓冲区在系统负载不重的...
如何提高Nginx Web服务器的安全性
本文介绍如何提高Nginx Web服务器的安全性的操作步骤。背景信息 Nginx是一个轻量级的，高性能的Web服务器以及...default,and max number of bytes to use#set max to at least 4MB,or higher if you use very high BDP paths#Tcp Windows etc ...
Linux系统常用内核网络参数介绍与常见问题处理
本文介绍常见的Linux系统内核网络参数及常见问题的解决方案。注意事项 在修改内核参数前，您需要注意以下几点：从实际需求出发，尽量有相关数据的支撑，不建议您随意调整内核参数。了解参数的具体作用，需注意不同类型或版本的环境中，内核...
Quick BI图表的时间顺序混乱，没有进行自动排序
问题描述 Quick BI图表的时间顺序混乱，没有进行自动排序。问题原因 这个问题的原因是因为在颜色图例中进行了自定义排序，并且除了2022年4月之外，其他的月份一厂的数据缺失造成的。解决方案 可以将其他月份，一厂的数据设置为0，时间就...
- 产品推荐
- 这些文档可能帮助您