规范建模概述
使用Dataphin进行规范建模时，您可根据业务实际情况在Dataphin设计并创建概念模型，并通过概念模型中的业务实体（业务对象 或 业务活动）创建对应的维度表、事实表、原子指标、业务限定、指标、汇总逻辑表。前提条件 使用规范建模，当前...
如何实现OAuth登录
在弹出的对话框中，根据业务设置逻辑流相关参数，具体操作请参见 编排逻辑流。在OAuth逻辑流中，需拼接跳转的URL，并将用户跳转到OAuth提供方的网站。说明 在跳转URL中，需要包含应用程序的clientId、回调URL等参数。对于不同的OAuth提供方...
SQL 诊断概述
可疑 SQL：平台根据规则、算法筛选出的将会带来性能问题的 SQL 语句。通过单击列表中的 SQL 文本可进入 SQL 详情页，可查看 SQL 文本，SQL 执行历史、物理执行计划等内容。详细说明，请参见 查看 SQL 详情。TopSQL TopSQL 是指在选定的时间...
V5.4.x系列实例版本说明
修复问题 修复特殊情况下，无法正确提示非法SQL的语法错误的问题。V5.4.9-16124261 日期2021-02-05 类别 说明 新增特性 新增支持ALTER TALBE ADD PRIMARY KEY语法。新增支持单表下推场景下的变量赋值语法。修复问题 修复 MIN_ALLOCATE_SIZE...
功能简介
数据开发帮助用户优化智能系统的架构，提高系统的工程化水平，让用户能够集中精力处理计算逻辑问题，提高开发效率。数据开发除了在系统层面上集中管理计算节点，降低计算节点和系统其他组件的耦合之外，也对计算节点内部的实现提供了一组...
功能简介
数据开发帮助用户优化智能系统的架构，提高系统的工程化水平，让用户能够集中精力处理计算逻辑问题，提高开发效率。数据开发除了在系统层面上集中管理计算节点，降低计算节点和系统其他组件的耦合之外，也对计算节点内部的实现提供了一组...
数据开发
数据开发帮助用户优化智能系统的架构，提高系统的工程化水平，让用户能够集中精力处理计算逻辑问题，提高开发效率。数据开发除了在系统层面上集中管理计算节点，降低计算节点和系统其他组件的耦合之外，也对计算节点内部的实现提供了一组...
MySQL分库分表同步至MaxCompute
手工添加逻辑表 在 自动生成逻辑表 与期望的匹配结果不符时，可以编辑逻辑表匹配规则，也可以通过 手工添加逻辑表 添加没有扫描到的逻辑表。单击 手工添加逻辑表，有几个逻辑表需要同步，就在此处添加几个。同一逻辑表的数据会同步到目标表...
MySQL分库分表同步至MaxCompute
手工添加逻辑表 在 自动生成逻辑表 与期望的匹配结果不符时，可以编辑逻辑表匹配规则，也可以通过 手工添加逻辑表 添加没有扫描到的逻辑表。单击 手工添加逻辑表，有几个逻辑表需要同步，就在此处添加几个。同一逻辑表的数据会同步到目标表...
常见问题
本文汇总了ClickHouse使用时的常见问题。如何创建ClickHouse用户？数据丢失，如何处理？报错提示Memory limit(for total)exceeded时，该如何处理？报错提示Memory limit(for query)exceeded时，该如何处理？报错提示Memory limit(for user)...
核心概念
本文为您介绍Dataphin中，业务板块、数据域、项目、维度、业务过程、维度逻辑表、事实逻辑表、原子指标等基本概念。数据板块 数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。当数据的业务含义存在较大差异时，您可以...
SDK参考概述
通过SDK接入方式将应用接入AHAS应用防护后，如果默认的配置无法满足您的业务需求，可以使用AHAS应用防护的SDK可以配置对代码块的流控、配置应用被流控降级...可以通过查看日志，来快速查看单机运行情况，排查问题。日志详情请参见 重要日志。
多元索引介绍
多元索引基于倒排索引和列式存储，可以解决大数据的复杂查询难题，包括非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询、统计聚合（max、min、count、sum）等功能。多元索引在车联网场景中主要...
质检
概述 智能质检系统是通过业务规则对客服的在线/热线服务进行检测，找出业务不熟练、情绪消极、辱骂客户、咨询隐私等不合格的服务记录。开通质检 在云客服开通页面，选择高级版（高级版本才会有质检模块）。新增质检专员 服务开通后，默认...
明细表
明细表一般反映指标在维度中的分布及排名顺序。本文为您介绍如何为明细表添加数据并...说明 若用户在数据集中撰写的表达式为 rate=A/B，直接勾选总计、小计自动计算逻辑为 A/B（求和），则会出现比率大于100%的异常情况，此时计算结果不正确。
DeepFM算法
简介 DeepFM将深度学习模型（DNN）和因子分解机（FM）模型结合，同时支持学习低阶显式特征组合和高阶隐式特征组合，不需要人工做特征工程，常用于推荐系统或广告系统。输入通常有以下两类特征：类别特征（Categorical Feature）：字符串...
消息堆积和延迟问题
本文主要介绍 云消息队列 RocketMQ 版 TCP协议的Java客户端使用过程中，经常会出现的消息堆积和消息延迟的问题。通过了解 云消息队列 RocketMQ 版 客户端的消费原理和消息堆积的主要原因，帮助您可以在业务部署前更好的规划资源和配置，或...
逻辑回归
功能说明 逻辑回归（LogisticRegression）是一种用于解决二分类（0 or 1）问题的模型，用于估计某种事物的可能性。尽管名字是逻辑回归，但它是一种用于分类而不是回归的线性模型。Logistic 回归在文献中也称为 logit 回归、最大熵分类...
消息过滤
可用于组合任意简单的逻辑判断，需要将每个逻辑判断内容放入括号内。a IS NOT NULL AND(a>100)OR(b IS NULL)：属性a存在且属性a的值大于100或属性b不存在。由于SQL属性过滤是生产者定义消息属性，消费者设置SQL过滤条件，因此过滤条件的...
filter表达式
\"浙江\""，表示筛选出province不为浙江的文档 查询示例 多个过滤条件组合 语法：filter:"条件 逻辑运算符 条件"条件：是一个完整的关系运算表达式，比如 price>100 逻辑运算符：AND、OR。AND表示两边条件都必须为TRUE，OR表示有一个为TRUE...
常见问题解答
智能对话分析使用常见问题解答。Q:支持什么样的语音格式？A:目前支持双轨语音文件，也支持对单轨文件做智能分轨，实现话者分离。格式要求是WAV/MP3/VOX，采样率支持8k/16k,单个文件大小限制在128M以内。Q:音频质检效率是怎样的？A:通过 ...
WAF防护
避免网站服务器被恶意入侵，保障业务的核心数据安全，解决因恶意攻击导致的服务器性能异常问题。不同套餐支持情况 功能项 基础版 标准版 高级版 企业版 自定义规则 3条 10条 50条 100条 频次控制 不支持 2条 5条 10条 托管规则 不支持 支持...
常见疑问点
已写入时序数据，使用PromQL为什么查不到数据？首先确认下述两种场景是否存在问题。场景一：PromQL语法是否正确，时序库的查询框中会自动提示语法解析情况，若存在问题请按照提示修改；场景二：参见下面的截图进入时序库的“自定义分析”...
稳态数据挑选
组合统计检验法（CST）：通过对测量数据划分区间进行检验，且依据统计原理，设定固定的置信水平进行统计检验，当检验结果在置信水平之内判断工况处于稳态，当超出置信水平则判断系统处于动态。CST法将测量数据划分为等量区间，假定操作状态...
AHPA Controller
容器服务ACK支持AHPA（Advanced Horizontal Pod Autoscaler）的弹性能力，满足在应用具备周期性的情况下，通过弹性预测进行资源预热，解决您在服务使用中遇到的弹性滞后问题。您可以通过安装AHPA Controller使用AHPA弹性预测能力。本文介绍...
数仓构建流程
业务实体：业务实体包含业务对象和业务活动：业务对象：即参与业务的主体和客体，通常情况下业务对象是实际存在、不因事件发生而存在的对象。例如客户、员工、产品等具体的业务对象；地域、组织关系和产品类目等抽象的业务对象。业务活动：...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
功能特性
概述 快速入门 逻辑数仓 逻辑数仓具有强大的数据源管理能力，可以实现将企业的异构数据源进行逻辑聚合，形成物理分散、逻辑统一的虚拟数仓，然后快速地提供数据分析和访问服务，满足业务人员、BI分析师、运营人员等各种角色的需求。逻辑数...
查看并管理明细及汇总表实例
其中 优先展示必选字段 为保障数据质量，Dataphin根据字段逻辑及上游节点的数据变化判断出的必须纳入重跑范围的字段。说明 为了保障数据一致性与正确性，已选字段所属物化节点内包含的所有字段、及连带字段归属的其他物化节点包含的字段，...
查看并管理明细及汇总表实例
其中 优先展示必选字段 为保障数据质量，Dataphin根据字段逻辑及上游节点的数据变化判断出的必须纳入重跑范围的字段。说明 为了保障数据一致性与正确性，已选字段所属物化节点内包含的所有字段、及连带字段归属的其他物化节点包含的字段，...
创建备份计划
数据库文件级备份（备份操作系统上数据库文件），通常情况下，物理备份与恢复速度快于逻辑备份及其恢复，且支持进行快速恢复。更多信息，请参见 恢复沙箱实例。逻辑备份：支持备份RDS实例、本地IDC自建数据库、ECS自建数据库等。数据库对象...
填槽节点
填槽节点是一个组合节点，如果用户第一句触发意图的句子缺失槽位，该节点将会逐个进行反问，直到收集齐为止。参数 当一个意图被开启之后，用户可能需要收集一些业务必要的参数，这个时候就可以使用词槽进行收集。例如，在“时间收集”意图...
什么是AutoML
AutoML是PAI的提供的自动寻找超参组合的机器学习增强型服务。您在训练模型时，如果超参组合复杂度过高，需大量训练资源和手工调试工作，可以使用AutoML来节省模型调参时间，提升模型调优效率和模型质量。基础概念 超参数：是训练机器学习...
文档更新动态（2022年）
更新说明 创建并配置普通维度逻辑表、创建并配置层级维度逻辑表、创建虚拟维度逻辑表、创建枚举维度逻辑表 2022年10月25日 研发菜单树和编辑器升级 编辑器体验、版本对比、调度参数等功能优化。支持在代码任务中对全局变量进行调用。对于...
商标信息填写FAQ
说明 拍摄照片时请确保委托书模板纸面工整顺平，确保上传委托书模板页面无褶皱、反光等问题，尽量使用扫描的图片。请确保照片无过多的页面之外的背景，长宽比尽量保持A4纸的比例，否则可能会导致文件显示不全而被商标局不予受理。如使用...
填槽节点
填槽节点是一个组合节点，如果用户第一句触发意图的句子缺失槽位，该节点将会逐个进行反问，直到收集齐为止。参数 当一个意图被开启之后，用户可能需要收集一些业务必要的参数，这个时候就可以使用词槽进行收集。例如，在“确认病人体温”...
数据归档至专属存储
逻辑库在进行数据归档时，会将所有逻辑库的表都合并到一个物理表内，因此在归档视图页面中，查询任意一个逻辑表就可以查询到逻辑库中所有表的数据。Q：同一个工单内进行了多次归档，即周期归档，在进行数据查询时，可以查询指定时间段的...
配置离线任务调度依赖
避免下游节点取数据时，上游表数据还未正常产出，导致下游节点取数时出现问题。操作步骤 请参见 离线任务属性入口，进入离线任务 属性 配置页面。按照下图操作指引，选择您需配置调度依赖的任务，并单击 属性 进入 属性 面板。在 属性 面板...
配置离线任务调度依赖
避免下游节点取数据时，上游表数据还未正常产出，导致下游节点取数时出现问题。操作步骤 请参见 离线任务属性入口，进入离线任务 属性 配置页面。按照下图操作指引，选择您需配置调度依赖的任务，并单击 属性 进入 属性 面板。在 属性 面板...
概念建模概述
逻辑表构建：支持基于创建好的业务实体快速创建对应类型的逻辑表，将概念模型和逻辑模型的构建关联起来。零售行业概念模型示例 主题域模型 在创建概念模型前，您需要为先创建对应主题域。以下为通过Dataphin创建的零售业 主题域模型：一般...
- 产品推荐
- 这些文档可能帮助您