应用场景
企业通过云端汇总、打通生产关键环节数据，以测试/检测数据为主体，使用算法模型进行制程能力的综合分析、评估、优化。最终，检测指标项从平均300个点位降到200个，产品整体调试效率优化35%。能耗优化 您可以使用工业大脑平台，对产业能耗...
采集MySQL Binlog（计划弃用）
重要 日志服务后续计划不再支持MySQL Binlog采集插件，当前已不支持新用户新建采集配置，原有的采集配置仍能正常使用，建议您使用DataWorks或Flink进行采集。具体操作，请参见 MySQL、MySQL数据源。原理 Logtail内部实现了MySQL Slave节点...
导入云监控数据
采集周期 导入任务每分钟为导入的每个指标拉取一次新数据。如果数据量较大，1分钟无法完成导入，采集延迟将会超过1分钟。单个指标单次采集的数据点总大小 目前支持单个指标单次采集的数据点总大小最大为3 MB。超过该值，本次监控的所有数据...
对比漏斗图
跳转 当需要分析的数据存在于多个仪表板时，您可以通过仪表板跳转，把多个仪表板关联起来，进行数据分析。跳转包含 参数跳转 和 外部链接 两种方式，具体设置方法请参见 跳转。使用限制 对比漏斗图由 漏斗宽度/度量 和 对比指标/维度 组成...
采集SQL Server查询结果
当下次执行SELECT语句时，会将上一次保存的CheckPoint带入到SELECT语句中，以此实现增量数据采集。重要 开启CheckPoint时，需要在SELECT语句中对CheckPoint字段进行排序，否则会造成数据重复或其他问题。功能 支持采集SQL Server数据库的...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
采集PostgreSQL查询结果
当下次执行SELECT语句时，会将上一次保存的CheckPoint带入到SELECT语句中，以此实现增量数据采集。重要 开启CheckPoint时，需要在SELECT语句中对CheckPoint字段进行排序，否则会造成数据重复或其他问题。功能 支持采集PostgreSQL数据库的...
什么是全球多活数据库集群
产品简介 全球多活数据库集群，通过RDS+DTS构建1中心节点和多个单元节点的星型双向同步架构，用户可以在全球多个地域进行数据读写操作，每个数据库节点的数据通过DTS实时保持同步，构建全球多活数据库集群，实现数据库容灾保护的同时，为...
数据质量教程概述
在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工环节（数据仓库CDM及ADS层）中表行数是否大于0、表行数波动是否正常以及字段是否出现空值或重复的情况。准确性 准确性是指数据记录中信息和数据是否...
iOS SDK概述
日志服务iOS SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务iOS SDK方便地采集iOS日志。...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
数据质量教程概述
在本教程中，您需要重点关注数据的生产环节（MaxCompute外部表引用的表格存储数据）和加工环节（数据仓库CDM及ADS层）中表行数是否大于0、表行数波动是否正常以及字段是否出现空值或重复的情况。准确性 准确性是指数据记录中信息和数据是否...
日志服务
loki:#副本数在对接时minio后可配置为多个，提升采集性能 replicas:3#依旧依赖PV存储，写入WAL、cache等数据，但容量要求不高，1Gi即可 persistence:enabled:true size:1Gi#配置minio为s3存储，config下的其他配置如limits_config、ruler等...
Android SDK概述
日志服务Android SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务Android SDK方便地采集...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
MaxCompute在电商场景中如何进行漏斗模型分析
日志服务采集日志数据，详情请参见 数据采集概述。本文以测试数据为例演示，如需下载测试数据，请您单击 TestData 下载。使用MaxCompute构建离线计算数据模型。按照如下建表语句，在DataWorks数据开发界面创建数据引入层（ODS）表ods_user_...
Logtail配置
通过在创建Logtail配置时设置数据源、采集模式等参数，实现定制化的采集策略。本文介绍API模式下Logtail配置相关的参数说明。Logtail配置基础参数说明 参数名称 数据类型 是否必填 示例值 描述 configName string 是 config-sample Logtail...
使用限制
database数量 一个实例最多创建16个数据库（包含default数据库）。table名称 由大写字母、小写字母、数字、下划线其中的一种或多种组成，最大长度为128个字符。table数量 一个数据库最多创建10000个数据表。tag列名称 可见字符，最大长度为...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
Web可视化开发
组件 区别描述 实时曲线 仅支持展示单个或多个设备属性近半小时、近一小时或近三小时的数据变化趋势。按设备上报属性的周期采集数据。例如，设备每100ms上报一次数据，则每100ms采集一次数据。实时曲线（旧）支持展示单个或多个设备属性的...
数据地图
其他操作 数据总览 您可以在数据总览页面查看当前地域（Region）下配置了数据采集器的Hologres数据库统计信息和表信息，进入数据总览详细步骤请参见 数据总览。查找表 数据地图支持通过表名，表描述、字段名及字段描述等搜索表，同时还可以...
通过样本库识别
如果您需要使用样本库方式识别多个类型的数据，则需要配置多个样本库。例如，您需要识别员工姓名、家庭住址，则需要配置姓名样本库及家庭住址样本库。创建样本库 进入 数据保护伞。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>...
采集公网数据
0.12×100×30=360元 共计：4860元/月 对比结果 从以上两个场景可以看出，使用方案2进行公网数据采集，比方案1的成本低很多。除此之外，和方案1相比方案2还具有以下优势。弹性伸缩：MB-PB/Day间流量随意控制。丰富的权限控制：通过ACL控制...
应用场景
物联网存储IoTstore作为物联网的统一数据存储平台...数据检索：根据多个设备指标来查找设备，需要支持根据一个或多个字段值组合条件来检索设备元数据。异常实时监测：设备状态更新后，对异常状态实时监测，需要支持对更新后数据进行实时计算。
日志功能配置及查询
在日志采集界面点击“加载字段”使用此正则表达式对日志进行解析，下方出现的列表中可以看到多个键值对，在这里可以对各字段进行名称标注，按需进行“打标”标记（用于查询过滤或监控指标）。什么字段适合打标？一种是枚举字段，如logLevel...
渠道管理
在Quick Tracking渠道链接管理中创建链接并进行投放 在Quick Tracking各个分析模型中进行分析「渠道管理」功能路径为：「数据采集」-「埋点管理」，在投放前，需要再「渠道管理」功能中对渠道属性、推广对象和推广进行管理，各环节详细操作...
采集主机文本日志
第一个处理插件之后仅允许存在1个时间解析处理插件，1个过滤插件和多个脱敏插件。2.0版本的Logtail：原生处理插件可任意组合。原生处理插件和扩展处理插件可同时使用，但扩展处理插件只能出现在所有的原生处理插件之后。创建索引 和 预览...
生命周期
该属性作用于所有事件，由用户上报或者系统采集，例如支付事件的支付金额 用户在采集管理平台的事件属性中做录入的属性-根据属性的不同类型支持不同的筛选符号 属性类型 筛选符号 符号定义 举例 字符串 等于 表示等于一个或多个具体的值 ...
应用场景
物联网边缘计算平台的典型应用场景有：未来酒店、...特点：数据实时采集：多机组多数据点同时采集。大数据处理：数据上传至阿里云后，使用大数据训练模型。即时反馈：算法或规则导入本地边缘节点后，实时自动调整机组参数，实现最优化生产。
漏斗图
通过漏斗各环节业务数据的比较能够直观地发现和说明问题所在的环节，进而做出决策。漏斗图用梯形面积表示某个环节业务量与上一个环节之间的差异。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在搜索配置面板中输入您需要...
埋点开发
从需求阶段、开发阶段、测试阶段到发布阶段每个环节需要对应不同角色进行管理，涉及产品、研发、测试三种角色，建立开发计划、埋点需求发布、埋点开发、埋点测试、计划发布&归档五个流程。支持对发布后的埋点进行归档，使开发过程透明，...
大数据安全治理的难点
最常见的莫过于多个用户使用同一个身份从某个入口访问/操作数据的场景，此类场景就是典型的 传递信任 风险。此外，由于各上层系统审计能力参差不齐，也可能出现 审计事件缺失、审计报文缺失、无法审计到人 的违规问题。流转 大数据系统通常...
分析视图
功能概述 在数据分析中，可将不同组织下的多个应用或多个事件合并为一个新的分析视图，在该视图下可进行多种模型分析和看板搭建。使用场景 在分析视图里面，有小站和多应用两种视图类型，下面分别做说明：小站视图：在实际业务运营中，会...
多表合并
对齐字段 指定全部来源节点的1个或者多个字段作为数据合并的对齐字段。数据合并的结果中将包含全部来源节点中的指定对齐字段的所有记录。示例如下所示，假设三个输入节点分别为A、B、C，设置两个对齐条件为"A.ID<=>B.ID<=>C.ID"、"A.NAME...
执行离线评估
采集文件：您可以下载迁移评估采集器进行数据采集，采集完成后的文件将上传至云上进行评估。详情请参见 通过迁移评估采集器采集数据库对象。上传文件 单击 上传文件，选择需要评估的文件进行上传。支持上传多个文件，生成一个评估报告。...
通过DaemonSet方式采集Kubernetes容器文本日志
多个黑名单之间为或关系，即只要容器的环境变量满足任一键值对即可被排除。K8s Pod标签白名单 通过Kubernetes Pod标签白名单指定待采集的容器。如果设置了 标签名 但不设置 标签值，则Pod标签中包含该标签名的容器都匹配。如果设置了 标签 ...
联合查询多个MySQL实例
本文档将以两个云数据库RDS MySQL 版（简称MySQL）为例，介绍如何通过DLA联合查询多个MySQL实例数据。背景信息 Data Lake Analytics（简称DLA）作为云上数据处理的枢纽，支持通过标准JDBC对单个实例 RDS、Table Store、OSS、MongoDB 中的...
常见问题
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
事件分析
属性类型 筛选符号 符号定义 举例 字符串 等于 表示等于一个或多个具体的值 设备品牌等于华为或苹果 不等于 标识排除一个或多个具体的值 设备品牌排除华为或苹果 包含 查找属性值中包含某些字符的值 设备品牌中包含华为这个字符 不包含 ...
开启数据采集功能
CloudLens for EBS 支持手动或自动化开启数据采集功能。手动开启采集功能针对单个或当前所有的云盘，自动化开启采集功能支持设置采集条件，并自动采集符合条件的云盘（包括未来创建的）的秒级监控数据。本文介绍开启数据采集功能的操作步骤...
开发限制
数据库中最多支持增加的计算节点个数 一次性默认最多支持增加99个节点，如需添加更多，请联系阿里云技术支持。数据库中最多支持增加的存储节点个数 SQL语法使用限制 SQL语法 操作 使用约束 自定义操作 自定义函数 支持。自定义类型 暂不...
- 产品推荐
- 这些文档可能帮助您