Oracle数据源
NLS_CHARACTERSET 及 NLS_NCHAR_CHARACTERSET 为数据库字符集和国家字符集，表明Oracle中两大类字符型数据的存储类型。说明 前数据集成同步数据时，仅支持UTF8、AL32UTF8、AL16UTF16及ZHS16GBK编码格式。如果数据库中包含不支持的字符编码...
时序异常检测的常见问题
如果您的数据带有较强的周期性，比如每天或每周在相对固定的时刻出现峰值或者谷值，那么推荐您优先尝试分解类算法（ostl-esd和istl-esd），参数调优请参见 分解类算法参数调优。如果您的数据通常通过阈值即可判断异常，那么推荐您优先尝试...
使用Grafana进行异常检测算法调优
如果您的数据通常通过阈值即可判断异常，那么推荐您优先尝试统计类算法（esd、ttest和nsigma），参数调优请参见 统计类算法参数调优。说明 关于右侧的 Panel options、Standard options、Thresholds 等参数设置，请参见开源版Grafana文档 ...
使用Grafana进行异常检测算法调优
如果您的数据通常通过阈值即可判断异常，那么推荐您优先尝试统计类算法（esd、ttest和nsigma），参数调优请参见 统计类算法参数调优。说明 关于右侧的 Panel options、Standard options、Thresholds 等参数设置，请参见Grafana官方文档 ...
使用Grafana进行异常检测算法调优
如果您的数据通常通过阈值即可判断异常，那么推荐您优先尝试统计类算法（esd、ttest和nsigma），参数调优请参见 统计类算法参数调优。说明 关于右侧的 Panel options、Standard options、Thresholds 等参数设置，请参见Grafana官方文档 ...
管理数据分类层级
数据分类层级用于从业务或组织架构视角出发，对数据分类进行分层管理。本文为您介绍如何创建及管理数据分类层级。权限说明 安全管理员支持新建及管理数据分类层级。使用限制 数据分类层级不超过10级。新建数据分类层级 在Dataphin首页，...
管理数据分类层级
数据分类层级用于从业务或组织架构视角出发，对数据分类进行分层管理。本文为您介绍如何创建及管理数据分类层级。权限说明 安全管理员支持新建及管理数据分类层级。使用限制 数据分类层级不超过10级。新建数据分类层级 在Dataphin首页，...
查看数据分类预置模型
金融模型：包括 业务类（账号信息、金融监管和服务、交易信息、合约协议、法定数字货币钱包信息）、客户类（个人、单位）、经营管理类（综合管理、运营管理、营销服务、技术管理、风险管理信息）。通用和金融模型的页面展示一致，下面以 ...
查看数据分类预置模型
金融模型：包括 业务类（账号信息、金融监管和服务、交易信息、合约协议、法定数字货币钱包信息）、客户类（个人、单位）、经营管理类（综合管理、运营管理、营销服务、技术管理、风险管理信息）。通用和金融模型的页面展示一致，下面以 ...
模型配置
算法模型的优劣依赖于训练数据，数据质量越高，数据量越大，算法效果越好。算法模型使用的行为数据集的数据要求与一般数据集有所不同，请参见 行为数据集样例 准备数据。数据存储于ADB3.0类型的数据源中，且数据源已接入Quick Audience，请...
权限说明
数据湖构建（DLF）产品的权限体系主要分为RAM权限以及DLF数据权限控制两大类，如果您要访问DLF的页面或数据，一般都需要通过这两层权限校验，才可以正确的访问到数据资源。RAM 权限：主要控制DLF所有OpenAPI的访问权限，决定RAM用户是否...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
机器学习
聚类问题：提供K-Means算法实现聚类分析；关联分析：提供Apriori算法实现关联分析，解决如“啤酒与尿布”的关联问题；时序分析：提供ARIMA自回归移动平均模型预测时间序列数据的未来值；其他：数据降维如通过PCA主成分分析模型来提炼主因子...
数据源
实时数据源配置：您需要确认上传的行为数据中是否包含曝光/traceInfo数据，这两类数据对于智能推荐算法来说是必须的。如果您暂时没有办法提供准确的曝光/traceInfo数据，选择“否，需特殊处理”后AIRec可以自动补足曝光/traceInfo数据，以...
大数据安全治理的难点
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
应用场景
数据脱敏 支持通过灵活多样的内置或自定义脱敏算法，支持生产类敏感数据脱敏到开发测试等非生产环境使用的静态脱敏场景，同时也支持原始数据不做调整，返回数据动态脱敏的场景，并确保脱敏后的数据保真可用。数据审计 智能解析数据库及大...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
Contextual Bandit 算法
根据是否考虑上下文特征，Bandit算法分为context-free bandit和contextual bandit两大类。算法伪代码（single-play bandit algorithm）：与传统方法的区别：每个候选商品学习一个独立的模型，避免传统大一统模型的样本分布不平衡问题 传统...
集成GoLang_EncMySQL
目前支持AES（国际算法）和 SM4（国密算法）两个大类，其中具体的算法有：SM4_128_GCM（默认）SM4_128_CTR SM4_128_CBC SM4_128_ECB（不推荐）AES_128_GCM AES_128_CTR AES_128_CBC AES_128_ECB（不推荐）说明 AES_128_ECB和SM4_128_ECB...
典型使用场景
HBase具有高吞吐，低延迟，schemaFree，水平扩展等能力，被很多大数据类应用选择。而接合LindormStreams+Blink/Spark，可以构建出一套完整的实时数据系统：应用解耦-实时同步到消息队列 通常业务发生之后，应用系统产生的数据需要被其他...
数据使用诊断
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
概述
物联网边缘计算提供算法应用，供您为视频设备配置算法，处理视频数据。同时提供算法服务，支撑您管理算法任务。背景信息 当前物联网行业中，算法开发没有统一的算法定义和开发规范，自主开发的成本高，是业务中的一大痛点。物联网边缘计算...
数据智能概述
物联网数据服务提供数据智能功能，协助您更好的解读设备数据，了解设备运行状况。功能简介 算法实例 通过配置算法实例，来分析光伏电站运维数据或...后续步骤 查看算法实例运行记录，维护算法数据产出。具体操作，请参见 查看实例运行日志。
操作流程
流程图 流程说明 操作 说明 添加数据 添加矢量数据 添加矢量类数据，具体操作，请参见 添加矢量数据。添加栅格数据 添加栅格类空间数据，具体操作，请参见 添加栅格数据。添加倾斜摄影数据 添加倾斜摄影类数据。具体操作，请参见 添加倾斜...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
分解类算法参数调优
背景信息 分解类算法（ostl-esd、istl-esd和istl-nsigma）适用于周期性数据，常见于QPS类数据，如每天或每周在相对固定的时刻出现峰值或者谷值的数据。在使用分解类算法计算原始数据时，数据点会被分解为趋势项（trend），周期项（season）...
数据分析整体趋势
大数据与数据库一体化：早期大数据技术以牺牲一定程度一致性为基础提供分布式能力，解决了传统单机数据库的扩展性不足问题，在MapReduce基础上提供了标准SQL接口，架构上也逐步采用了部分MPP数据库技术；另一方面，分布式数据库也快速发展...
测试数据构建
数据管理DMS的测试数据构建功能拥有强大的算法引擎，支持批量生成各类随机值、地区名、虚拟IP地址等信息，可以大大减轻准备测试数据的负担。本文介绍构建测试数据的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、...
账单数据订阅及查询分析
DataWorks及MaxCompute：DataWorks基于MaxCompute等大数据引擎，支持您在线进行SQL分析、业务洞察、编辑和分享数据，以及将查询结果保存为可视化图表卡片，快速搭建可视化数据报告。订阅账单数据后，用户中心会将相关账单数据同步至指定...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模，但物理建模仅支持MaxCompute和Hive两种大数据引擎，不支持自定义数据源类型。
云产品集成
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
配置敏感数据分类分级
配置数据分类分级 数据保护伞为您提供了内置的分类分级模板，该模板包含4类分级和4大类分类，您可直接使用。分级：用于定义敏感数据的敏感级别，数值越大，表示数据越敏感。分类：提供了多种敏感字段类型并定义了敏感级别，后续可通过敏感...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
什么是DataTrust
并且，DataTrust是业界首个获得工信部、ISO、国家金融评测中心三大类评测的隐私计算平台。性能优越 DataTrust，生长于阿里数据中台实践，在解决大数据场景下有优越的性能，支持百亿级别的PSI、亿级别的SQL分析，千维联邦学习，隐匿信息查询...
机器学习开发示例
数据展示%pyspark#数据展示 ml_data.show()ML算法数据打印 步骤四：建立模型、运行线性回归模 说明 在本部分中，您将使用不同的正则化参数运行两个不同的线性回归模型，以基于人口（features）确定这两个模型中的任何一个对销售价格（label...
实验介绍
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
支持向量机
支持向量机（SVM）是在分类分析中分析数据的监督式学习模型与相关的学习算法，也被拓展运用于回归问题。支持向量机在高维度或无穷维度空间中，构建一个超平面或者一系列的超平面，可以用于分类、回归或者别的任务。直观地看，借助超平面去...
数据集成支持的数据源
离线集成支持的数据源 数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hive 支持 支持 Hologres 支持 支持 IMPALA 支持 支持 TDH Inceptor 支持 支持 Kudu 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 ...
- 产品推荐
- 这些文档可能帮助您