模型调优
模型调优 模型调优是通过Fine-tuning训练模式提高模型效果的功能模块，作为重要的大模型效果优化方式，用户可以通过构建符合业务场景任务的训练集，调整参数训练模型，训练模型学习业务数据和业务逻辑，最终提高在业务场景中的模型效果。...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
数据同步链路规格说明
名词解释 规格：数据传输服务为用户提供了不同性能的链路规格，以同步的记录数为衡量标准。RPS：表示每秒增量同步至目标表的数据行数，如每秒增量同步源库5000行数据至目标表，则RPS为5000。数据同步规格说明 数据同步根据同步链路的同步...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
查询治理
名词解释 名词 解释 推荐优化SQL 从总体的慢SQL中，排除 无需优化SQL，剩下的就是 推荐优化SQL。无需优化SQL 包含DAS自动标记为 DAS忽略 的SQL，以及用户人工标记为 无需优化 的SQL。DAS忽略 DAS自动打标 无需优化，例如以 show，create，...
索引、属性、字段作用详解
与开源ES的名词解释对比 由于 开放搜索 是阿里巴巴自主研发的大规模分布式搜索引擎平台，虽然有些名词与开源的Es叫法相同，但其作用却差距较大，这里做出如下对比：Es：名词 Es解释 与关系型数据库对比 索引 索引（index）是Elasticsearch...
索引、属性、字段作用详解
与开源ES的名词解释对比 由于 开放搜索 是阿里巴巴自主研发的大规模分布式搜索引擎平台，虽然有些名词与开源的Es叫法相同，但其作用却差距较大，这里做出如下对比：Es：名词 Es解释 与关系型数据库对比 索引 索引（index）是Elasticsearch...
数据传输规格说明
名词解释 规格：OceanBase 数据传输服务为用户提供了不同性能的规格，以同步的记录数为衡量标准。RPS：表示每秒增量同步至目标表的数据行数。例如，每秒增量同步源端数据库 5000 行数据至目标表，则 RPS 为 5000。表对象：表示数据迁移或...
数据迁移链路规格说明
名词解释 名词 说明 规格 数据传输为用户提供的不同性能的链路规格，以增量迁移性能为衡量标准。表数量 该测试模型下表的总数。记录大小 增量数据迁移时每条记录的大小。RPS 表示每秒增量迁移至目标表的数据行数，如每秒增量迁移源库5000行...
附件四：常见漏洞危害及定义（先知计划）
Web服务端漏洞 SQL注入攻击 名词解释：SQL注入攻击（SQL Injection），简称注入攻击、SQL注入，被广泛用于非法获取网站控制权，是发生在应用程序的数据库层上的安全漏洞。由于在设计程序时，忽略了对输入字符串中夹带的SQL指令的检查，被...
离线同步数据质量排查
如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），数据库则使用来源数据update更新目标表已有数据行，在目标表存在多个数据约束的情况下，数据替换可能会失败并产生脏数据 如果写出数据和目标存储已有...
名词解释
本文将向您介绍城市视觉智能引擎产品中涉及的几个名词解释，以便于您更好地理解城市视觉智能引擎产品。实例（Instance）实例整合了数据接入、视频分析、图像搜索三大功能组件。实例的计算分析性能和适用业务场景由实例规格决定，具体指可...
名词解释
本文为您介绍智能视觉常见名词解释。地域（Region）地域，为阿里云的服务节点。用户通过选择不同阿里云Region的服务，可就近使用阿里云的服务，获得更低的访问延时及更好的用户体验。对象存储（OSS）阿里云对象存储服务(OSS)。智能视觉服务...
Serverless链路规格说明
名词解释 名词 说明 DU（DTS Unit）Serverless实例规格的计量单位，表示Serverless实例的资源（包括CPU、内存、磁盘等）。RPS（Rows Per Second）表示每秒增量同步至目标表的数据行数。例如，每秒增量同步源库5000行数据至目标表，则RPS为...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
名词解释
下表列出了 AnalyticDB PostgreSQL 所涉及到的基本概念：名词 解释 MPP Massively Parallel Processing，一种分布式 Shared Nothing 计算架构，支持多个无共享的节点，执行全并行计算，计算性能随节点增加而线性提升。AnalyticDB for ...
常见问题
1.售前咨询渠道 尊敬的“准”大数据专家服务用户您好：如果您准备购买阿里云大数据专家服务，但是遇到如服务范围、规格、服务选择等售前方面的问题，您可以通过钉钉与我们联系，您将“当面”获得阿里云大数据专家咨询专家的建议。...
发现并处理大Key和热Key
大Key和热Key的定义 名词 解释 大Key 通常以Key的大小和Key中成员的数量来综合判定，例如：Key本身的数据量过大：一个String类型的Key，它的值为5 MB。Key中的成员数过多：一个ZSET类型的Key，它的成员数量为10,000个。Key中成员的数据量过...
数据库管理
每个Database都有若干时序数据表，结合 名词解释 的描述，我们可以对时序引擎的数据层级归纳为下图所示：如果一个Lindorm时序引擎实例计划包含不相关的项目数据，在很大程度上，彼此之间是隔离的。那么在这种情况下，建议将它们放到单独的...
应用场景
实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。...
资产全景及目录概述
名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。主题域：为您展示数据架构部分已经创建好的主题域，便于您根据主题域更快捷的进行资产...
资产全景及目录概述
名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。主题域：为您展示数据架构部分已经创建好的主题域，便于您根据主题域更快捷的进行资产...
什么是备份数据量
名词解释 备份数据量，是指通过DBS备份链路的数据量。常见概念 在数据库备份DBS业务场景下，含有常见以下几个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量等。概念 说明 数据库磁盘空间 数据库磁盘空间由数据库的数据文件...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
名词解释
DMS数据可视化产品名词解释。名词 说明 维度 维度是度量的环境，用来反映业务的一类属性，如时间、地域、性别、类别等等，是一组离散的值。度量 即被聚合（观察）的统计值。是聚合运算的结果，如UV（用户数）、交易金额等经过统计的数值。...
互联网、电商行业离线大数据分析
概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据，触控大屏支持您自助查询数据，极大地提高数据的可读性。应用场景 电商...
发展历程
关键性里程碑 2009年9月，ODPS（即现在的MaxCompute）大数据平台飞天项目正式启动。2010年10月，阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月，平台的单集群规模已达到5000台。2014年7月，平台开始对外提供服务，完全替换...
应用场景
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
IoT数据自动化同步至云端解决方案
大数据分析是大数据完成数据价值化的重要手段之一，而进行大数据分析的第一步是让数据成功上云。解决方案 IoT数据自动化同步至云端解决方案主要包括存储原始数据和同步数据至分析系统两部分。IoT设备大量的数据通常以半结构化的形式存储。...
技术架构选型
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
产品简介
开源大数据开发平台E-MapReduce（简称EMR）是运行在阿里云平台上的一种大数据处理系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理数据。EMR还可以与阿里云...
产品概述
什么是E-MapReduce 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache Hadoop和Apache Spark，让您可以方便地使用Hadoop和Spark生态系统中的其他周边系统分析和处理...
DataWorks on EMR数据安全方案
在大数据领域，阿里云为企业用户提供了一整套数据安全方案，包含用户认证、数据权限、大数据作业管理体系等。本文以联合使用DataWorks与EMR为例，为您介绍DataWorks on EMR场景下的数据安全方案。背景信息 DataWorks on EMR目前支持LDAP...
大数据安全治理的难点
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
基于MaxCompute进行大数据BI分析
本实践以电商行业为例，通过MaxCompute、DataWorks对业务数据和日志数据进行ETL处理，并同步至分析型数据库MySQL（AnalyticDB MySQL）进行实时分析，再通过Quick BI进行可视化展示。背景信息 MaxCompute：用于进行大规模数据计算，详情请...
自媒体：易撰
所属行业：自媒体 网站地址：易撰 客户介绍 长沙营智信息技术有限公司是专业的新媒体大数据服务商，其旗下知名品牌易撰，基于新媒体大数据挖掘技术及NLP算法分析，为各内容创客、广告主提供全面、科学、精准的大数据分析服务以及大数据架构...
- 产品推荐
- 这些文档可能帮助您