2.0数据类型版本

本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时,项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...

查看敏感数据识别结果

仅支持在 结构化数据、半结构化数据、非结构化数据 或 大数据 分类下分别选择一个或多个数据类型,不支持跨分类同时选择多个数据类型。如果您未选中任意数据类型,数据安全中心默认展示所有数据类型下的敏感数据识别结果。数据模板:在 ...

常见问题

数据同步过程中,可以修改源表中的字段类型,目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改,并且只能将取值范围小的数据类型更改为取值范围数据类型,或者将单精度数据类型更改为双精度数据类型。整型数据类型:支持...

SQL其他常见问题

本文为您介绍在MaxCompute中执行SQL时,与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒?在执行MaxCompute SQL过程中,对DOUBLE类型数据进行等值比较,为什么结果不符合...

阶段一:基础防护建设

例如:《金融数据安全分级指南 JR/T 0197-2020》《网络安全标准实践指南——网络数据分类分级指引》《信息安全技术个人信息安全规范 GB/T 35273—2020》《信息技术数据数据分类指南 GB/T 38667-2020》《基础电信企业数据分类分级方法 YD/...

导入与导出

数据同步过程中,可以修改源表中的字段类型,目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改,并且只能将取值范围小的数据类型更改为取值范围数据类型,或者将单精度数据类型更改为双精度数据类型。整型数据类型:支持...

通配符列

背景信息 在大数据量的场景下,传统SQL通常无法满足业务需求。例如车联网场景,数据通常有几百甚至上千个列,且这些列多数情况下并不是固定的。如果此时想要写入新的列,则需要执行ALTER TABLE语句,这样的操作非常影响写入效率。Lindorm...

产品简介

服务内容 服务类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务,覆盖离线/实时数仓体系建设管理、数仓建模管理,数据开发管理,数据安全管理、数据质量管理、...

支持的数据库类型

数据安全中心DSC(Data Security Center)为您提供敏感数据识别、数据安全审计、数据脱敏、数据风险检测等安全能力。本文介绍 DSC 支持的数据类型。说明 下表用到的标识说明:表示当前数据类型支持该功能。表示当前数据类型不支持该...

数据保护伞入门

步骤二:配置敏感数据识别规则 根据数据的来源、用途,定义数据分类并配置敏感字段类型,识别当前工作空间中的敏感数据。DataWorks提供了内置数据分类及识别规则,您也可根据需要自定义数据分类及敏感数据识别规则。步骤三:配置数据脱敏...

存储加密

包括 2.0数据类型(推荐)、1.0数据类型(面向已有使用1.0数据类型用户)和Hive兼容类型(面向Hive迁移用户),详情请参见:数据类型版本说明。是否加密 指定创建的项目空间是否需要开启数据存储加密功能。项目名称 长度为3~27个字符,以...

什么是DataWorks

中国国际数据产业博览会十佳数据案例 中国信通院:数据集成工具、数据管理工具、数据开发平台、数据脱敏工具、数据分类分级等评测 学习路径 您可以通过DataWorks文档首页的 学习路径,快速了解DataWorks的相关概念、基础操作及进阶操作...

MySQL数据库账号权限管理

功能介绍 您可以在RDS MySQL、PolarDB MySQL版 控制台上对数据大分类组合权限(例如只读、读写、仅DML、仅DDL)进行便捷地管理与维护,但对于自定义各种权限类型组合或授予某些表级别权限等场景,您可以通过DMS推出的数据库账号权限管理...

应用场景

实时数据通道 1.1 接入多种异构数据并投递到下游多种大数据系统 通过数据总线,您可以实时接入APP、WEB、IoT和数据库等产生的异构数据,统一管理,并投递到下游的分析、归档等系统,构建清晰的数据流,让您更好的释放数据的价值。...

常见问题

数据作为客户重要的信息资产,需要得到有效保护,确保有一个明确定义的、技术可实现的数据分类与保护策略,解决业务逻辑在分类和保护级别上不一致的问题。作为数据保护的基础,数据安全保护应先聚焦于自动化的数据分类数据分类使用预先...

快速体验

DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力,本文以一个零售电商行业的数仓搭建实验为例,为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现,帮助您深入了解阿里云...

时空数据库版本发布记录

新增cast函数支持将sfmesh类型转换为scene数据类型,转换后生成一个基于glb类型的scene数据类型。Importer SQL 新增 ST_As3dTiles 函数,支持将sfmesh转换为3dtiles瓦片进行预览。新增 ST_ImportObj 函数,支持导入obj数据格式转换为sfmesh...

常见问题

对于内部表,所有的数据都存储在MaxCompute中,表中列的数据类型可以是MaxCompute支持的任意一种数据类型。对于外部表,MaxCompute并不真正持有数据,表格的数据可以存放在OSS或OTS中。MaxCompute仅会记录表格的Meta信息,您可以通过...

时空数据库版本发布记录

新增cast函数支持将sfmesh类型转换为scene数据类型,转换后生成一个基于glb类型的scene数据类型。Importer SQL 新增 ST_As3dTiles 函数,支持将sfmesh转换为3dtiles瓦片进行预览。新增 ST_ImportObj 函数,支持导入obj数据格式转换为sfmesh...

2020年

数据类型版本说明 1.0数据类型版本 2.0数据类型版本 Hive兼容数据类型版本 组件与数据类型的兼容 2020-03-25 新增概览页面和查看历史作业快照功能。新功能 新增概览页面和查看历史作业快照功能。MaxCompute管家 2020-03-20 新增支持...

大数据AI公共数据集分析

本教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,快速熟悉DataWorks的操作界面与最基础的数据分析能力。DataWorks的更...

ECS实例说明

大数据型 使用本地SATA盘作存储数据,存储性价比高,是大数据量(TB级别的数据量)场景下的推荐机型。说明 Hadoop、Data Science、Dataflow和Druid类型的集群支持Core节点;Zookeeper和Kafka类型的集群不支持Core节点。本地SSD型 使用本地...

互联网、电商行业离线大数据分析

概述 电商网站的销售数据通过大数据进行分析后,可以在屏幕展示销售指标、客户指标、销售排名和订单地区分布等业务指标数据。DataV大屏支持可视化动态展示销售数据,触控大屏支持您自助查询数据,极地提高数据的可读性。应用场景 电商...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

新建离线物理表

数据分类 选择字段的数据分类。如需创建分类,请参见 新建数据分类。数据分级 选择数据分类后,系统将自动识别数据级别。删除 您可以在操作列下对字段进行 删除 操作。说明 字段删除后不可撤销。步骤三:提交离线物理表 在离线物理表开发...

新建离线物理表

数据分类 选择字段的数据分类。如需创建分类,请参见 新建数据分类。数据分级 选择数据分类后,系统将自动识别数据级别。删除 您可以在操作列下对字段进行 删除 操作。说明 字段删除后不可撤销。步骤三:提交离线物理表 在离线物理表开发...

DMS支持的数据库

本文介绍数据管理DMS支持录入的云数据库、他云/自建的数据类型。支持的云数据库 关系型数据库 RDS MySQL RDS SQL Server RDS PostgreSQL RDS MariaDB PolarDB MySQL版 PolarDB PostgreSQL版 PolarDB PostgreSQL版(兼容Oracle)PolarDB...

分区

概述 分区可以理解为分类,通过分类把不同类型数据放到不同的目录下。分类的标准就是分区字段,可以是一个,也可以是多个。MaxCompute将分区列的每个值作为一个分区(目录),您可以指定多级分区,即将表的多个字段作为表的分区,分区...

创建数据

数据集是基于特定数据库和特定SQL查询所产生的,以二维表表现的数据集合。本文介绍创建数据集的方法。创建数据集 登录 数据管理DMS 5.0。在顶部菜单栏中,选择 传输与加工>数据可视化。说明 更多访问方式,请参见 访问数据可视化功能。在 ...

时空索引介绍

数据类型为TIMESTAMP的时间在 1970-1-1 00:00:00 GMT 后,数据类型为TIME的时间在 00:00:00 后,数据类型为LONG的时间不能为负数。如果写入索引表的数据中包含超出以上范围的数据,可能会导致查询效率降低或查询结果与预期不符。因此,建议...

快速入门

作为学院派关系型数据库管理系统的鼻祖,它的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持,包括JSON数据、IP数据和几何数据等,而部分商业数据库都不支持这些数据类型。除了完美支持事务、子查询、多版本控制(MVCC)...

管理分类分级模板

在 新增自定义识别规则 面板,配置 规则名、数据分类、安全级别、识别模型(可多选)、识别范围 等信息。说明 当内置与自定义识别模型同时被添加在分类分级模板中,不会出现内置覆盖自定义模型或自定义覆盖内置模型。识别模型的详细信息,...

限制说明

项目 限制说明 数据类型数据库 Memcache 版仅支持 Key-Value 格式的数据,不支持 array、map、list 等复杂类型数据数据可靠性 云数据库 Memcache 版的数据存储在内存中,服务并不保证缓存数据不会丢失,有强一致性要求的数据不适合...

DataHub数据

支持的字段类型 DataHub同步数据时,会根据DataHub Field的数据类型同步到对应的数据类型中,DataHub仅支持 BIGINT、STRING、BOOLEAN、DOUBLE、TIMESTAMP、DECIMAL 数据类型数据同步任务开发 DataHub数据同步任务的配置入口和通用配置...

离线集成支持的数据

离线集成支持的数据数据源 读取 写入 大数据存储型数据源 MaxCompute 支持 支持 Hologres 支持 支持 Impala 支持 支持 StarRocks 支持 支持 Hudi 支持 支持 Doris 支持 支持 GreenPlum 支持 支持 文件数据源 FTP 支持 支持 OSS 支持 ...

东软案例

在互联网服务场景下,运维监控数据量激增,采集监控的数据类型更加多样(时序指标、日志、代码链路等),现有运维系统采用的单模引擎(如RRD数据库、openTSDB时序数据库、ElasticSearch检索类数据库)应对这些实时、高并发采集,且价值密度...

新建自定义数据

完成自定义数据类型后,您可将该类型数据源接入到Dataphin中,为后续进行集成开发做准备。前提条件 已有自定义数据类型。具体操作,请参见:新建离线自定义源类型。新建实时自定义源类型。操作步骤 请参见 数据源管理入口,进入 数据...

ClickHouse数据

支持的字段类型 支持阿里云ClickHouse以下常见的数据类型,阿里云ClickHouse的数据类型全集请参见 数据类型,开源ClickHouse官方数据类型集合中的其他类型暂不支持,开源ClickHouse数据类型全集请参见 ClickHouse Doc。数据类型 ClickHouse...

数据标准

数据是由特定的环境产生的,这些环境因素包括生产者、时间、系统等,从而造成了同一个语义的数据,有...说明 目前使用DDM进行数据建模可以进行逻辑建模和物理建模,但物理建模仅支持MaxCompute和Hive两种大数据引擎,不支持自定义数据类型

构建数据仓库

DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力,本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业:全行业...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云原生大数据计算服务 MaxCompute 数据库备份 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用