创建同步MaxCompute

3.确认TimestampUnit单位 1)Connector中TimestampUnit的作用,就是将数据中TIMESTAMP类型的数据(如果有),以TimestampUnit为单位进行转换后写入到下游系统的日期类型(如datetime类型)。2)如果TIMESTAMP列写入的是以秒为单位的值,那...

MaxCompute数据迁移至OSS

本文为您介绍如何使用...fileFormat":"csv","nullFormat":"null","object":"qweee.csv","writeMode":"truncate"},"stepType":"oss"}],"type":"job","version":"2.0"} 在OSS控制台中查看新增的表数据。详情请参见 控制台下载文件。

MaxCompute数据迁移至OTS

order":{"hops":[{"from":"Reader","to":"Writer"}]},"setting":{"errorLimit":{"record":"0"},"speed":{"throttle":false,"concurrent":1,"dmu":1 } } } 在表格存储控制台中查看新增的表数据。登录 表格存储控制台。在左侧导航栏上,单击...

数据归档常见问题

为什么PolarDB控制导航栏没有冷数据归档这个菜单?申请开启冷数据归档功能成功后,会有一定的延迟,等待几分钟刷新页面后即可出现冷数据归档菜单。冷数据文件的格式是什么?目前支持CSV、IBD 和ORC格式。如何判断当前表或分区是否归档...

【通知】云数据库Redis 4.0版全球多活服务即将下线

下线时间 2022年10月31日 影响与建议 影响 从2022年10月31日起,云数据库Redis版 4.0版全球多活服务(旧版全球多活)将停止更新维护,同时在控制下线旧版全球多活功能。子实例不受影响,您可在 实例列表 查看对应的子实例。建议 建议您...

通过DataV展示数据

在 设置数据源 面板,选择 数据源类型 为 数据库,已有数据源 为第一步创建的数据源。在 SQL 脚本编辑区域,输入以下SQL语句。SELECT count(*)/100 as value FROM target_table where dts_operation_flag='I' 单击 数据响应结果 右侧的...

发展历程

2020年 Gartner全球数据库魔力象限,阿里云位于领导者象限,MaxCompute和E-MapReduce提供了安全、稳定、高性能的计算平台。IDC Marketscape中国大数据管理平台,MaxCompute位居领导者象限。Forrester:每两年一次的全球云数仓评测,进入...

新零售:特步

业务架构 客户价值 基于 PolarDB-X+RDS的分布式数据库解决方案+业务中台提升客户数据链路的时效性以及客户业务系统的吞吐能力,使订单、库存、商品、销售的数据能实时从业务端到业务中台再到报表系统做销售业务决策。基于 PolarDB-X+RDS的...

监控与日志

您可通过将全球加速资源的配置变更历史和不合规事件数据投递到日志服务SLS的指定日志库,实现通过日志服务SLS统一查询和分析日志数据。更多信息,请参见 设置投递数据到日志服务SLS。云资源操作审计 全球加速已接入阿里云操作审计...

2022年

什么是全球多活数据库集群 新增 PolarDB O引擎集群间的单向同步的场景,新增支持增量同步DDL操作:CREATE TABLE、DROP TABLE ALTER TABLE(包括RENAME TABLE、ADD COLUMN、ADD COLUMN DEFAULT、ALTER COLUMN TYPE、DROP COLUMN、ADD ...

识别任务说明

建议您将扫描周期设置为与数据库内容更新的频率大致一致,以便及时发现数据库中的变化的数据中存在的敏感信息。可设置的最小的扫描周期为每天。登录 数据安全中心控制。在左侧导航栏,选择 数据洞察>任务管理。在 任务管理 页面 识别任务...

数据服务

数据服务的API分组的作用是什么,与API网关的分组有什么关联?如何合理设置API分组?最多可以创建多少个API分组?什么情况下要开启API返回结果分页功能?生成API是否支持POST请求?生成API是否支持HTTPS协议?为什么数据服务无法连接...

恢复数据

前提条件 实例已产生备份集,您可以在GDB控制台中,获取当前实例的数据备份信息。更多信息,请参见 查看备份文件列表。注意事项 数据恢复仅支持将备份数据恢复至另一个新建GDB实例中,不支持将备份数据恢复至当前实例。操作步骤 登录 图...

DataWorks数据服务对接DataV最佳实践

在大屏中调用数据服务API 进入DataV控制台中的 我的可视化 页面,单击 新建可视化。选择一个模板,单击 创建,本文以 智能工厂 模板为例。模板中的组件自带了静态数据,下文将以把模板中间的基本折线图改为调用上文创建好的查询成交金额...

添加区块链服务数据

本文档为您介绍在DataV添加区块链服务数据源的方法,以及相关参数配置说明。使用阿里云区块链服务(Blockchain as a Service,简称BaaS),您可以通过REST API调用智能合约,查询链上信息,也可以查询区块及交易信息。前提条件 已准备好...

添加日志服务SLS数据

本文档介绍在DataV添加日志服务SLS数据源的方法,以及相关参数配置说明。日志服务(Log Service,简称SLS)是针对实时数据的一站式服务。前提条件 已准备好待添加的日志服务SLS数据源。添加日志服务SLS数据源操作步骤 登录 DataV控制。...

全球数据库最佳实践

添加从集群 在目标GDN添加从集群,组成一个完整的全球数据网络。详细操作步骤,请参见 添加从集群。说明 创建从集群时,节点规格建议与主集群的节点规格一致以保证低延迟同步效果,只读节点的个数无需与主集群保持一致,您可以根据本地从...

企业版和标准版功能对比

支持 不支持 全球数据全球数据库网络(Global Database Network,简称GDN)是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络所有集群的数据保持同步,网络每个集群均提供读服务(写服务会被转发到主集群处理...

PolarDB-X 2.0迁移至Elasticsearch

如果源或目标数据库是ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则,您还需确保自建数据库没有限制ECS的访问(若数据库是集群部署在多个ECS实例,您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...

功能变更记录

创建和管理标准型全球加速实例 全球加速 实例(包括标准型和基础型)更新 包年包月的 全球加速 实例支持通过 全球加速 控制或 用户中心 自助申请退订。退款说明 2023年01月 功能名称 变更类型 功能描述 相关文档 免配置七天免费加速体验...

使用DMS数据追踪进行恢复

DMS的数据追踪功能可以快速按需找到目标时间段内的相关更新,并生成逆向回滚语句,追踪完的数据可批量生成回滚脚本,通过数据变更工单最终执行到数据完成数据的修复。当误操作受影响的数据量在10万以内时,您可使用该方法进行数据恢复...

添加和管理加速区域

添加加速区域 登录 全球加速管理控制。在 实例列表 页面,找到目标全球加速实例,单击实例ID。在实例详情页,单击 加速区域 页签,然后再单击 添加加速区域。在 添加加速区域 对话框,根据以下信息配置加速区域,然后单击 确定。配置 ...

创建和管理基础型全球加速实例

基础型 全球加速 实例依托阿里云优质的全球互联网带宽与高品质传输网络,为用户提供点到点的加速体验。基础型 全球加速 实例主要用于三层(IP协议)网络加速。本文为您介绍如何创建和管理基础型 全球加速 实例。创建基础型 全球加速 实例 ...

基本介绍

2016.11 内部机器规模达到1万台,作为中台服务高德、优酷、文娱等全经济体。2017.8 HBase社区版在阿里云商业化,正式服务云上企业级客户。2018.7 云原生多模数据库Lindorm-2.0发布,内部引擎大幅升级优化,实现性能7倍于开源HBase。2019.8 ...

添加ClickHouse数据

本文档介绍在DataV添加ClickHouse数据源的方法,以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。通过内网添加数据源操作步骤 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表...

安装Agent

Agent程序是数据库审计系统提供的功能插件,您需要在用户终端、目标数据库服务器或连接数据库的应用服务器上安装Agent,用于将数据库访问流量转发到审计系统。本文介绍安装及卸载Agent的具体操作。安装位置 根据待审计的数据库类型,您需要...

创建安全规则

安全规则针对不同功能模块提供了不同的检测点,具体信息请参见:SQL窗口-关系型数据库 SQL窗口-MongoDB数据库 SQL窗口-Redis数据库 SQL变更 权限申请 数据导出 结构设计 库表同步 数据追踪 敏感列变更 测试数据构建 数据库克隆 应用安全...

2021年

创建RDS MySQL数据订阅任务 创建PolarDB MySQL版数据订阅任务 创建Oracle数据订阅任务 2021年4月 类别 功能描述 相关文档 新增 ETL(Extract Transform Load)功能正在新版控制公测,可用于实现数据中数据的清洗和转换处理,能够准确...

添加和管理加速区域

创建基础型 全球加速 实例后,您需要添加加速区域。加速区域是您需要进行访问加速的区域。背景信息 加速区域是阿里云地域的集合。客户端通过访问加速IP从加速地域进入阿里云加速网络。全球加速 服务支持的加速区域和地域,请参见 基础型...

将云消息队列 Kafka 版的数据迁移至MaxCompute

步骤四:同步数据 登录 DataWorks控制,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框选择对应工作空间后单击 进入数据开发。在 数据开发 页面,右键单击 业务名称,选择 新建节点>数据集成>离线同步。在 新建节点 对话框,输入...

使用访问日志

访问日志介绍 您可以选择为全球加速实例的一个或者多个终端节点组创建访问日志,采集到的访问日志将会投递到终端节点组所在地域SLS的日志库。访问日志包括:客户端源IP、客户端源端口、目的IP、目的端口、加速地域等字段信息。单击此处,...

配置数据源网络

本文主要介绍Serverless Spark如何配置数据源网络来访问用户VPC网络数据。这些数据包括RDS系列、ADB系列、PolarDB系列、MongoDB、Elasticsearch、HBase、E-MapReduce、Kafka以及用户在ECS上自建的各种数据服务等。背景信息 Serverless ...

资产大盘

数据管理DMS 的资产大盘功能支持T+1离线汇总当前 DMS 租户下的所有实例、数据库、表数据,并图形化展示数据资产...查看数据资产的详细信息 您可以在控制顶部菜单栏,选择 数据资产>实例管理,查看已有实例、数据库等数据资产的详细信息。

版本发布记录

计费项 数据字典 支持控制配置数据字典,当业务有常量数据或者业务数据可以划分为业务事实表和业务维度表,通过数据字典来替代维度表,直接查询字典获得维度数据,增加查询效率。数据字典 资源队列 解决开源版单个大查询消耗资源过多...

添加宜搭数据

本文为您介绍在DataV添加和使用宜搭数据源的方法,以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制 创建一个宜搭应用数据表单。新建表单详情请参见 新建宜搭数据表单。背景信息 宜搭数据源内数据的调用权限使用最小可用原则。...

添加开源Elastic Search数据

本文介绍在DataV添加并使用开源Elastic Search数据源的方法。前提条件 已准备好待添加的开源Elastic Search数据源。添加开源Elastic Search数据源 登录 DataV控制。在 我的数据 页签选择 数据源管理,单击 添加数据。从 类型 列表...

使用DataV可视化应用展示数据返回结果

在DataV控制台中,单击 我的可视化>PC端创建。选择一个模板,单击 创建项目。在 创建数据大屏 对话框中,输入 数据大屏名称,单击 创建。本案例选择 企业实时销售数据 模板。模板中的组件自带了静态数据,本案例以模板中的 基本折线图 组件...

设置白名单规则

说明 数据被参数化后的SQL语句不支持在控制修改,只能删除数据库表 proxy_auditing.sql_list 的参数化SQL语句后重新添加。删除白名单规则 登录 PolarDB控制。在控制左上角,选择集群所在地域。找到目标集群,单击集群ID。在...

数据服务

此参数的作用为:系统把查询后的数据,按照此处定义进行数据转换,最终将数据写入返回的JSON。配置完成后,单击 发布 按钮。说明 您也可以单击 保存 按钮,保存该API的配置。至此,已发布该API接口。步骤二:测试API 验证API配置是否正确...

添加AnalyticDB for MySQL数据

实例ID VPC下数据库实例的ID,可在 AnalyticDB控制 获取。说明 通常您可以直接在数据库产品的控制台查看数据库实例的VPC实例ID。但是由于VPC网络实现机制的原因,有时控制台显示的实例ID并不是DataV数据源配置VPC网络需要的实例ID。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据传输服务 数据库备份 DBS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用