公告
提升查询效率的同时基于租户级别Information Schema还陆续完善了更多的元数据信息，因此MaxCompute计划于北京时间 2024年03月01日 开始 停止对新增项目自动安装项目级别Information Schema，即新增的项目默认没有项目级别Information ...
迪卡侬建立云上身份权限体系加码云建设
只需要几个简单的步骤即可完成云SSO的基本配置，有经验的技术专家甚至只需要半小时。这些步骤包括：在云SSO中创建用户及用户组，或进行用户同步配置；配置单点登录；创建一系列权限集合（称为访问配置）；为每个用户或用户组针对RD中的不同...
自动化
自动化的优势主要体现在以下几个方面：更高的生产效率：员工可以将更多时间投入到对业务影响更大的事务上。重复性工作则交由自动化程序来处理。更加可靠：减少人工干预，就可以减少出错和问题。所有相同的工作流都会以相同的方式完成，这样...
性能监控最佳实践
而一体化性能监控则可以通过集成多种监控工具和技术，监控系统的各个方面，例如网络流量、磁盘IO、数据库响应时间等。这样可以更加全面地了解系统的性能状况，及时发现和解决问题，提高监控精度。提高故障排查效率：当系统或应用出现故障时...
Logview诊断实践
在实际业务开发过程中，企业通常要求作业能在期望的时间节点前产出结果，并根据结果做进一步决策，这就需要作业开发人员及时关注作业运行状态，识别并优化慢作业。您可以通过MaxCompute的Logview功能诊断慢作业。本文为您介绍导致出现慢...
DataWorks模块使用说明
使用流程与主要子模块 DataWorks为您提供从端到端的一站式数据开发治理平台，数据处理流程主要包括以下几个阶段。各个阶段DataWorks的主要子模块如下。数据集成 子模块：数据集成 功能说明：数据集成是稳定高效、弹性伸缩的数据同步平台，...
传统国企：SAE助力传统大型国企云原生转型
系统缺乏稳定性：因信息系统依旧延续第一代架构，扩展性差，导致无法设置完善的弹性伸缩，面对越来越大的流量，系统稳定性问题愈发凸显。同时，团队需求多，开发任务重，运维人员缺乏。SAE能够免运维底层基础设施，例如IaaS、K8s、微服务...
测试指标
其中，特殊交易响应时间的设定必须明确该交易在响应时间方面的特殊性。简称 Response Time:RT 参考标准 不同行业不同业务可接受的响应时间是不同的，一般情况，对于在线实时交易：互联网企业：500毫秒以下，例如淘宝业务10毫秒左右。金融...
离线同步并发和限流之间的关系
针对限流场景，举几个常见案例介绍如下：用户配置并发数为5，任务限速为5MB/s，则任务会尝试切分为5个分片并发执行，每个分片执行限制速率为1MB/s。如果任务实际并发为5，则作业的最终速度上限为5MB/s，小于等于任务速度上限。任务实际执行...
性能测试技术指南
瓶颈分析 分析 瓶颈定位的目的是对系统中存在的瓶颈点进行分析，为调优做准备，系统的性能瓶颈点主要分布在操作系统资源、中间件参数配置、数据库问题以及应用算法上，对于有针对性的进行调优，有利于系统性能的提升。风险 当系统的瓶颈点...
典型客户案例
SOFAStack 助力金融机构完成数字化转型 目前产品已经在工商银行、南京银行、浙江农信、中信银行、人保健康等几十家金融机构落地，在金融行业分布式中间件市场份额中处于领先地位。客户价值 根据 2020 年 6 月 Forrester 撰写的 SOFAStack ...
搭建Linux开发环境
前提条件 搭建Spark开发环境前，请确保您已经在Linux操作系统中安装如下软件：说明 本文采用的软件版本号及软件安装路径仅供参考，请根据您的操作系统下载合适的软件版本进行安装。JDK 安装命令示例如下。JDK名称请以实际为准。具体的JDK...
日志服务通过数据集成投递数据
本文将以LogHub数据同步至MaxCompute为例，为您介绍如何通过数据集成功能同步LogHub数据至数据集成已支持的目的端数据源（例如MaxCompute、OSS、Tablestore、RDBMS和DataHub等）。前提条件 准备好相关的数据源，详情请参见 创建MaxCompute...
DataWorks数据集成
无论是哪种应用场景，都可以通过DataWorks的数据集成功能完成数据的同步过程，详细的操作步骤（包括创建数据集成任务、数据源配置、作业配置、白名单配置等），请参考 DataWorks文档 中的使用指南->数据集成一栏。文章中余下部分会介绍 ...
安全管家服务
安全加固方案包括以下几个方面：网络安全策略调整，如网络架构调整、安全组策略加固等 对RDS、OSS等云产品进行安全加固 对ECS操作系统进行安全基线加固和补丁升级 对Apache、Nginx等应用软件进行安全加固 考虑到客户生产环境的依赖性和复杂...
分场景排错指引
当Flink无法读取源数据时，建议从以下几个方面进行排查并处理：检查上游存储和Flink全托管之间网络是否连通。Flink全托管仅支持访问相同地域、相同VPC下的存储。如果您有访问跨VPC存储资源或者通过公网访问Flink全托管的特殊需求，请查看...
标签设计最佳实践
标签设计的背景 当企业云上资源只有几个或十几个的时候，通过人脑记忆或人工记录即可完成资源的分类。但是，随着企业云上资源不断增加（大型企业资源数量甚至成千上万），单纯依靠人工进行资源的分类变得越来越不可靠。此时，需要借助平台...
云效移动端快速入门
本文重点介绍云效与IM的集成。很多的研发团队在做敏捷的同时，也在使用IM沟通协作，这已经是一个主流的方向，都有研发&协作场景需求，在实践的过程中还存在如下的问题：账号管理复杂：不同的工具有各自的账号系统，需要分别对接，且员工的...
先知等保测评服务协议
完成XX系统的Y级保护测评服务，包括物理安全、网络安全、主机系统安全、应用安全和数据安全、安全管理机构、安全管理制度、人员安全管理、系统建设管理和系统运维管理等十个方面的安全测评，并按照等级保护主管部门指定的报告模版要求，为...
2022-09-19版本
作业状态集管理 SQL作业启动 JAR作业启动 Python作业启动 作业停止 定时调优 定时调优功能针对业务上有明显波峰波谷的Flink作业，对于这类作业我们支持用户在平台设置好自定义的定时策略，在用户需要的时间将作业自动调整到用户预先设定好...
网络规划
所以企业级云上网络的重点是帮助企业用户更高效地搭建上云网络环境，而企业互联解决方案作为整体上云网络搭建过程的核心，需要帮助客户解决云上网络架构设计、云上云下网络互通、云上企业内部网络互通、云上企业间私网访问等场景下的问题。...
迁移方案
迁移限制 由于Blink作业的State和Flink的State无法兼容复用，因此所有的迁移工作均采用冷迁移方式，即Blink作业需停止后再切换成Flink作业后启动，迁移过程中会存在业务中断的情况。Bayes开发平台权限体系无法对应VVP，需要您重新进行授权...
四川农信
业务挑战 现有 IT 系统在过去的一段时间有效地支撑了各业务系统的运营，但目前的 IT 技术环境在面对未来业务大发展的需求时仍会面临极大的挑战，主要有以下几点：传统架构面临挑战 新一代的银行系统必须直面来自不同阶层、不同背景的海量...
割接与上线
拿VM举例，通常云上会提供十几个系列，数百种VM型号，使用错误的VM即使能够将服务启动起来，但会带来性能、功能以及成本的问题。迁移过程确保安全合规。数据迁移严格使用加密数据传输，加密数据存储。证书、密码、权限按照合规的方式申请和...
Landing Zone咨询服务内容说明
1.服务概述 1.1 服务说明 Landing Zone咨询服务是在客户系统上云的过程中，提供基于阿里云产品体系的云治理方案设计与方案技术验证。通过该服务帮助客户进行资源管理、财务管理、身份管理、网络规划、安全防护、合规管理、运维管理、基础...
在Android环境集成企业版或旗舰版SOC
SOC是一个端到端的服务，为RTOS、Linux、Android操作系统的物联网终端提供安全审计。本文介绍了如何在Android系统中集成企业版或旗舰版SOC。前提条件 已通过IoT安全中心获取企业版或旗舰版 SOC SDK。也可以单击 下载SOC for Android SDK。...
ADP底座技术白皮书
本文从技术角度，阐述ADP底座的整体架构、非功能特性、运维信息，更好更全面地帮助客户理解ADP底座的核心能力，以便更好地被业务集成。技术架构 应用架构 应用部署架构将云原生运行时环境分为业务产品和ADP底座两层，图中阐述了每一层的...
DataWorks On MaxCompute使用说明
DataWorks基于 云原生大数据计算服务MaxCompute 轻松构建离线数仓分析系统。MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发...
查询加速（MCQA）
每天每个项目并发限制5个，每天每个项目最多运行500个作业，超过部分默认设置自动回退为普通作业，如果您设置了不回退，系统会报如下错误：ODPS-1800001:Session exception-Failed to submit sub-query in session because:Prepaid project...
客户案例
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
身份权限
上云初期的一次性配置 在上云初期，企业需要进行一次性的初始化身份集成配置，主要步骤包括：在IdP配置一个与阿里云进行角色SSO的应用。为该应用分配使用的用户和用户组。根据阿里云角色SSO配置要求进行SAML属性配置。在每个阿里云账号中...
小文件优化及作业诊断常见问题
本文为您介绍小文件优化以及作业诊断时的常见问题。问题类别 常见问题 小文件优化 MaxCompute什么情况下会产生小文件？如何解决小文件问题？作业诊断 执行并发插入操作报错，如何处理？运行作业时，报错ODPS-0130121，如何解决？创建的...
DataWorks On Hologres使用说明
DataWorks基于 实时数仓Hologres 轻松构建实时数仓与即席分析系统。Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务...
如何使用Prometheus监控Windows
自建Prometheus监控Windows的痛点 通常您使用的Windows都是部署在ECS上，因此使用自建Prometheus监控Windows或者ECS时，可能面临的典型问题有以下几点：由于安全、组织管理等因素，您的业务通常部署在多个相互隔离的VPC，因此这需要您在多...
HDFS数据源
HDFS是一个分布式文件系统，为您提供读取和写入HDFS双向通道的功能，本文为您介绍DataWorks的HDFS数据同步的能力支持情况。支持的版本 目前不支持阿里云文件存储HDFS版。使用限制 离线读 使用HDFS Reader时，请注意以下事项：由于连通默认...
监控和分析
监控云上资源，系统的安全状况，找出业务系统可能存在的漏洞，对可疑活动的告警作出反应，或是针对企业日常活动中的安全事件进行追溯，是构建业务安全机密性、完整性、可用性重要的一环。监测控制 通过运用云上的多种监测控制手段，以此来...
产品优势
核心优势 弹性容器实例的核心优势主要体现在以下几方面：免运维 采用Serverless架构，基础设施托管。您无需关心底层服务器，只需要提交容器镜像；无需预先创建集群和维护集群，无需关注运行过程中的容量规划，可以专注业务领域创新。灵活...
可重复基础设施
基于大量客户实践，推荐从以下几个方面入手：转变思维方式 如果团队成员已经习惯了手动管理基础设施，他们更倾向于直接实施所有变更。例如，他们可能会通过SSH连接到服务器并执行一些命令。然而，迁移到基础设施即代码则需要改变思维方式，...
什么是QUIC协议
如果客户端和CDN节点之间的链路使用QUIC协议，则可以保障数据传输的安全性，同时提升资源的访问效率。通过本文您可以了解什么是QUIC协议以及如何开通以和收费等问题。什么是QUIC QUIC（Quick UDP Internet Connections）是一种实验性传输层...
项目级别Information Schema
获取Information Schema服务 自2024年03月01日开始，MaxCompute停止对新增项目自动安装项目级别Information Schema，即新增的项目默认没有项目级别Information Schema的Package。若您有查元数据的业务，您可以查询租户级别的Information ...
- 产品推荐
- 这些文档可能帮助您