查看并管理实时任务
指定来源表读取数据时点：设置指定开始时间会让所有支持startTime的来源表均从该时刻开始读取数据。重要 目前支持Log Service CDC、Kafka CDC、MySQL CDC、MongoDB CDC、OceanBase CDC指定来源表读取数据时点。SQL作业中的代码参数配置将...
全场景解决方案
一站式金融级分布式架构解决方案 提供 SOFABoot、注册中心、API 统一网关、消息队列、任务调度、分布式事务、数据访问代理、分布式链路追踪、服务网格等产品，助力客户各类应用轻松转型分布式架构。客户案例 建议产品 统一技术中台 方案...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
10 分钟本地试用公有云分布式事务
本节介绍如何快速本地试用公有云分布式事务服务。操作步骤 开通分布式事务服务。说明 如果已开通服务，可以忽略这一步。如果没有账号，可使用支付宝扫描登录。登录 分布式事务产品 页面。在 开通 DTX 分布式事务体验版 页面，单击 确认开通...
网商银行
业务挑战 网商银行将普惠金融作为自身的使命，目标是利用互联网的技术、数据和渠道创新，构筑“分布式云生态”的架构体系，为未来的架构可持续演进奠定基础，帮助解决小微企业融资难融资贵、农村金融服务匮乏等问题，促进实体经济发展。...
应用场景
基于蚂蚁集团中台战略及架构的最佳实践，将企业级公共能力进行抽象，形成以客户服务、运营服务、分布式架构为基础的业务中台体系，实现开放、可扩展、组件化、分布式的业务架构，支持业务快速、高效、低成本创新，满足互联网场景化快速多变...
基本概念
单机视角 从应用实例（单机）维度进行指标数据的聚合，从单机的空间分布和时间分布上对应用监控指标数据进行对比分析。订阅 订阅后，通知组内的成员会收到监控告警通知。服务指标 服务指标将应用相关的 Error、Service、SAL、CAL、DAL 等...
功能特性
数据源配置管理 您可以在产品中添加多种不同类型的数据源配置，每个数据来源配置代表一个核对系统在后续核对工作中可以用来读取数据的数据来源配置，当前支持如下类型的数据源配置：OSS：OSS 文件系统的读取配置，需要您输入访问信息，...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
概述
数据访问代理是蚂蚁金融科技自主研发的金融级分布式数据库中间件，用于解决海量请求下数据访问的瓶颈及数据库的容灾问题，提供水平拆分、平滑扩缩容、读写分离的在线分布式数据库服务。十年来专注于为海量数据访问提供低消耗、高性能、高...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX于2021年09月01日正式商业化。对于公测期间创建的实例，如果2021年09月01日00:00:00前没有释放，那么我们将默认您所创建的集群采用按量付费模式开始收费。操作步骤 首次使用并登录分布式任务调度...
插件配置概述
阿里云Logstash支持的插件如下：自研插件 类别 名称 说明 介绍 input logstash-input-datahub 从阿里云流式数据服务DataHub读取数据。logstash-input-datahub插件使用说明 logstash-input-maxcompute 从阿里云大数据计算服务MaxCompute读取...
SPI-串行外设接口
读取flash w25q128 的JEDEC ID值*@returns {objct} 返回 JEDEC 值值*/function getJEDEC(){/*根据w25q数据手册，读取JEDEC ID要先发送命令[0x90,0,0,0]*/var cmd=[0x90,0,0,0];根据w25q数据手册，要读取的ID长度为2，因此定义长度为2的 ...
产品优势
作为行业领先的区块链数字身份管理服务，蚂蚁链分布式身份服务 DIS 具备以下优势：分布式 基于区块链构建分布式数字身份系统，摆脱了对单一中心企业的依赖，抵御故障和篡改。各生态参与方平权参与，易于生态合作。身份自主控制 打通用户...
读取联邦表
本文介绍了读取已保存的联邦表的 API 及示例。注意 本文涉及 API 中所有的占位符，例如"$df0"，必须包含单引号或双引号。函数路径 fascia.biz.api.dataframe.read_fed_table 函数定义 def read_fed_table(fed_table)->HDataFrame:参数 fed_...
通过SDK使用二级索引
} 步骤三：读取索引表中数据 从索引表中单行或者范围读取数据，当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。您可以通过 Java SDK、Go SDK、Python SDK、Node.js SDK、.NET SDK 和 PHP SDK ...
读取文本文件内容
1.组件介绍 说明 必要前置组件：无 利用本组件可以读取文本文件内容 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 ...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴基于Akka架构自研的新一代分布式任务调度平台，提供定时调度、调度任务编排和分布式批量处理等功能。您可以在控制台配置、管理您的定时调度任务、查询任务执行记录和运行日志，还可以通过工作流进行任务...
产品体系
SOFAStack 产品家族 SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证，为金融交易技术...
应用场景
SOFABoot 可帮助用户快速搭建高效、可靠的分布式应用，同时能与 Spring Boot 工程无缝集成，降低用户的迁移成本。快速开发分布式应用 SOFABoot 框架集成了所有 SOFA 中间件，以“依赖即服务”的调用形式实现快速配置，轻松搭建稳定、可靠、...
南京银行
解决方案 2017 年，南京银行引入蚂蚁集团金融级分布式交易架构能力——分布式架构 SOFAStack、分布式数据库 OceanBase，以及大数据平台能力，构建新的互联网金融核心，并于同年 11 月上线互联网金融平台“鑫云+”。客户价值 新平台开创“1+...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
MySQL
与旧的快照读取相比，增量快照有很多优点，包括：读取全量数据时，Source可以是并行读取。读取全量数据时，Source支持chunk粒度的检查点。读取全量数据时，Source不需要获取全局读锁（FLUSH TABLES WITH read lock）。如果您希望Source支持...
授权概述
操作 授权方式 说明 读Logstore的权限配置 通过默认角色读取Logstore数据 授权MaxCompute投递任务使用阿里云系统角色AliyunLogDefaultRole读取源Logstore中的数据。通过自定义角色读取Logstore数据 授权MaxCompute投递任务使用自定义角色...
读取环境变量
1.组件介绍 说明 必要前置组件：无 利用本组件可以读取环境变量 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 在 ...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
方案扩展
读取Feed流 先读取自己关注的大V列表。通过GetRange读取自己的收件箱。范围起始位置是上次读取到的最新Feed的ID；结束位置可以是当前时间，也可以是MAX，建议是MAX值。如果有关注的大V，则再次并发读取每一个大V的发件箱。如果关注了10个大...
TableInBatchGetRowRequest
在BatchGetRow操作中，TableInBatchGetRowRequest表示要读取的一个表的请求信息。数据结构 message TableInBatchGetRowRequest { required string table_name=1;repeated bytes primary_key=2;Plainbuffer编码 repeated bytes token=3;...
应用场景
对于传统企业的服务化转型来说，使用分布式框架不是银弹，在解决了传统的单块架构系统随着业务需求的快速变化而面临的挑战后，分布式架构也为研发和运维增加了更大的复杂度和管理成本，基于分布式框架来进行架构改造的应用和业务通常会面临...
源Logstore读取错误
本文介绍数据加工服务读取源Logstore错误的原因以及排查处理方法。加工引擎启动成功后，开始读取源Logstore的数据。数据加工引擎对源Logstore采用流式读取，在加工过程中会持续不断的读取源Logstore中的数据。本环节产生错误主要是由于对源...
常见问题
如何接入 DIS？目前，蚂蚁链分布式身份服务 DIS 仅支持 API 接入。企业如何接入 DIS？我们提供标准的接入文档供您参考。首先，您需要 开通蚂蚁区块链分布式身份服务，然后参考 快速开始 说明接入 DIS。
步骤五：到控制台验证
基于 开发单元化应用 中的转账与积分场景，在完成相应的转账或存款等操作后，您可以前往各个产品控制台验证单元化效果：分布式链路跟踪：查看单元间流量走向 分布式事务：查看事务执行情况 消息队列：查看消息轨迹 微服务：按单元推送动态...
读数据表
读数据表组件用于读取MaxCompute表数据，默认读取本项目的表数据。如果跨项目读取表数据，则需要在表名前添加项目名。说明 目前 Designer 算法组件支持读取的数据类型为DOUBLE、BIGINT、STRING、BOOLEAN、DATETIME。读数据表组件支持读取...
集群任务限流
Read 阶段 Reader 读取一批数据，读取数据接口返回数据列表和后续是否有新的数据标志。Reader 根据 limiter 的限流速率向 Processor 推送数据。Process 阶段 Processor 接收到数据后，通过多线程的方式对这批数据进行处理。处理后通过队列...
常见问题
运维管理 容器应用服务常见问题 经典应用服务常见问题 中间件 SOFABoot 常见问题 微服务常见问题 微服务故障排查之 DRM 微服务故障排查之限流 微服务故障排查之 RPC 服务网格-故障排查 消息队列常见问题 任务调度常见问题 分布式链路跟踪...
日志消费与查询区别
区别 对比项目 日志查询 日志消费 查找关键词 支持 不支持 读取少量数据 快 快 读取全量数据 慢（100条日志100ms，不建议通过该方式读取数据。快（1 MB日志10ms，推荐方式。读取是否区分日志主题 区分 不区分，只以Shard作为标识。读取是否...
概述
金融分布式架构 SOFAStack 致力于提供一整套帮助广大金融场景落地云原生、分布式架构的产品和解决方案，而其中的应用 PaaS 平台，融合金融科技多年在大规模分布式系统和容器平台的实践经验，使用户在专注于业务价值的同时，提升研发效率和...
数据投递仪表盘
总览指标 总览指标信息如下所示：读Logstore流量总计：从源Logstore的各个Shard中读取到的日志条数。投递成功行数总计：从源Logstore的各个Shard中读取日志后，投递到目标云产品成功的日志条数。投递失败行数总计：从源Logstore的各个Shard...
- 产品推荐
- 这些文档可能帮助您