百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

分布式调度框架比较(分布式调用框架)

ccwgpt 2024-10-12 02:50 18 浏览 0 评论

前言

现实世界中,我们经常会面对这样的情况,比如:我们定了早晨7:00的闹铃,到了7:00闹铃会把我们叫醒。我们醒了之后,把闹铃关掉。

大家有没有发现,我们做了两件事,第一、我们醒了;第二、我们关了闹铃。

这事情是怎么发生的?

其一、7:00到了,闹钟把我们叫醒了。抽象:时间触发事件。

其二、我们醒了,关掉闹铃。抽象:事件触发事件。

总的来说就是,时间驱动和事件驱动。


现在软件定义世界,日常工作和学习通过软件定义之后,我们可以把刚才的“我们醒了”和“我们关掉闹钟”抽象成任务,即要的事。

那“闹铃响了”和“我们醒了”抽象成触发条件。


有哪些定时任务框架呢?

单机

  • Linux服务器:Linux Crontab 定时任务【cron搭配shell脚本】
  • Window服务器:控制面板--->管理工具--->任务计划程序【未实践,可自行测试】
  • 软件进程:【以java为例】
  • 工具类:Timer类、注解(@Scheduled)
  • 框架:Quartz

分布式调度框架【各家公司的产品】

  • 阿里:Schedulerx2.0【非常不错,https://cn.aliyun.com/aliware/schedulerx】
  • Linkedin:【Azkaban开源的工作流管理器,轻量级调度框架】
  • 大众点评:xxl-job【www.xuxueli.com/xxl-job/#/
  • 当当网:Elastic-job【http://ww1.elasticjob.io/】
  • 唯品会:Saturn【https://vipshop.github.io/Saturn/#/】
  • Apache Oozie:功能强大,配置复杂的Hadoop任务调度框架
  • AirFlow:基于Python开发的通用批处理调度框架
  • EasyScheduler:国内开源的分布式工作流任务调度系统


思辨

  • 单机 VS 分布式?

毫无疑问,生产环境肯定要分布式,无需辩驳。单机的话,越简单的方式越好。

  • 分布式之开源框架 VS 云产品

如自己维护服务器,则选择开源的,有大公司背书的和有不错文档的,Azkaban还不错。

云原生时代,鉴于你使用的云是哪家的?则选择云上的分布式调度框架即可。

阿里云的话,SchedulerX不用考虑了,直接用之。

那如果是AWS呢?容我研究一下。

相关推荐

迈向群体智能 | 智源发布首个跨本体具身大小脑协作框架

允中发自凹非寺量子位|公众号QbitAI3月29日,智源研究院在2025中关村论坛“未来人工智能先锋论坛”上发布首个跨本体具身大小脑协作框架RoboOS与开源具身大脑RoboBrain,可实...

大模型对接微信个人号,极空间部署AstrBot机器人,万事不求百度

「亲爱的粉丝朋友们好啊!今天熊猫又来介绍好玩有趣的Docker项目了,喜欢的记得点个关注哦!」引言前两天熊猫发过一篇关于如何在极空间部署AstrBot并对接QQ消息平台的文章,不过其实QQ现在已经很少...

Seata,让分布式事务不再是难题!实战分享带你领略Seata的魅力!

终身学习、乐于分享、共同成长!前言Seata是一款开源的分布式事务解决方案,致力于提供高性能和简单易用的分布式事务服务。Seata将为用户提供了AT、TCC、SAGA和XA事务模式,为用户打造一站式的...

常见分布式事务解决方案(分布式事务解决的问题)

1.两阶段提交(2PC)原理:分为准备阶段(协调者询问参与者是否可提交)和提交阶段(协调者根据参与者反馈决定提交或回滚)。优点:强一致性,适用于数据库层(如XA协议)。缺点:同步阻塞:所有参与者阻塞...

分布式事务:从崩溃到高可用,程序员必须掌握的实战方案!

“支付成功,但订单状态未更新!”、“库存扣减后,交易却回滚了!”——如果你在分布式系统中踩过这些“天坑”,这篇文章就是你的救命稻草!本文将手把手拆解分布式事务的核心痛点和6大主流解决方案,用代码实战+...

谈谈对分布式事务的一点理解和解决方案

分布式事务首先,做系统拆分的时候几乎都会遇到分布式事务的问题,一个仿真的案例如下:项目初期,由于用户体量不大,订单模块和钱包模块共库共应用(大war包时代),模块调用可以简化为本地事务操作,这样做只要...

一篇教你通过Seata解决分布式事务问题

1 Seata介绍Seata是由阿里中间件团队发起的开源分布式事务框架项目,依赖支持本地ACID事务的关系型数据库,可以高效并且对业务0侵入的方式解决微服务场景下面临的分布式事务问题,目前提供AT...

Seata分布式事务详解(原理流程及4种模式)

Seata分布式事务是SpringCloudAlibaba的核心组件,也是构建分布式的基石,下面我就全面来详解Seata@mikechen本篇已收于mikechen原创超30万字《阿里架构师进阶专题合...

分布式事务最终一致性解决方案有哪些?MQ、TCC、saga如何实现?

JTA方案适用于单体架构多数据源时实现分布式事务,但对于微服务间的分布式事务就无能为力了,我们需要使用其他的方案实现分布式事务。1、本地消息表本地消息表的核心思想是将分布式事务拆分成本地事务进行处理...

彻底掌握分布式事务2PC、3PC模型(分布式事务视频教程)

原文:https://mp.weixin.qq.com/s/_zhntxv07GEz9ktAKuj70Q作者:马龙台工作中使用最多的是本地事务,但是在对单一项目拆分为SOA、微服务之后,就会牵扯出分...

Seata分布式事务框架关于Annotation的SAGA模式分析

SAGAAnnotation是ApacheSeata版本2.3.0中引入的功能,它提供了一种使用Java注解而不是传统的JSON配置或编程API来实现SAGA事务模式的声明...

分布式事务,原理简单,写起来全是坑

今天我们就一起来看下另一种模式,XA模式!其实我觉得seata中的四种不同的分布式事务模式,学完AT、TCC以及XA就够了,Saga不好玩,而且长事务本身就有很多问题,也不推荐使用。S...

内存空间节约利器redis的bitmap(位图)应用场景有哪些你知道吗

在前面我们分享过一次Redis常用数据结构和使用场景,文章对Redis基本使用做了一个简单的API说明,但是对于其中String类型中的bitmap(位图)我们需要重点说明一下,因为他的作用真的不容忽...

分布式事务原理详解(图文全面总结)

分布式事务是非常核心的分布式系统,也是大厂经常考察对象,下面我就重点详解分布式事务及原理实现@mikechen本文作者:陈睿|mikechen文章来源:mikechen.cc分布式事务分布式事务指的是...

大家平时天天说的分布式系统到底是什么东西?

目录从单块系统说起团队越来越大,业务越来越复杂分布式出现:庞大系统分而治之分布式系统所带来的技术问题一句话总结:什么是分布式系统设计和开发经验补充说明:中间件系统及大数据系统前言现在有很多Java技术...

取消回复欢迎 发表评论: