论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
ToB门户
了解全球最新的ToB事件
博客
Blog
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
物联网
›
物联网
›
分布式调度框架学习条记
分布式调度框架学习条记
刘俊凯
金牌会员
|
2024-12-26 08:17:12
|
显示全部楼层
|
阅读模式
楼主
主题
830
|
帖子
830
|
积分
2492
一、分布式调度框架的根本设计
二、线程池线程数量设置的根本逻辑
cpu是分时复用的方法,线程是cpu调度的最小单元
如果当前cpu核数是n,计算密集型线程数一般设为n,io密集型(包括磁盘io和网络io)线程数一般设置为2n.
计算密集型线程数一般设为n的逻辑解释:
io密集型(包括磁盘io和网络io)线程数一般设置为2n的逻辑解释:
三、xxljob为什设置的线程是100,200?
四、power-job的无锁化设计
1. 任务分片
设计理念:在分布式情况中,任务通常被分成多个子任务(分片)并行实行。
无锁化设计通过减少对共享资源的竞争来提高并发性能
。
实现方式:PowerJob 通过将任务分片分配给差别的实行节点,避免了多个节点对同一资源的竞争,从而减少了锁的使用。
2. 去中心化调度
设计理念:
去中心化调度意味着调度决策不依赖于单一的中心节点,从而避免了中心节点的性能瓶颈和单点故障。
实现方式:PowerJob 接纳去中心化的调度计谋,答应各个节点独立地举行任务调度和实行,减少了对中心节点的依赖。
3. 无状态设计
设计理念:无状态设计意味着每个节点不依赖于其他节点的状态信息,从而减少了锁的使用。
实现方式:PowerJob 的节点设计为无状态,任务的状态信息存储在外部持久化存储中(如数据库),节点通过查询持久化存储来获取任务状态。
五、分布式调度框架对比
ElasticJob相对xxl-job和power-job的对比:
备注:
推荐课程:
【分布式调度中心power-job中固定延迟任务调度问题】https://www.bilibili.com/video/BV1Qb421B7n8?vd_source=3c00905b4271effeeee3f3184045c49b
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
倒序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
发新帖
回复
刘俊凯
金牌会员
这个人很懒什么都没写!
楼主热帖
IDEA中集成Git操作以及关于Git中分支说 ...
袋鼠云春季生长大会最新议程来啦!4月2 ...
SAP MM 使用两个STO实现免关税跨国公 ...
github上fork2.4k,star8.7k的这款状态 ...
牛客SQL刷题第三趴——SQL大厂面试真题 ...
万字解析XML配置映射为BeanDefinition ...
Linux基础篇(5)---》常用命令大全(压 ...
VUE+.NET应用系统的国际化-多语言词条 ...
0day安全:软件漏洞技术分析-Crack小实 ...
memcached使用中踩的一些坑
标签云
挺好的
服务器
浏览过的版块
Mysql
快速回复
返回顶部
返回列表