如何撰写一个分布式计算平台的作业调度器?
分布式计算系统中,为了高效利用资源,经常需要一个合理的调度器帮我们自动完成任务的合理调度和运行。不管是系统级别,还是应用级别。只要在资源有限的系统上运行任务,一个设计合理的调度器是很有用的。
在操作系统上,我们为了充分利用CPU,内存,磁盘,网络。 在分布式计算系统上,我们充分利用计算平台的抽象的计算单位,excutor (线程,进程,内存,磁盘)
(待续……)
分布式计算系统中,为了高效利用资源,经常需要一个合理的调度器帮我们自动完成任务的合理调度和运行。不管是系统级别,还是应用级别。只要在资源有限的系统上运行任务,一个设计合理的调度器是很有用的。
在操作系统上,我们为了充分利用CPU,内存,磁盘,网络。 在分布式计算系统上,我们充分利用计算平台的抽象的计算单位,excutor (线程,进程,内存,磁盘)
(待续……)