Python 之 多任务:
Python之多任务是现在多任务编程运用Python语言为载体的一种体现。其中涵盖:进程、线程、并发等方面的内容,以及包括近些年在大数据运算、人工智能领域运用强大的GPU运算能力实现的各种算法。属于Python语言中比较高级的应用形式。文章采取问答的形式对知识点和相关应用的模式进行详解,看似像意识流形态的文章,其内容也是遵循循序渐进,力求全面和精细。
问:什么是多任务?
答:百度定义:“当多任务处理是指用户可以在同一时间内运行多个应用程序,每个应用程序被称作一个任务。”也就是说操作系统可以同时运行多个任务。这个概念是基于操作系统来说的。比如电脑同时开启多个软件或者应用程序,这就是一种多任务的体现;于此相对如果我们电脑只能每次开启一个软件或者一个应用程序,关闭前者才能开启后者这就叫做单任务,在早期的电脑基本都属于单任务,对于现在的计算机应用基本上都属于多任务的形式存在,因此我们也只讨论多任务。
问:CPU是整个运算的核心,CPU、操作系统、多任务之间的关系什么?
答:1. 现在的CPU基本上都是2核以上的CPU,如果我们现在手里有一台单核的CPU和一台多核CPU,我们的多任务在上面又是怎么实现的呢?
1.1. 单核CPU实现多任务原理?
操作系统轮流让各个任务交替执行,CPU对每个任务进行“时间切片”的动作,这个切片时间非常短暂,打个比方,一整块的奶酪难以下咽,我们把奶酪切成一小块一小块的,让我们的CPU以飞快的速度进行“吞噬”。同样我们比如有N个任务,把每一个任务切成“时间切片”,如此交替往复的切换运行。这样表面上看像是多任务一起执行,但是CPU调度执行速度太快了,导致我们感觉所有任务都是同事执行一样。
1.2. 多核CPU实现多任务原理?
真正的并行执行多任务只能在多核CPU上实现,但是任务数量远远多于CPU核心数量,所以操作系统会把很多任务轮流调度到每个核心上执行。和单核CPU实现多任务原理相比,多核CPU真正实现了“多窗口”的轮流调度任务。
1.3. 打个比方,单核CPU就像银行开一个窗口来处理任务,多核CPU开多个窗口来处理任务。这个任务之间的调度是通过操作系统来完成的。
2. CPU核和线程是一个什么概念?
这里再稍微扩展一下:我们说一下CPU的主频、核心、线程、架构。
CPU是整个计算机的大脑。
主频:我们经常看到CPU参数当中有3.0GHz、3.7GHz等,这就是CPU的主频,严谨的说他是CPU的时钟频率,也可以直接理解为运算速度。主频越大力量越大。
核心:我们常常说计算机是几核心的。主频我们可以理解为肌肉,核心我们可以理解为胳膊,如果你有16条胳膊(也就是16核心),你所能干的事情也是越多。直观来看在CPU中心隆起的芯片就是核心,是由单晶硅以一定的生产工艺制造出来的。每一个CPU核心都有自己固定的逻辑结构,一级缓存、二级缓存,执行单元、指令集单元和总线接口等。打个比如,一条胳膊都有肌肉,骨骼、神经、血管等一套逻辑系统。
线程:有了胳膊还必须有手才能工作。一般来说单核配单线程,双核配双线程。也就说一条胳膊配一只手。但是我们有些CPU比如4核8线程,也就是说有4条胳膊,每条胳膊配2只手(看起来有点儿恐怖了),但是这样多造出来的两只手,干活的效率就大大的提高了。
架构:现在有了肌肉、胳膊、手,就差一个工具就可以干活了,这就是CPU的架构,架构对刑恩该影响巨大。比如现在通行的ARM架构等。
3. 关系:
计算机通过操作系统,把多个任务调度到CPU的核心上进行计算,他们之间是载体和对象,实现和被实现、调度和被调度之间的关系。
问:并行和并发是什么概念?
答:并发:看上去是一起执行,任务多于CPU核心数。
并行:真正一起执行,任务数小于CPU核心数。
再直观的理解一下:并发(Concurrent):指两个或多个事件在同一时间间隔内发生,即交替做不同事的能力。并行(Parallel):指两个或多个事件在同一时刻发生,即同时做不同的能力。我们以进程举例:并发就像是我们前面说的单核CPU执行多任务的概念,交替执行,并行就像多核CPU执行多任务的概念,同时执行。再比如,我们现在有一个4核4线程的CPU,我们有5个任务一起发送给CPU,这个时候后可能是某几个程序并行一起运行,其他多于的1个任务交替并发执行。如果我们现在只有4个任务,这样4个任务就可以完全“吃饱”了CPU的进程,就可以并行(当然这里是不考虑其他因素的情况下)。
问:进程、线程、任务都是什么东西?
答:进程:对于操作系统而言,一个任务就是一个进程。进程是系统中程序执行和资源分配的基本单位。每个进程都有自己的数据段、代码段、堆栈段。
线程:在一个进程的内部,要同时干多件事情(就是手的问题),就需要同时运行多个子任务,我们把进程内的这些子任务叫做线程。也就是说线程是进程的子任务。
线程通常叫做情景进程。线程是通过向内侧控件的并发执行的多任务。每个线程都共享一个进程的资源。线程是最小的执行单元,而进程至少由一个线程组成。如何调度进程和线程,完全是由操作系统决定,用户程序不能自己决定什么时候执行。执行多长时间。
我们闭上眼睛形象的比喻一下,在线程这根柱子上面,子任务不断围绕这根柱子交替来执行(这是符合我们之前的单任务CPU的工作原理的),然后多根柱子又去并行多少个进程一起来执行。从实际运行的过程来看,任务在线程这个最小单元是并发执行的,在任务数小于CPU核心数的情况下,有可能还是并行执行的。并发是线程的经常运作模式,并行是总体的实际运行调度,微观来说任务都是在并发执行在线程上面的。
问:“抢占式”和协同式任务模式?
答:在windows3.x的时代,那个时候的程序运行任务基本上是依靠代码的编写逻辑进行的。当一个程序运行完毕后再运行下一个程序,这样做最大的风险就是如果一个程序出问题卡死就很容易出现死机的情况。抢占式任务模式,是现在基本的任务模式,比如现在我们开启了N个程序,现在我们在打字,这个优先级最高,我们就把它先推送给CPU让它先去执行,如果我们现在再打开一个程序,之前的打字的那个程序优先级退下,让当前的程序推送到最高的优先级。我们其实可以通过Windows的任务管理器去观察所有的当前任务。我们发现这些任务并不是按照一定有规律的顺序排列进行执行的,如果当前程序优先级很高它就是排在前面,而且我们如果静止不动去观察,他们的排序是会产生不断变化的。这就是“抢占式”任务模式。因此我们的程序在进程或者线程当中去运行的话,也是这种抢占式任务运行模式。
问:GIL在Python中的作用?
答:
原文地址:https://www.cnblogs.com/noah0532/p/11001485.html