python并发与并行概念,以及multiprocessing模块应用举例
在Python中,并发和并行是两个相关但含义不同的概念:
● 并发(Concurrent)指的是在一段时间内,多个任务交替执行的能力,这些任务可能不是同时执行,但给人的感觉是同时在处理多项任务。它可以发生在单核或多核处理器上,通过任务调度来实现“同时”处理的效果。
● 并行(Parallel)则是指在同一时刻,多个任务真正同时执行,这通常需要多核处理器支持。并行处理能够显著提高程序执行效率,因为它能同时利用多个处理器核心进行计算。
multiprocessing模块是Python用于实现并行处理的一种方式,特别是在受到全局解释器锁(GIL)限制的CPython解释器中,多线程并不能实现真正的并行计算。multiprocessing模块通过创建多个进程来绕过GIL,允许程序充分利用多核CPU资源,实现真正的并行执行。
以下是一个使用multiprocessing模块实现并行计算的简单示例,展示了如何启动多个进程来并行处理任务列表:
import multiprocessing
def square(number, return_dict):
"""
计算一个数的平方,并将结果存入共享的字典中。
"""
result = number * number
return_dict[number] = result
if __name__ == "__main__":
numbers = [1, 2, 3, 4, 5]
manager = multiprocessing.Manager() # 创建一个Manager对象,用于创建共享数据类型
return_dict = manager.dict() # 一个可以在不同进程间共享的字典
# 创建并启动进程
processes = []
for number in numbers:
p = multiprocessing.Process(target=square, args=(number, return_dic
原文地址:https://blog.csdn.net/weixin_47139994/article/details/143785105
免责声明:本站文章内容转载自网络资源,如本站内容侵犯了原著者的合法权益,可联系本站删除。更多内容请关注自学内容网(zxcms.com)!