对于您的特定任务,我建议使用一个多处理工作池。您只需定义一个池,并告诉它要使用多少个进程(默认情况下每个处理器内核一个),以及要在每个工作单元上运行的功能。然后,您准备好列表中的每个
工作单元 (在您的情况下,这将是URL列表),并将其提供给工作池。
您的输出将是原始数组中每个工作项的worker函数返回值的列表。所有出色的多处理优势都将在后台发生。当然,还有其他使用工作池的方法,但这是我最喜欢的一种。
祝您多加工!
欢迎分享,转载请注明来源:内存溢出
对于您的特定任务,我建议使用一个多处理工作池。您只需定义一个池,并告诉它要使用多少个进程(默认情况下每个处理器内核一个),以及要在每个工作单元上运行的功能。然后,您准备好列表中的每个
工作单元 (在您的情况下,这将是URL列表),并将其提供给工作池。
您的输出将是原始数组中每个工作项的worker函数返回值的列表。所有出色的多处理优势都将在后台发生。当然,还有其他使用工作池的方法,但这是我最喜欢的一种。
祝您多加工!
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)