您的s3_client不可序列化。
代替flatMap使用mapPartitions，并在lambda主体内部初始化s3_client以避免开销。那将：
- 在每个工作程序上初始化s3_client
- 减少初始化开销
欢迎分享，转载请注明来源：内存溢出
赞
(0)
打赏
微信扫一扫
支付宝扫一扫
微信扫一扫
支付宝扫一扫
isinstance（）和issubclass（）返回冲突的结果
上一篇
2022-12-16
Mac上的Odoo安装无法执行命令LESSC
下一篇
2022-12-16
评论列表（0条）