-
MySQL单表千万级数据处理的思路分享
目录项目背景改进思路观察数据特征多进程处理思路总结数据处理技巧项目背景在处理过程中，今天上午需要更新A字段，下午爬虫组完成了规格书或图片的爬取又需要更新图片和规格书字段，由于单表千万级深度翻页会导致处理速度越来越慢。select a,b,
目录项目背景改进思路观察数据特征多进程处理思路总结数据处理技巧项目背景在处理过程中，今天上午需要更新A字段，下午爬虫组完成了规格书或图片的爬取又需要更新图片和规格书字段，由于单表千万级深度翻页会导致处理速度越来越慢。select a,b,
