CTAS把需要更新的数据建临时表,然后对临时表记录加不同的标志位,分若干小程序批量处理,比如8000万,可以每个标志位400万,分20个小程序批量处理达到分而治之的效果,注意更新完数据后,记得对临时表的标志位也更新,这样在发生异常的时候,能保证在处理完异常数据后,程序能在异常点继续...
显示全部CTAS把需要更新的数据建临时表,然后对临时表记录加不同的标志位,分若干小程序批量处理,比如8000万,可以每个标志位400万,分20个小程序批量处理
达到分而治之的效果,注意更新完数据后,记得对临时表的标志位也更新,这样在发生异常的时候,能保证在处理完异常数据后,程序能在异常点继续运行。
(注意临时表要建立相关索引)
收起