php如何处理十几万的读写

发布于 2022-09-12 03:17:37 字数 79 浏览 22 评论 0

有一个结算佣金的场景,目前有十几万用户,需要每天同时给每个用户结算佣金,该怎么做能够非常快速的做完这个处理,yii框架,目前的时间是半个小时左右

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(4

故乡的云 2022-09-19 03:17:37

做成多个任务多个任务,比如说一共有10w条数据,分成10个任务,每个任务1w条数据。结算时10个任务同时进行。理论上是可以将效率提升10倍,至于怎么分配数据。可以根据id取模,或者其他方式分配数据

ヅ她的身影、若隐若现 2022-09-19 03:17:37

像这种结算,比较偏IO密集型的业务,适合在系统闲时处理。
任务的话,是推荐多任务的。
你开启10个脚本。
用户id%10 每个脚本处理属于自己的用户。这样任务之间就不会互相干扰
同时要考虑到:结算的时候,用户与用户之间是否会关联,或者对一些数据公共读写,这个就要考虑到锁的问题,还是数据脏读幻读的情况。

葬﹪忆之殇 2022-09-19 03:17:37

起一个队列慢慢去写。
有时间限制的话,就多起几个进程。
怕影响当前项目的话,就单独部署或者新的项目

眼眸里的快感 2022-09-19 03:17:37

批量 事务提交 能快上数倍
我有个程序,一次执行 大概 insert / update 二十来万记录
业务不算很复杂,不用事务大概要超过 45分钟,用事务分批提交,大概在5分钟内

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文