我需要用api从别的地方获取大量数据，然后存数据库，现在有70多万条数据，直接php获取过来服务器就爆了

发布网友发布时间：2022-04-07 09:18

共2个回答

热心网友时间：2022-04-07 10:48

根据需求选合适的方法咯：

比如等数据用到时再获取，数据库相当于缓存，第一次用到时，你的数据库里面必然没有这条数据，这时就用api从别的地方获取，并缓存到数据库中，以后用到时就直接从数据库里获得了

定时定量获取，将性能分散化，比如100ms定时获取一条数据，这样cpu和内存会一直维持在较低水平，几乎不会影响性能。

服务器空闲期间多获取，忙的时间少获取，比如检测到cpu利用率小于50%，这段时间就快速同步，利用率大于90%，就停止同步

上面三条结合使用，再加上多线程，cpu利用率低就将定时器时间设的短一些，线程多一些，利用率高就设的长一些，线程少一些。无论何时，当用到某条数据时，用1的方法同步

热心网友时间：2022-04-07 12:06

有很多的方法吧

可以在linux下用crontab来执行php脚本，可以多进程

也可以直接用php分批次，先放入内存，再批量存放数据库，都是可以的，70多万的量不是太多的追问梵蒂冈梵蒂冈的