php – 需要每2分钟ping 1000个网址
发布时间:2020-12-13 18:27:03 所属栏目:PHP教程 来源:网络整理
导读:我有1000个源URL位于 MySQL数据库表中.我需要每隔2分钟向所有这些网址发送一个http请求.我写了一个 PHP脚本来做到这一点,但脚本需要5分30秒才能运行. 我希望能够在一分钟内完成所有1000个请求.有没有办法运行多个异步进程来更快地完成工作?任何帮助表示赞赏
我有1000个源URL位于
MySQL数据库表中.我需要每隔2分钟向所有这些网址发送一个http请求.我写了一个
PHP脚本来做到这一点,但脚本需要5分30秒才能运行.
我希望能够在一分钟内完成所有1000个请求.有没有办法运行多个异步进程来更快地完成工作?任何帮助表示赞赏.提前致谢.
由于您的问题是关于发送http请求,而不是真正的ping,您可以使用
Grequests (
Requests
gevent)轻松快速地完成(根据我的经验,几百个网址请求):
import grequests urls = [ 'http://www.python.org','http://python-requests.org','http://www.google.com',] rs = (grequests.get(u) for u in urls) grequests.map(rs) # [<Response [200]>,<Response [200]>,<Response [200]>] 您的Php脚本需要5分钟才能运行,因为它是同步代码,这意味着对于您发送的每个请求,您必须等待响应到达才能发送下一个请求. 这里的诀窍是不要等待(或阻止尽可能多的人调用)响应,而是直接进行下一个请求,你可以使用gevent(基于coroutine)或nodejs轻松实现.你可以在here上阅读更多内容. (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |