如何在Golang中为http.Get()请求设置超时?
发布时间:2020-12-16 18:10:32 所属栏目:大数据 来源:网络整理
导读:我在Go中创建一个网址抓取器,并有一个要抓取的网址列表。我向每个URL发送http.Get()请求并获取他们的响应。 resp,fetch_err := http.Get(url) 如何为每个Get请求设置自定义超时? (默认时间很长,这使我的抓取器真的很慢。)我想我的抓取器有一个大约40-45秒
我在Go中创建一个网址抓取器,并有一个要抓取的网址列表。我向每个URL发送http.Get()请求并获取他们的响应。
resp,fetch_err := http.Get(url) 如何为每个Get请求设置自定义超时? (默认时间很长,这使我的抓取器真的很慢。)我想我的抓取器有一个大约40-45秒的超时,之后它应该返回“请求超时”,并移动到下一个URL。 我该如何实现呢?
显然在Go 1.3
http.Client有超时字段
timeout := time.Duration(5 * time.Second) client := http.Client{ Timeout: timeout,} client.Get(url) 这是为我做的伎俩。 (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |