加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 大数据 > 正文

如何在Golang中为http.Get()请求设置超时?

发布时间:2020-12-16 18:10:32 所属栏目:大数据 来源:网络整理
导读:我在Go中创建一个网址抓取器,并有一个要抓取的网址列表。我向每个URL发送http.Get()请求并获取他们的响应。 resp,fetch_err := http.Get(url) 如何为每个Get请求设置自定义超时? (默认时间很长,这使我的抓取器真的很慢。)我想我的抓取器有一个大约40-45秒
我在Go中创建一个网址抓取器,并有一个要抓取的网址列表。我向每个URL发送http.Get()请求并获取他们的响应。
resp,fetch_err := http.Get(url)

如何为每个Get请求设置自定义超时? (默认时间很长,这使我的抓取器真的很慢。)我想我的抓取器有一个大约40-45秒的超时,之后它应该返回“请求超时”,并移动到下一个URL。

我该如何实现呢?

显然在Go 1.3 http.Client有超时字段
timeout := time.Duration(5 * time.Second)
client := http.Client{
    Timeout: timeout,}
client.Get(url)

这是为我做的伎俩。

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读