加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 百科 > 正文

分析Ajax请求并抓取今日头条街拍美图

发布时间:2020-12-16 02:51:02 所属栏目:百科 来源:网络整理
导读:分析Ajax请求并抓取今日头条街拍美图 分析网页 以上作为data参数,offset不是页码,页面下滑,新的内容刷新,offset值变大。 找到请求地址: ? 请求网址高亮部分为固定内容,后半在data中。 ? 如果请求中不加cookie会遇到下列问题: 取出来的数据不完整。 所

分析Ajax请求并抓取今日头条街拍美图

分析网页

以上作为data参数,offset不是页码,页面下滑,新的内容刷新,offset值变大。

找到请求地址:

?

请求网址高亮部分为固定内容,后半在data中。

?

如果请求中不加cookie会遇到下列问题:

取出来的数据不完整。

所以要找到Cookie,将其放入请求头中。

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读