网页源代码与页面内容不一致,如何抓取正确的申请和浏览人数?

网页源代码与页面内容不一致,如何抓取正确的申请和浏览人数?

网页源代码与页面内容不一致,如何抓取申请和浏览人数

在爬取网页时,发现网页源代码显示的数据与页面中的实际内容以及 F12 中的元素内容不一致。这种情况下,应该如何获取正确的申请和浏览人数呢?

针对该问题,一种解决办法是查找页面中实时更新数据的来源。通常情况下,网页会向外部服务器发出请求以获取动态数据,这些请求往往包含着目标数据。

在给出的案例中,可以尝试请求以下地址:

https://statisticszp.58.com/position/totalcount/?infoId=27988...

其中,infoId 需要替换为页面中相应数据的标识符。例如,上述页面中申请人数的标识符可以在 F12 中的元素内容中找到。

发送该请求会返回 JSON 数据,包含如下信息:

{
  deliveryCount: 1141,
  commentCount: 0,
  infoCount: 4,
  resumeReadPercent: 0,
  referUrl: "",
  nextUrl: "null"
}

通过解析该 JSON 数据,就可以获取到申请人数和其他相关信息,从而解决网页源代码与页面内容不一致的问题。

以上就是网页源代码与页面内容不一致,如何抓取正确的申请和浏览人数?的详细内容,更多请关注其它相关文章!