网页源代码与页面内容不一致,如何抓取正确的申请和浏览人数?
网页源代码与页面内容不一致,如何抓取申请和浏览人数
在爬取网页时,发现网页源代码显示的数据与页面中的实际内容以及 F12 中的元素内容不一致。这种情况下,应该如何获取正确的申请和浏览人数呢?
针对该问题,一种解决办法是查找页面中实时更新数据的来源。通常情况下,网页会向外部服务器发出请求以获取动态数据,这些请求往往包含着目标数据。
在给出的案例中,可以尝试请求以下地址:
https://statisticszp.58.com/position/totalcount/?infoId=27988...
其中,infoId 需要替换为页面中相应数据的标识符。例如,上述页面中申请人数的标识符可以在 F12 中的元素内容中找到。
发送该请求会返回 JSON 数据,包含如下信息:
{ deliveryCount: 1141, commentCount: 0, infoCount: 4, resumeReadPercent: 0, referUrl: "", nextUrl: "null" }
通过解析该 JSON 数据,就可以获取到申请人数和其他相关信息,从而解决网页源代码与页面内容不一致的问题。
以上就是网页源代码与页面内容不一致,如何抓取正确的申请和浏览人数?的详细内容,更多请关注其它相关文章!