网络爬虫

pb_yxx · 发表于 2023-6-15 17:50

fiddler抓包获取的结果与VBA关闭重定向后网抓RESPONSETEXT获取数据不一致，如何解决？

tspliu · 发表于 2023-6-15 17:53

实在太高深

perfect131 · 发表于 2023-6-15 17:58

不猜迷，发链接

pb_yxx · 发表于 2023-6-15 22:23

按照 fiddler获取的网址参数，用POST发送网址及参数，无法正常得到文本，把WINHTTP.5.1对象的OPTION（6）改成false后，可以获取文本（只是一些网址），但与FIDDLER反馈要的查询结果数据不一样。

smiletwo · 发表于 2023-6-15 23:21

那就不关闭重定向试试

onlycxb · 发表于 2023-6-15 23:50

pb_yxx 发表于 2023-6-15 22:23
按照 fiddler获取的网址参数，用POST发送网址及参数，无法正常得到文本，把WINHTTP.5.1对象的OPTION（6）改 ...

要注意的是，可能cookies 每次均会发生变化。当然这可能是导致不能正常取得数据的原因之一。

pb_yxx · 发表于 2023-6-16 18:47

smiletwo 发表于 2023-6-15 23:21
那就不关闭重定向试试

不关闭就出错，无法获得文本RESPONESTEXT

pb_yxx · 发表于 2023-6-16 18:53

关闭后，反馈文件头是302。不知道是不是因为用了WINHTTP 的原因，导致不能自动获取重定向的数据，FIDDLER抓取的发送REQUEST文件头上是要求XMLHTTP

pb_yxx · 发表于 2023-6-17 19:09

自己搞定了

		自动登录	找回密码
密码			免费注册

[求助] 网络爬虫