不懂html也来学网抓（xmlhttp/winhttp+fiddler）

lolmuta · 发表于 2015-3-16 10:45

本帖最后由 lolmuta 于 2015-3-16 11:04 编辑

浮华、缠绕指尖发表于 2015-3-15 13:37
VBA里自然不是那么容易实现，如换成C#之前的，直接开一个线程就完事了。

发现一个有趣的事情，
用xml winhttp提交了许多"POST"与 "GET"后
里面有一个查询网页最慢的一步刚好是"GET"

而GET 那一步，我就用ie法来开，想不到竟然成功开启了。

照这样子的话，我不但可以开启看目前的状况(也许就从某一个"GET"方法下手?)
也可以开启很多个IE来达成多线任务…(创建多个SHDocVw.InternetExplorer,然后去.Navigate)

更神奇的是

之前不是说我用IE法来开启最慢的"get"之后，后面再接上Xml winhttp仍然可以运作!!!
也就是说xml winhttp里面的get ，也许可以用IE来替换

我想这只是运气好吧…

dadad · 发表于 2015-3-16 10:48

站位学习，多谢分享

浮华、缠绕指尖 · 发表于 2015-3-16 13:37

lolmuta 发表于 2015-3-16 10:45
发现一个有趣的事情，
用xml winhttp提交了许多"POST"与 "GET"后
里面有一个查询网页最慢的一步刚好是" ...

共享cookie而已。

VBA万岁 · 发表于 2015-3-17 09:34

wcymiss 发表于 2014-10-27 15:49
编写JavaScript代码处理JSON（一）

个人为了练习分析JavaScript、JSON的能力，常编写JavaScript处理JSON ...

再回首，似有所悟......

VBA万岁 · 发表于 2015-3-17 16:58

renahu 发表于 2014-12-1 16:24
但 post 有个 XML参数，太长了，还是老师这个简单，看着舒服

我的58同城的终于可以登录了，发个附件（ ...

多谢分享！
赶集网测试成功，但58同城出错，如下：

VBA万岁 · 发表于 2015-3-17 17:07

wcymiss 发表于 2014-12-3 09:27
我上传我的163邮箱登录的session包和赶集网登录的代码，你自己对照吧。

一定要在纯净的环境下抓包。

Mark，有空测试。

VBA万岁 · 发表于 2015-3-18 11:00

a4569874 发表于 2014-12-10 18:18
winhttp也有缓存,取出的Cookie值缺省了"JSESSIONID=" ,实际上把缓存的Cookie值与取出的Cookie值作为了模拟 ...

奇怪，我测试636楼的代码（包括之前的类似代码）会出现以下错误，不知为何？

VBA万岁 · 发表于 2015-3-21 16:52

wcymiss 发表于 2014-10-23 09:53
之前提过，QQ软件也可以用Fiddler抓包。
我们来抓抓群成员的清单。
1、打开fiddler，打开群聊天窗口，“群 ...

又学习了用WinHttp发送Cookie的实例。

hwwyb · 发表于 2015-3-26 10:44

学习了，非常感谢！
下在fiddler，想找到 http://data.eastmoney.com/bbsj/201412/yysj/sc/asc.html 的抓取方法，ONLYCXB提供的代码中的 "http://datainterface.eastmoney.com/EM_DataCenter/JS.aspx?type=SR&sty=YYSJ&st=2&sr=1&p=1&ps=1&js=(pc),(x)&stat=0&fd=2014-12-31&rt=47574980"，我按照您提供的方法在fiddler中，没有找到，应该是某些步骤还有一些问题，能否指点，以后就能自力更生解决问题，非常感谢！

hwwyb · 发表于 2015-3-26 12:53

谢谢，非常感谢，学习了

		自动登录	找回密码
密码			免费注册

[原创] 不懂html也来学网抓（xmlhttp/winhttp+fiddler）

点评

点评

点评