不懂html也来学网抓（xmlhttp/winhttp+fiddler）

renahu

wcymiss 发表于 2014-11-12 18:09
是的，很有可能是在点击“确定”后才POST数据。你应该把从登录邮箱到发送邮件成功这样整个过程一起抓包。 ...

老师，我用字典和combobox做了一个按类网抓图书的东东，您有空看看
http://club.excelhome.net/thread-1162676-9-1.html    82楼

onthetrip

wcymiss 发表于 2014-11-12 18:09
是的，很有可能是在点击“确定”后才POST数据。你应该把从登录邮箱到发送邮件成功这样整个过程一起抓包。 ...

是在浏览器中发邮件。
的确是在点击确定后可以抓到了。
万里长征开始第一步，有问题再请教您哈，谢谢

renahu

wcymiss 发表于 2014-10-28 11:50
初识登录

登录其实没那么神秘。它也就是向服务器发送的一个POST请求。

奇怪，老师，登陆163，我怎么用fiddler找不到老师截图中的 session？

怎么也找不到 POST https://mail.163.com/entry/cgi/n ... ce=63_31_31_gz&uid=" & username & "@163.com

也就找不到下面红框中的： username=vbatest&password=12341234&password=
我干脆直接搜索“LOGIN SUCCESS”  还是没有

renahu

wcymiss 发表于 2014-10-28 11:50
初识登录

登录其实没那么神秘。它也就是向服务器发送的一个POST请求。

学登陆真不顺啊，呵呵，是不是网易发现老师鄙视他，把邮箱改版了？
早上试了试：不知怎么了？

renahu

renahu 发表于 2014-11-13 08:02
学登陆真不顺啊，呵呵，是不是网易发现老师鄙视他，把邮箱改版了？
早上试了试：不知怎么了？

把fiddler给关了，可以运行了
为什么执行这段代码后，不是提示“LOGIN SUCCESS”了吗？为什么刷新网易主页，上面依然显示“登陆”，并没显示已经登陆上啊？还是没明白网抓的“登陆”意思，按我理解就是一执行代码就自动登陆了？

renahu

renahu 发表于 2014-11-13 08:48
把fiddler给关了，可以运行了
为什么执行这段代码后，不是提示“LOGIN SUCCESS”了吗？为什么刷新网易主 ...

立即窗口里面显示登陆成功了，可是打开网易主页，最上面那行还提示你登陆，如果登陆成功后应该显示邮箱地址的。还有就是您写的第一段登陆代码，我fiddler始终也抓不到，黄色session一大堆，但没有一个是您发的截图中的，搜“LOGIN SUCCESS”也没有，不过执行您写的那段代码，立即窗口还是提示成功的

renahu

wcymiss 发表于 2014-10-28 11:50
初识登录

登录其实没那么神秘。它也就是向服务器发送的一个POST请求。

首先我请历史记录，打开fiddler，然后按初识登录的讲解用老师的邮箱vbatest登陆：

这时网易主页显示：表示登陆成功

，然后在fiddler中搜索 vbatest，但是没有课程中的老师找到的 session

老师找到的session 的地址 ：

但我始终找不到，我还试着搜索下面红框中的内容，也没有，搜索 LOGIN SUCCEED 同样没有，
也就是说老师课程中提到的那个 session，我这里找不到

然后我用执行老师课程中的登陆代码：

1. Sub Main()
   
2.     Const username As String = "vbatest"
   
3.     Const password As String = "12341234"
   
4.     Dim strText As String
   
5.     Dim uid As String
   
6.     uid = username & "@163.com"
   
7.     With CreateObject("MSXML2.XMLHTTP")
   
8.         .Open "POST", "https://mail.163.com/entry/cgi/ntesdoor?df=mail163_letter&funcid=loginone&iframe=1&passtype=1&product=mail163&race=63_31_31_gz&uid=" & username & "@163.com", False
   
9.         .setRequestHeader "Content-Type", "application/x-www-form-urlencoded"
   
10.         .Send "savelogin=0&url2=http%3A%2F%2Fmail.163.com%2Ferrorpage%2Ferror163.htm&username=" & username & "&password=" & password & "&password="
    
11.         strText = .getallresponseheaders
    
12.         Debug.Print strText
    
13.         strText = .responsetext
    
14.         Debug.Print strText
    
15.     End With
    
16. End Sub

复制代码

我先关了fiddler（必须关上，否则出错：

然后退出邮箱：
这时网易主页显示的是：表示已经退出登陆

这时我执行代码，但这次立即窗口没有显示 LOGIN SUCCEED

不知道什么意思，登陆没成功
后来我用自己的邮箱名字和密码替换vbatest再执行代码，这回成功：

但，我发现成功了，主页还是显示让你登陆，不知道怎么回事：

难道用代码进行登陆，在主页上体现不出来吗？不会吧，老师您有空再试一试登陆网易
看还能不能找到那个session

wcymiss

renahu 发表于 2014-11-13 11:06
首先我请历史记录，打开fiddler，然后按初识登录的讲解用老师的邮箱vbatest登陆：

这时网易主页显示： ...

先说抓包问题。
你抓到的这张图里，左上部分显示session是从第78条开始，你有没有移动它边上的滚动条，再往上翻看呢？
fiddler里的session是可以save的。你要是实在找不到，把session save了在帖子里作为附件发上来，我来找。

再说“LOGIN SUCCEED”：
这个只能在首次登录的时候显示。如果在登录状态下再次登陆，就会显示“LOGIN REUSE”，你只要查下REUSE这个单词的英文意思就能明白了。（还是没有养成百度的习惯啊，呵呵。。。）

还有代码登录后浏览器里仍然显示未登录：
我之前给你的帖子点评了，浏览器未必能使用xmlhttp的cookie。
代码里用xmlhttp后，登录的cookie保存在xmlhttp对象里，在此excel不关闭的情况下，用xmlhttp可继续进行对此网站的查询、发送操作。
但浏览器并未获取到xmlhttp中的cookie，所以，你打开浏览器，网站仍然显示的是未登录状态。

PS：
有时候浏览器可获取xmlhttp里的cookie的。为什么有时候可以有时候不行，这个问题我也很疑惑。

哦，还有fiddler开启的话程序会出错的问题：
这个问题我这里没有出现。这可能和你的fiddler版本、设置或系统环境有关。

renahu

wcymiss 发表于 2014-11-13 11:46
先说抓包问题。
你抓到的这张图里，左上部分显示session是从第78条开始，你有没有移动它边上的滚动条， ...

吴老师，您好
一、第78条上面没有带黄色的了
二、关于显示“LOGIN REUSE”，好像执行代码登陆与网页登陆是两条线，相互不影响是吗？也就是说网页上虽然退出登陆了，但是用代码登陆的还没退出，再次执行代码就会出现“LOGIN REUSE”？后来我发现只要退出excel，再执行代码，就会出现“LOGIN_SUCCESS”

刚发现不是 “LOGIN SUCCEED” 是“LOGIN_SUCCESS”  我在下面这个session附件中搜了一下，第45文件中有
“LOGIN_SUCCESS”，但它看着不像要找的，您帮我看看吧 login.rar (1.17 MB, 下载次数: 6)

2014-11-13 12:41 上传

点击文件名下载附件

我搜代码中地址前面一段：https://mail.163.com/entry/cgi/  也没有

renahu

我在搜房网，登陆后用fiddler搜我的用户名，只有三个GET的，怎么没有POST的？登陆方法不对，还是fiddler有问题？