ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 Excel Home精品图文教程库
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
300集Office 2010微视频教程 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: wcymiss

[原创] 不懂html也来学网抓(xmlhttp/winhttp+fiddler)

    [复制链接]

TA的精华主题

TA的得分主题

发表于 2017-4-3 13:30 | 显示全部楼层
本帖已被收录到知识树中,索引项:网页交互
wcymiss 发表于 2014-10-29 15:44
复杂登录一:搜房网登录

网站:http://agent.soufun.com/

Dim Http As Object
Sub 搜房网登录()
    Const UserName As String = "vbatest"    '假设的账户
    Const UserPwd As String = "12341234"
    Dim strText As String, 前言 As String, 函数 As String, pwdRtn As String
    Set Http = CreateObject("WinHttp.WinHttpRequest.5.1")
    With Http
        '1、获取3个js文件的代码:RSA.js、BigInt.js、Barrett.js
        前言 = httpRequest(Http, "http://img1.soufun.com/secondhouse/image/magent/js/RSA.js")
        前言 = 前言 & httpRequest(Http, "http://img1.soufun.com/secondhouse/image/magent/js/BigInt.js")
        前言 = 前言 & httpRequest(Http, "http://img1.soufun.com/secondhouse/image/magent/js/Barrett.js")

        '2、截取函数cmdEncrypt的执行语句
        strText = httpRequest(Http, "http://agent.fang.com/")
        函数 = Mid(strText, InStr(strText, "setMaxDigits"))
        函数 = Left(函数, InStr(函数, "var pwdRtn = ") - 1)
        函数 = 函数 & "encryptedString(key, '" & UserPwd & "')"   '不替换了,直接抄来var pwdRtn = 之后的算式

        '3、将前言和函数结合后执行,取出pwdRtn值:
        Set oDom = CreateObject("HtmlFile"): Set oWin = oDom.parentWindow: oWin.execScript
        pwdRtn = oWin.eval(前言 & 函数)

        '4、登录
        .Open "POST", "http://agent.soufun.com/DealCenterLogin.aspx?codev=" & Round(Rnd * 10000), False
        .setRequestHeader "Content-Type", "application/x-www-form-urlencoded"
        .Send "str_username=" & UserName & "&str_userpwd=" & pwdRtn & "&Submit1=%B5%C7++%C2%BC"
        Debug.Print .getallresponseheaders    '有三个Set-Cookie表明登录成功
    End With
End Sub

Function httpRequest(Http, Url)
    With Http
        .Open "Get", Url, False
        .Send
        httpRequest = .ResponseText
    End With
End Function

TA的精华主题

TA的得分主题

发表于 2017-4-4 01:05 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-4-13 08:39 | 显示全部楼层
wcymiss老师,我想请教一下,用(xmlhttp/winhttp+fiddler)的方法,能实现对弹出的网页对话框自动填写吗?

TA的精华主题

TA的得分主题

发表于 2017-4-28 16:12 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-5-2 16:04 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-5-10 16:21 | 显示全部楼层
跪求吴姐指点迷津,
小弟想抓取深交所每日的收盘数据,但深交所网页转跳总是只会会回到第一页(日期也不会随我在网址里更改而改变),无法对第二页之后的数据进行抓取,求前辈指点,感恩。
附上網址:
http://www.szse.cn/main/marketdata/hqcx/zqhq_history/?ACTIONID=7&AJAX=AJAX-TRUE&CATALOGID=1815_stock&REPORT_ACTION=search&txtBeginDate=2017-05-04&txtEndDate=2017-05-04&TABKEY=tab1

TA的精华主题

TA的得分主题

发表于 2017-5-16 11:51 | 显示全部楼层
好帖子,顶!d=====( ̄▽ ̄*)b

TA的精华主题

TA的得分主题

发表于 2017-6-2 15:10 | 显示全部楼层
真的非常非常感谢这篇教程,使我成功的抓取了所需网页的内容,大大节约了工作时间。
非常非常感谢楼主!!

TA的精华主题

TA的得分主题

发表于 2017-6-5 18:37 来自手机 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖最后由 yangyangzhifeng 于 2017-6-11 13:19 编辑
wcymiss 发表于 2014-10-29 16:27
复杂登录二:58同城登录




帮忙看看如何调用腾讯的c_login_2.js中的方法,用callbyname,总是显示对象不支持该属性或方法,谢谢
已自己解决了 请忽略 谢谢。主要是vba自动大写惹的祸

TA的精华主题

TA的得分主题

发表于 2017-6-5 21:12 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
是该好好学习了。
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-3-29 14:41 , Processed in 0.092974 second(s), 5 queries , Gzip On, Redis On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表