ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: wcymiss

[原创] 不懂html也来学网抓(xmlhttp/winhttp+fiddler)

    [复制链接]

TA的精华主题

TA的得分主题

发表于 2016-12-26 14:55 | 显示全部楼层
本帖已被收录到知识树中,索引项:网页交互
回复刷积分 好给楼主发私信

TA的精华主题

TA的得分主题

发表于 2016-12-30 21:05 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
好东西,留待有时间学习

TA的精华主题

TA的得分主题

发表于 2016-12-31 11:02 | 显示全部楼层
wcymiss 发表于 2015-2-11 09:35
代码识别验证码并登录:
参见蓝天大师的帖子

你好,请问下吴老师 ,这个里面如果要手工输入验证码去登录的话,要怎么做呢 麻烦了。
  1. <div id="yzm" class="yzm">
  2.             <img id="code_img" src="http://newht.hao987.cn/admin.php?m=admin&c=checkcode&a=checkcode" onclick="this.src=this.src+'&'+Math.random();" /><br />
  3.             <a href="javascript:document.getElementById('code_img').src='http://newht.hao987.cn/admin.php?m=admin&c=checkcode&a=checkcode&'+Math.random();void(0);">单击更换验证码</a>
  4.     </div>
复制代码

TA的精华主题

TA的得分主题

发表于 2016-12-31 20:05 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-1-2 12:50 | 显示全部楼层
这个是不是和python一样爬数据

TA的精华主题

TA的得分主题

发表于 2017-1-2 21:13 | 显示全部楼层
wcymiss 发表于 2014-10-22 16:45
获取数据-防盗链的处理-动态参数

相同方式操作网页,抓包能得到相同的参数值,这样的参数是静态的。反之 ...

吴老师,现在这个航班查询网站,已经改成了验证码登录,这样还有办法能抓到包吗?
谢谢^_^

TA的精华主题

TA的得分主题

发表于 2017-1-16 16:08 | 显示全部楼层
wcymiss 发表于 2014-10-25 10:43
处理table
table数据处理,除了之前的两种通用方法外,还有以下几种方法:

http://hr8c.net/page/YLFXssc.shtml?id=15&num=100三种方法怎么都抓不下来发?

TA的精华主题

TA的得分主题

发表于 2017-1-16 22:23 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-1-29 20:59 | 显示全部楼层
onlycxb 发表于 2014-10-25 10:19
前期绑定就是先引用相关库。比如MSXML2.XMLHTTP
前期绑定方式步骤:在VBE编辑器中,选择工具栏  >工具> ...

onlycxb,困扰好久了,下面这个网页数据怎么抓啊,能不能给解读下,
http://hr8c.net/page/YLFXssc.shtml?id=15&num=100

楼上的代码测试了一遍也不行啊
Sub test()
Dim html
Dim objhq As Object
Set objhq = CreateObject("MSXML2.XMLHTTP")  


Dim STxt As String, Url As String, i As Integer, j As Integer
Dim Pages As Integer, Pstr As String, arr, brr, rng As Range
Cells.Clear
With objhq
    .Open "POST", "http://www.pinble.com/Template/WebService1.asmx/Present3DList", False
    .SetRequestHeader "Content-Type", "application/json; charset=UTF-8"
    .SetRequestHeader "Referer", "http://www.pinble.com/Lottery.htm"
    .send "{pageindex:'1',lottory:'TC7XCData_jiangS',pl3:'',name:'江苏七星彩',isgp: '0'}"
    STxt = .ResponseText
End With
STxt = UTF8toChineseCharacters129(STxt)                                                           'J3编码
Pages = Split(Split(Split(STxt, "分页")(1), "页")(0), "/")(1)

TA的精华主题

TA的得分主题

发表于 2017-1-29 21:41 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
a4569874 发表于 2014-10-26 12:26
麻烦说下这个如何实现VBA批量下载并保存网页,网页的地址以提取到在excel B列中
每次下载都 ...

不错的想法,期待开贴
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-11-15 18:29 , Processed in 0.042033 second(s), 5 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表