ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: wcymiss

[原创] 不懂html也来学网抓(xmlhttp/winhttp+fiddler)

    [复制链接]

TA的精华主题

TA的得分主题

发表于 2016-10-3 20:29 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖已被收录到知识树中,索引项:网页交互
wcymiss 发表于 2014-10-23 09:53
之前提过,QQ软件也可以用Fiddler抓包。
我们来抓抓群成员的清单。
1、打开fiddler,打开群聊天窗口,“ ...

用昵称抓不到包  是新版QQ改了吗

TA的精华主题

TA的得分主题

发表于 2016-10-3 23:06 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
hehex 发表于 2014-10-28 10:21
一直跟吴姐学的网抓,感觉作业例子好像是取自吴姐一套视频的课程里的内容,俺跟随学过了。
很支持吴姐,留 ...

求个视频课程地址

TA的精华主题

TA的得分主题

发表于 2016-10-5 10:56 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2016-10-5 17:38 | 显示全部楼层
wcymiss 发表于 2014-10-21 12:47
Fiddler抓包并确认数据页面一例:

网站:http://www.cffex.com.cn/fzjy/tjsj/pztj/

如果要抓取的网站要输入账号密码呢,可不可以预先置入到fiddler,不然每次都要输入

TA的精华主题

TA的得分主题

发表于 2016-10-5 17:39 | 显示全部楼层
wcymiss 发表于 2014-10-21 12:47
Fiddler抓包并确认数据页面一例:

网站:http://www.cffex.com.cn/fzjy/tjsj/pztj/

如果要抓取的网站要输入账号密码呢,可不可以预先置入到fiddler,不然每次都要输入

TA的精华主题

TA的得分主题

发表于 2016-10-28 16:14 | 显示全部楼层
请教老师,我在抓取http://www.landchina.com/default.aspx?tabid=263&wmguid=75c72564-ffd9-426a-954b-8ac2df0903b7&p=9f2c3acd-0256-4da2-a659-6949c4671a2a%3a2016-10-1%7e2016-10-28%7c42ad98ae-c46a-40aa-aacc-c0884036eeaf%3a5101%u2593%7e%u6210%u90fd%u5e02 这个网页信息时,发现翻页的页码参数在 viewstate 中,url本身没有翻页参数,我用POST方式抓取时应该怎么把viewstate内容request上去呢?

最下方pagerdata有变化

最下方pagerdata有变化

土地市场网抓取.zip

21.79 KB, 下载次数: 3

TA的精华主题

TA的得分主题

发表于 2016-10-28 23:21 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
demon7120 发表于 2016-10-28 16:14
请教老师,我在抓取http://www.landchina.com/default.aspx?tabid=263&wmguid=75c72564-ffd9-426a-954b-8ac ...

学习了http://club.excelhome.net/thread-1197569-2-1.htmlhttp://club.excelhome.net/thread-894527-1-1.html 两个帖子,似乎有些明白了,我先自己试试,明天成功了把程序发上来当完成作业:)

TA的精华主题

TA的得分主题

发表于 2016-11-3 17:40 | 显示全部楼层
wcymiss 发表于 2014-10-22 16:56
再上一个动态参数的例子:

网站:http://www.abchina.com/cn/Public ... t20101217_45743.htm

第二次的Post可以不写

TA的精华主题

TA的得分主题

发表于 2016-11-5 22:03 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2016-11-6 21:15 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
好帖,再学习,谢谢!
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-10-7 00:27 , Processed in 0.036646 second(s), 7 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表