ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: wcymiss

[原创] 不懂html也来学网抓(xmlhttp/winhttp+fiddler)

    [复制链接]

TA的精华主题

TA的得分主题

发表于 2014-12-29 19:20 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖已被收录到知识树中,索引项:网页交互
wcymiss 发表于 2014-10-22 16:56
再上一个动态参数的例子:

网站:http://www.abchina.com/cn/Public ... t20101217_45743.htm

吴姐,还得在麻烦一下,为什么发送数据,反馈回来的与实际不一致呀。

难道与 ----内网登录时先选择用户组,网页自刷一次,有关吗?

点评

可以参考帖子里说的调试办法来调试你的代码。  发表于 2015-1-6 13:18

TA的精华主题

TA的得分主题

发表于 2014-12-30 09:25 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2015-1-2 15:58 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
本帖最后由 vsvs619 于 2015-1-2 16:04 编辑

谢谢老师分享,能不能贴几个抓取多页数据然后导入excel表格的实例呢。本菜鸟目前只会用最老土的循环,1页1页的刷。。。。

点评

不是每个多页的网站都能一次性获取数据的。其实很多都只能一页一页获取  发表于 2015-1-6 13:17

TA的精华主题

TA的得分主题

发表于 2015-1-2 23:56 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
念一环 发表于 2015-1-2 21:21
Sub 查询()
    Dim mr As Integer, strText As String
    Dim arr(), brr, crr()

非常感谢老师的出手帮忙,不但帮我解决了问题,还从中学到了知识,再次感谢

TA的精华主题

TA的得分主题

发表于 2015-1-3 21:43 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2015-1-5 22:26 | 显示全部楼层
wcymiss 发表于 2014-10-21 21:55
获取数据-防盗链的处理-模拟Cookie:

再次提醒,抓包前请先清除浏览器所有Cookie、缓存、历史数据。

吴姐302跳转 如何处理呀

点评

帖子里不是有么  发表于 2015-1-6 13:16

TA的精华主题

TA的得分主题

发表于 2015-1-6 20:06 | 显示全部楼层
zss427607 发表于 2015-1-5 22:26
吴姐302跳转 如何处理呀

吴姐  一、帖子中时,302跳转是GET,我这边的是POST直接进行302跳转,

      二、为啥GET的信息不完整,只显示下半部分()2/1,

点评

post和get对于重定向网页的处理差不多的,你自己试试就知道了。显示一半是因为立即窗口的问题。这个帖子里有讲的。  发表于 2015-1-7 12:36

TA的精华主题

TA的得分主题

发表于 2015-1-7 00:50 | 显示全部楼层
好帖,再次支持楼主1下,本菜注册11年,累计在线38小时,最近的8小时都在看楼主的帖子,领会了不少东西,谢谢!!!

TA的精华主题

TA的得分主题

发表于 2015-1-7 23:35 | 显示全部楼层
请教http://www.dq123.com/price/ 中价格列表数据怎么抓取,他的post网址是变动的

TA的精华主题

TA的得分主题

 楼主| 发表于 2015-1-8 10:22 | 显示全部楼层
ciwei99 发表于 2015-1-7 23:35
请教http://www.dq123.com/price/ 中价格列表数据怎么抓取,他的post网址是变动的

不难吧。复制POST的参数在fiddler里查找就行。那个innermodel查找要有点耐心。

查找结果如下:

一级ID清单:
http://www.dq123.com/price/cache/factory.js

二级ID清单:(即POST的classid值)
http://www.dq123.com/price/cache/一级ID号.js

本体附件等选项清单:(即POST的innermodel值,各选项间用“≌”连接)
http://www.dq123.com/price/cache/param/classid值.js
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-11-16 11:49 , Processed in 0.045431 second(s), 7 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表