ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
楼主: tbjx138

[求助] 求大神帮忙写个网抓的代码

[复制链接]

TA的精华主题

TA的得分主题

发表于 2014-11-9 17:00 | 显示全部楼层
renahu 发表于 2014-11-9 13:31
老师,我把附件放到我的作品展示帖子里了:http://club.excelhome.net/thread-1162676-6-1.html,您有空看 ...

书苑常用分类
文学传记
经济管理
人文社科
艺术
成功励志
生活健康
语言文字
法律
政治军事
历史地理
自然科学
工业技术
农业科技
医学卫生
中小学教辅
------------------------
CYFL 就是常用分类的拼音字母
-----------------------------

全部分类------CYFL2011$$
文学传记大类 CYFL2011$$001
小说 -- -是小类CYFL2011$$001001  //其他的以此类推~~
人物传记
诗歌
散文
戏剧
报告文学
民间文学
儿童文学
文学理论
个人作品集
外国文学

------------------
分析网页要仔细~~



TA的精华主题

TA的得分主题

发表于 2014-11-9 18:07 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
关注中......

TA的精华主题

TA的得分主题

发表于 2014-11-9 18:45 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
本帖最后由 renahu 于 2014-11-9 18:47 编辑
blanksoul12 发表于 2014-11-7 16:28
http://club.excelhome.net/thread-1159783-1-1.html


不知道有没有高手能解决验证码的问题

TA的精华主题

TA的得分主题

发表于 2014-11-9 22:16 | 显示全部楼层
关注。。。。。。
先登陆抓到cookie好说,但不手工登陆咋办?抓包时发现post账号、密码、验证码的时候就有cookie了,有了这个cookie啥都有了,关键这个cookie咋来的。。。

TA的精华主题

TA的得分主题

 楼主| 发表于 2014-11-10 00:00 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
renahu 发表于 2014-11-9 13:27
看来我这个学员要亲自出手啦,不过登陆我不会弄,需要先登陆再抓目录
我把附件放到我的作品展示帖子里了 ...

万分感谢renahu大神的帮忙!!今天忙些事情,才上线,就看到你的回复,还有各位大神的回复,我已经测试了代码,完全符合我的要求,太棒了!!再次感谢各位的帮忙!!

TA的精华主题

TA的得分主题

发表于 2014-11-10 08:27 | 显示全部楼层
战战如疯 发表于 2014-11-9 22:16
关注。。。。。。
先登陆抓到cookie好说,但不手工登陆咋办?抓包时发现post账号、密码、验证码的时候就有 ...

本以为有了验证码,可能很难抓到,没想到手工登陆后,数据就轻易到手了。如果不手工登陆怎么做?

TA的精华主题

TA的得分主题

 楼主| 发表于 2014-11-10 09:02 | 显示全部楼层
本帖最后由 tbjx138 于 2014-11-10 09:54 编辑
renahu 发表于 2014-11-10 08:27
本以为有了验证码,可能很难抓到,没想到手工登陆后,数据就轻易到手了。如果不手工登陆怎么做?

您好,renahu大神,这个密码我不会改的,您放心使用,还有,您的代码里的a65536,这个是不是excle数量到这个数值就停止了,我用的是2007版本的,最大值是104w,我抓取的数量很大,这个对我的操作有影响吗?

TA的精华主题

TA的得分主题

 楼主| 发表于 2014-11-10 09:24 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖最后由 tbjx138 于 2014-11-10 09:25 编辑

QQ截图20141110092054.jpg
renahu大神,我页数设置为10000,提取4000多条就报错了,不知道什么原因?
QQ截图20141110092432.jpg

TA的精华主题

TA的得分主题

发表于 2014-11-10 10:02 | 显示全部楼层
renahu 发表于 2014-11-9 13:31
老师,我把附件放到我的作品展示帖子里了:http://club.excelhome.net/thread-1162676-6-1.html,您有空看 ...

谢谢老师,是不是有密码,验证码的,一般先手工登陆,再去抓,就比较容易。那些非手工登陆直接就抓,其实也就省了登陆这一步 。省不了多少事,但难度却增加不少,是这么个意思吧?

TA的精华主题

TA的得分主题

发表于 2014-11-10 10:08 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
tbjx138 发表于 2014-11-10 09:02
您好,renahu大神,这个密码我不会改的,您放心使用,还有,您的代码里的a65536,这个是不是excle数量到这 ...

我是2010版的,其实你一次没必要抓很多,那样会很慢的,你应该按页数范围,一批一批抓,代码里不是有个页码范围吗,For p = 1 To 21 ,我这里随便写了个1页到21页,比如你可以改成For p = 100 To 210 ,就查出100页到210页的内容了。
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-11-16 07:53 , Processed in 0.049641 second(s), 9 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表