(网页采集)如何在网上批量查询信息并提取到Excel（网页有图片验证码）

shenghua8 · 发表于 2013-1-30 17:33

本帖最后由 shenghua8 于 2013-3-7 14:52 编辑

　　由于工作需要，每年需要在同一个网页里查询大量信息，一个一个的查询太麻烦，所以求助各位高手，帮我制作一个批量查询的程序。

　　网页有图片校验码，且每次刷新网页后校验码自动变更。

　　此帖提供的附件中，个人信息都作了处理，都是虚假信息，避免泄露个人隐私。

　　附件如下：

批量查询信息.zip (5.17 KB, 下载次数: 247)

shenghua8 · 发表于 2013-1-30 18:05

请各位帮帮忙，看到了也帮忙回复一下，别让它沉下去了哦。{:soso_e183:}

希望总有一天，会有人踏着五彩云霞来指导我。{:soso_e163:}

kangatang · 发表于 2013-1-30 18:09

本帖最后由 kangatang 于 2013-1-30 19:15 编辑

登陆可以参考这个
http://club.excelhome.net/forum. ... =977635&pid=6690727
但你的情况是要自动精确识别验证码，才有批量查询的意义。

liucqa · 发表于 2013-1-30 21:58

这个图片用ocr识别估计可以

shenghua8 · 发表于 2013-1-31 14:45

kangatang 发表于 2013-1-30 18:09
登陆可以参考这个
http://club.excelhome.net/forum. ... =977635&pid=6690727
但你的情况是要自动精确识 ...

谢谢kangatang 老师！
在众多求助网页批量提取的帖子里，到处都能看到您的回复，解决了很多问题。
您是第一个踏着五彩云霞来帮我的，可我只猜中了开头，没有猜中结果，看来搞定验证码是相当难的。

kangatang · 发表于 2013-1-31 15:07

shenghua8 发表于 2013-1-31 14:45
谢谢kangatang 老师！
在众多求助网页批量提取的帖子里，到处都能看到您的回复，解决了很多问题。
您是 ...

哈哈，你太幽默了。。。。可惜结局对我们都不好。
上班的时候能看到这种笑料，，，还是蛮开心的。

shenghua8 · 发表于 2013-1-31 15:08

liucqa 发表于 2013-1-30 21:58
这个图片用ocr识别估计可以

liucqa 老师：
发这个帖子之前，我希望自己能很仔细的阅读您原创的大作：
“网页采集(网页抓取)教程第一课-用XMLHTTP获取数据并用Adodb.Stream转换编码提取信息”
http://club.excelhome.net/thread-893760-1-1.html

您已经注释得相当仔细了，可是，我对编程一窍不通，凭我现在的能力无法读懂您的教程，连入门都很困难。
您在第一课、第二课的小结中都说了：
“在实际的网页采集中，往往我们会碰到比示例的网站复杂几倍乃至几十倍的网页。一个完整的网页采集程序，需要处理以下问题：
1、如果有必要的话，登录网站。可能需要过验证码（需要获取图片以及做OCR识别）”
您在第四课中还专门指了路：
验证码图片处理欣赏及使用tessdata-OCR进行训练和识别
http://club.excelhome.net/thread-897117-1-1.html

您在另一篇帖子的回复中还说了：
“带验证码的还是用xmlhttp吧,可以和ie共用cookie，这样不用识别验证码”
http://club.excelhome.net/forum.php?mod=redirect&goto=findpost&ptid=892195&pid=6111078

然后在我这篇帖子里说过：
“这个图片用ocr识别估计可以”。

虽然短短的14文字长度，已经让我觉得曙光待现了。

还希望您能帮我设计这个程序。{:soso_e183:}

shenghua8 · 发表于 2013-1-31 15:30

kangatang 发表于 2013-1-31 15:07
哈哈，你太幽默了。。。。可惜结局对我们都不好。
上班的时候能看到这种笑料，，，还是蛮开心的。

祝kangatang 老师天天开心！
快过年了，不能因为我发此帖提出的问题而影响工作，影响心情。
还好我能知道图片文本与字符文本有本质的不同，精确识别验证码那是相当的困难。
只是哪怕有一点点希望，我也期待着……

shenghua8 · 发表于 2013-2-19 15:53

liucqa 发表于 2013-1-30 21:58
这个图片用ocr识别估计可以

liucqa 老师：
能否根据
http://club.excelhome.net/thread-917414-1-1.html
“ [分享] 显示验证码的InputBox”这个帖子，
帮我做一个手工输入验证码的程序？

shenghua8 · 发表于 2013-2-20 11:10

本帖最后由 shenghua8 于 2013-3-7 14:53 编辑

kangatang 发表于 2013-1-30 18:09
登陆可以参考这个
http://club.excelhome.net/forum. ... =977635&pid=6690727
但你的情况是要自动精确识 ...

kangatang 老师：

我已根据
http://club.excelhome.net/thread-917414-1-1.html
这个帖子
能显示验证码了，
可以手工录入验证码，
然后想请您帮我做个在网上批量查询信息的程序。
拜托了！{:soso_e183:}

		自动登录	找回密码
密码			免费注册

[求助] (网页采集)如何在网上批量查询信息并提取到Excel（网页有图片验证码）

点评