ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 Excel Home精品图文教程库
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
300集Office 2010微视频教程 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
查看: 650|回复: 7

求助,网抓数据

[复制链接]

TA的精华主题

TA的得分主题

发表于 2017-1-12 16:35 | 显示全部楼层 |阅读模式
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
如何抓取以下ASP架构的数据,因为太多,最好是可以输入起始页,分批抓取。
http://59.49.34.87:2016/Application/gongs.aspx

TA的精华主题

TA的得分主题

发表于 2017-1-12 17:14 | 显示全部楼层
MARK一下,坐等高手出来。

TA的精华主题

TA的得分主题

发表于 2017-1-12 17:51 | 显示全部楼层
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
本帖最后由 Excel__Boy 于 2017-1-12 19:25 编辑
  1. <div class="blockcode"><blockquote>Sub test()
  2. Dim ie, dmt, tb, x, y, i
  3.     Set ie = CreateObject("InternetExplorer.Application")
  4.     With ie
  5.         .Visible = True '显示它
  6.         .navigate "http://59.49.34.87:2016/Application/gongs.aspx" '加载某个页面
  7.         Do Until .ReadyState = 4 '等待页面加载完毕
  8.             DoEvents
  9.         Loop
  10.         Set dmt = .document
  11.         Debug.Print dmt.body.outerhtml
  12.         'Stop
  13.         For i = 1 To 1241
  14.         
  15.         
  16.         Set dmt = .document
  17.         Set tb = dmt.all.tags("table")(0)
  18.         For x = 0 To tb.Rows.Length - 1
  19.             For y = 0 To tb.Rows(x).Cells.Length - 1
  20.                 Cells(x + 1, y + 1) = tb.Rows(x).Cells(y).innertext
  21.             Next y
  22.         Next x
  23.         dmt.getElementById("GridView1_txtGoPage").Value = i
  24.         dmt.getElementById("GridView1_btnTurn").Click
  25.         Do Until .ReadyState = 4 '等待页面加载完毕
  26.             DoEvents
  27.         Loop
  28.         Stop
  29.         Next i
  30.         
  31.     End With
  32. End Sub

复制代码

TA的精华主题

TA的得分主题

发表于 2017-1-12 19:24 | 显示全部楼层
  1. Sub test()
  2. Dim ie, dmt, tb, x, y, i
  3.     Set ie = CreateObject("InternetExplorer.Application")
  4.     With ie
  5.         .Visible = True '显示它
  6.         .navigate "http://59.49.34.87:2016/Application/gongs.aspx" '加载某个页面
  7.         Do Until .ReadyState = 4 '等待页面加载完毕
  8.             DoEvents
  9.         Loop
  10.         Set dmt = .document
  11.         Debug.Print dmt.body.outerhtml
  12.         'Stop
  13.         For i = 1 To 1241
  14.         
  15.         
  16.         Set dmt = .document
  17.         Set tb = dmt.all.tags("table")(0)
  18.         For x = 0 To tb.Rows.Length - 1
  19.             For y = 0 To tb.Rows(x).Cells.Length - 1
  20.                 Cells(x + 1, y + 1) = tb.Rows(x).Cells(y).innertext
  21.             Next y
  22.         Next x
  23.         dmt.getElementById("GridView1_txtGoPage").Value = i
  24.         dmt.getElementById("GridView1_btnTurn").Click
  25.         Do Until .ReadyState = 4 '等待页面加载完毕
  26.             DoEvents
  27.         Loop
  28.         Stop
  29.         Next i
  30.         
  31.     End With
  32. End Sub

复制代码

TA的精华主题

TA的得分主题

发表于 2017-1-12 20:02 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2017-1-12 20:14 | 显示全部楼层
  1. Sub test()
  2. Dim ie, dmt, tb, x, y, i
  3.     Set ie = CreateObject("InternetExplorer.Application")
  4.     With ie
  5.         .Visible = True '显示它
  6.         .navigate "http://59.49.34.87:2016/Application/gongs.aspx" '加载某个页面
  7.         Do Until .ReadyState = 4 And .busy = False '等待页面加载完毕
  8.             DoEvents
  9.         Loop
  10.         Set dmt = .document
  11.         Debug.Print dmt.body.outerhtml
  12.         'Stop
  13.         For i = 1 To 10
  14.         
  15.         
  16.         Set dmt = .document
  17.         Set tb = dmt.all.tags("table")(0)
  18.         For x = 0 To tb.Rows.Length - 1
  19.             For y = 0 To tb.Rows(x).Cells.Length - 1
  20.                 Cells(x + 1, y + 1) = tb.Rows(x).Cells(y).innertext
  21.             Next y
  22.         Next x
  23.         dmt.getElementById("GridView1_txtGoPage").Value = i + 1
  24.         dmt.getElementById("GridView1_btnTurn").Click
  25.         Do Until .ReadyState = 4 And .busy = False '等待页面加载完毕
  26.             Debug.Print .busy
  27.             DoEvents
  28.         Loop
  29.         'Stop
  30.         Worksheets.Add after:=Worksheets(Worksheets.Count)
  31.         Next i
  32.         
  33.     End With
  34. End Sub

复制代码

TA的精华主题

TA的得分主题

发表于 2017-1-12 20:49 | 显示全部楼层
  1. Sub test()
  2. Dim ie, dmt, tb, x, y, i
  3.     Set ie = CreateObject("InternetExplorer.Application")
  4.     With ie
  5.         .Visible = True '显示它
  6.         .navigate "http://59.49.34.87:2016/Application/gongs.aspx" '加载某个页面
  7.         Do Until .ReadyState = 4 And .busy = False '等待页面加载完毕
  8.             DoEvents
  9.         Loop
  10.         Set dmt = .document
  11.         Debug.Print dmt.body.outerhtml
  12.         'Stop
  13.         For i = 1 To 10
  14.         
  15.         
  16.         Set dmt = .document
  17.         Set tb = dmt.all.tags("table")(0)
  18.         For x = 0 To tb.Rows.Length - 1
  19.             For y = 0 To tb.Rows(x).Cells.Length - 1
  20.                 Cells(x + 1, y + 1) = tb.Rows(x).Cells(y).innertext
  21.             Next y
  22.         Next x
  23.         dmt.getElementById("GridView1_txtGoPage").Value = i + 1
  24.         dmt.getElementById("GridView1_btnTurn").Click
  25.         Do Until .ReadyState = 4 And .busy = False '等待页面加载完毕
  26.             Debug.Print .busy
  27.             DoEvents
  28.         Loop
  29.         'Stop
  30.         Worksheets.Add after:=Worksheets(Worksheets.Count)
  31.         Next i
  32.         
  33.     End With
  34. End Sub
复制代码

TA的精华主题

TA的得分主题

发表于 2017-1-13 08:35 | 显示全部楼层
数据太多,下载时间较长。

山西农机.zip

20.57 KB, 下载次数: 12

您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

关闭

最新热点上一条 /1 下一条

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-4-26 21:41 , Processed in 0.039200 second(s), 12 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表