ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
查看: 484|回复: 4

[求助] VBA网抓,因为访问频繁,被限IP。求VBA执行完网页打开后抓取的代码。

[复制链接]

TA的精华主题

TA的得分主题

发表于 2023-2-27 23:28 | 显示全部楼层 |阅读模式
[广告] VBA代码宝 - VBA编程加强工具 · VBA代码随查随用  · 内置多项VBA编程加强工具       ★ 免费下载 ★      ★使用手册
Sub A009_4()
Sheets("A001").Select
    On Error Resume Next
'''澳客网抓取竞彩赔率和购买量
Dim a
    For a = 27 To 27
        If Cells(a, 9) <> "" Then
        Set XML = CreateObject("MSXML2.XMLHTTP")
        a1 = "https://www.okooo.com/soccer/match/" + Cells(a, 9) + "/exchanges/"
        Url = a1
        Excel.Application.ActiveWorkbook.FollowHyperlink "https://www.okooo.com/soccer/match/" + Cells(a, 9) + "/exchanges/"
        With XML
         .Open "get", Url, False
         .SetRequestHeader "if-Modified-Since", "0"
         .send
         strText = .responseText
       End With
       strText = Split(strText, "class=""titlebg borderRight"">")
       t1 = Split(strText(2), "</td>")(5)
       Cells(a, 10) = t1      
End If
Next a
End Sub

这是一段我自己在使用的代码,但是因为访问网页时频率太高,会被网站显示IP访问。

1677511713438.png
我记得以前看到过一段代码,大概的执行效果是这样的,
1、打开某指定网页;
2、确认网页加载完毕;
3、抓取需要的数据;
4、关闭该页面。
这样就会让网站认为我是正常浏览。
请大神帮助指点解决一下,谢谢了~~

TA的精华主题

TA的得分主题

发表于 2023-2-28 07:22 | 显示全部楼层
用UiBot机器人抓吧

TA的精华主题

TA的得分主题

发表于 2023-2-28 10:46 来自手机 | 显示全部楼层
[广告] Excel易用宝 - 提升Excel的操作效率 · Excel / WPS表格插件       ★免费下载 ★       ★ 使用帮助
本帖最后由 perfect131 于 2023-2-28 10:47 编辑

可以搞,协议就是最好的、适当加sleep、别把别人服务器搞垮了

TA的精华主题

TA的得分主题

发表于 2023-2-28 11:39 | 显示全部楼层
本帖最后由 tspliu 于 2023-2-28 11:43 编辑

隔一段时间重启下光猫吧,我直接加循环200次访问都没问题,你访问的实在太多了估计

TA的精华主题

TA的得分主题

发表于 2023-2-28 13:30 | 显示全部楼层
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-11-18 22:43 , Processed in 0.032248 second(s), 10 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表