ExcelHome技术论坛

 找回密码
 免费注册

QQ登录

只需一步,快速开始

快捷登录

搜索
EH技术汇-专业的职场技能充电站 妙哉!函数段子手趣味讲函数 Excel服务器-会Excel,做管理系统 效率神器,一键搞定繁琐工作
HR薪酬管理数字化实战 Excel 2021函数公式学习大典 Excel数据透视表实战秘技 打造核心竞争力的职场宝典
让更多数据处理,一键完成 数据工作者的案头书 免费直播课集锦 ExcelHome出品 - VBA代码宝免费下载
用ChatGPT与VBA一键搞定Excel WPS表格从入门到精通 Excel VBA经典代码实践指南
查看: 5344|回复: 6

[求助] 求助各位了,关于用Power Query抓取网页数据的问题

[复制链接]

TA的精华主题

TA的得分主题

发表于 2019-6-10 12:07 | 显示全部楼层 |阅读模式
数据抓取的情景是这样的,以网址 https://wayougou.com/stock/000001/市盈率/市盈率 为例,这个网页有近十年、近七年、近五年、近三年的子页面,同时下方又有 指标统计、数据详情两个不同的表格数据
现在想用Power Query抓取 同时满足 近七年+数据详情 的那个表格的数据,发现网址不变,请教各位大神,这种情况下怎么处理呢?

目前用的语句是 Web.Page(Web.Contents("https://wayougou.com/stock/"&[代码]&"/市盈率/市盈率"))
1.png

另外还有两个小问题:
1、能在抓取时,间隔几秒钟再抓取下一条数据吗?

2、用power query抓取该网站的其他网址时时,发现有些网页,比如https://wayougou.com/index/000001/市盈率/市盈率,这时候导航器中没有显示出Table。尝试用Excel自带的 数据-自网站 功能导入这个网址的数据,也是无法导出,而是弹出“当前页面的脚本发生错误”的提示,这种情况该怎么解决呢?
2.png
3.png

多谢!

TA的精华主题

TA的得分主题

发表于 2019-6-11 09:25 | 显示全部楼层
链接都没找对,给你两个链接参考下。里面也有说怎么控制抓取时间的。
https://pqfans.com/2230.html
https://pqfans.com/207.html

TA的精华主题

TA的得分主题

 楼主| 发表于 2019-6-12 12:04 | 显示全部楼层
c-coming 发表于 2019-6-11 09:25
链接都没找对,给你两个链接参考下。里面也有说怎么控制抓取时间的。
https://pqfans.com/2230.html
http ...

根据里面的方法,找到的链接是https://wayougou.com/api/ratios/stock?code=601939&name=股息&chart=股息率&span=7,但是之后的操作,使用Json.Document解析,以及使用Table.FromReocrds还原成表,这两步还是不会,能讲解下接下来怎么操作吗

TA的精华主题

TA的得分主题

 楼主| 发表于 2019-6-14 17:50 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2019-7-1 18:31 来自手机 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2019-7-1 18:32 来自手机 | 显示全部楼层

TA的精华主题

TA的得分主题

发表于 2020-12-21 09:50 | 显示全部楼层
https://pqfans.com/catalog 学习pQ的好网址
您需要登录后才可以回帖 登录 | 免费注册

本版积分规则

手机版|关于我们|联系我们|ExcelHome

GMT+8, 2024-11-15 16:30 , Processed in 0.049093 second(s), 12 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 1999-2023 Wooffice Inc.

沪公网安备 31011702000001号 沪ICP备11019229号-2

本论坛言论纯属发表者个人意见,任何违反国家相关法律的言论,本站将协助国家相关部门追究发言者责任!     本站特聘法律顾问:李志群律师

快速回复 返回顶部 返回列表