VBA抓取网页表格数据

mail249120

请问大神们怎么从https://www.ccmn.cn/historyprice/luliao_119900/这个网站上面抓取表格数据到我的excel里指定的sheet（”Table“），非常感谢

Kaohsing

需要账号和密码。

mail249120

Kaohsing 发表于 2019-1-23 16:44
需要账号和密码。

用户名pnrsandy，密码PNR123456

duquancai

mail249120 发表于 2019-1-23 18:31
用户名pnrsandy，密码PNR123456

登录。。。。。

chentonny

这是JS异步加载的数据。楼主恐怕不是只想取某一日的数据吧？

hyz00001

这个网站属于框架类型，它的数据病没有在源代码里面，而是在浏览器上运行程序访问另外的地方才找到数据的。
如果楼主需要比较全面的数据的话，建议直接购买数据库就可以，不需要自己费精力做爬虫

duquancai

有：用户名及密码 好说！直接上代码》》》》》》》》》》》》》》》》》》》》

1. # -*- coding: utf-8 -*-
   
2. # version: Python 3.7.0
   
3. import requests
   
4. 
   
5. session = requests.Session()
   
6. headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.3; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/67.0.3396.99 Safari/537.36'}
   
7. 
   
8. def login(post_data):
   
9.     login_url = 'https://vip.ccmn.cn/a/login'
   
10.     r = session.post(url=login_url, data=post_data, headers=headers)
    
11. 
    
12. def get_html():
    
13.     data_url = 'https://www.ccmn.cn/historyprice/getCorpQuotationsList'
    
14.     post_data = {
    
15.         'pageNo': '1',
    
16.         'pageSize': '20',
    
17.         'cityCode': '119900',
    
18.         'productSortName': '炉料'}
    
19.     data = session.post(url=data_url, data=post_data, headers=headers)
    
20.     paese_json(data.json())
    
21. 
    
22. def paese_json(data):
    
23.     data_list = data['body']['marketPriceList']
    
24.     for i in data_list:
    
25.         print(i)
    
26. 
    
27. if __name__ == '__main__':
    
28.     post_data = {'username': 'pnrsandy','password': 'PNR123456'}
    
29.     login(post_data)
    
30.     get_html()

复制代码

duquancai

是这样吗？？？？

duquancai

mail249120 发表于 2019-1-23 18:31
用户名pnrsandy，密码PNR123456

代码图所示》》》》》》》》》》》》》》》》》

Kaohsing

只能是自己积累数据，或者付费获取数据.