很奇怪的一个网页内容，如何爬取到想要的数据，XML？

duquancai

1234vba 发表于 2018-8-5 14:04
老师好。。我装了个 python2.7  
还装了 需要的 模块。
执行后 能得到 你的链接的 效果了。

用JS解析json的同时安照你的格式输出就行了。

duquancai

1234vba 发表于 2018-8-5 14:04
老师好。。我装了个 python2.7  
还装了 需要的 模块。
执行后 能得到 你的链接的 效果了。

按照1楼 提供附件  ，代码如下：

1. Sub main()
   
2.     Dim js As Object, s$, json$
   
3.     s = [n1] '假设数据在N1
   
4.     Set js = CreateObject("MSScriptControl.ScriptControl")
   
5.     js.Language = "JavaScript": js.AddObject "g", Range("a1")
   
6.     json = "a=" & s & ";for(i=0;i<a.length;i++){g(i+1,1)=a[i].issue;b=a[i].code.split(',');for(j=0;j<b.length;j++)g(i+1,j+2)=b[j]};"
   
7.     js.eval json
   
8. End Sub

复制代码

zpy2

<?php

/*$get=file_get_contents("http://www.pm25.in/api/querys/pm2_5.json?city=珠海&token=5j1znBVAsnSf5xQyNQyq");
print_r($get);
file_put_contents("json.txt",$get);*/

$get=file_get_contents("json.txt");

$json=json_decode($get);
//print_r($json);
$out="";
echo "<textarea style=\"width:100%;height:600px;\">";
for($i=0;$i<sizeof($json);$i++){
$code=str_replace(",","\t",$json[$i]->code);
$out.=($json[$i]->issue."\t".$code."\r\n");
}
echo $out;

echo "</textarea>";

?>
这个php网页的，需要复制粘贴到excel

fxl447098457

1234vba 发表于 2018-8-5 14:04
老师好。。我装了个 python2.7  
还装了 需要的 模块。
执行后 能得到 你的链接的 效果了。

1. import pandas as pd
   
2. strtext='[{"ttery":"min","issue":"20130801-3391","code":"8,4,5,2,9","code1":"297734529","code2":null,"time":1013395466000},\
   
3. {"ttery":"min","issue":"20130801-3390","code":"7,8,2,1,2","code1":"298058212","code2":null,"time":1013395406000},\
   
4. {"ttery":"min","issue":"20130801-3389","code":"5,9,1,2,9","code1":"298329129","code2":null,"time":1013395346000},\
   
5. {"ttery":"min","issue":"20130801-3388","code":"3,8,7,3,3","code1":"298588733","code2":null,"time":1013395286000},\
   
6. {"ttery":"min","issue":"20130801-3387","code":"0,8,5,2,7","code1":"298818527","code2":null,"time":1013395226000}]'
   
7. 
   
8. df=pd.read_json(strtext,orient='records')
   
9. df1=df['code'].str.split(',',expand=True)
   
10. df1.columns=['code.%d'%(i+1) for i in range(5)]
    
11. df2=pd.concat([df,df1],axis=1)
    
12. df2.to_excel('pandas处理json.xlsx',index=False,columns=
    
13. ["ttery","issue","code.1","code.2","code.3","code.4","code.5","code1","code2","time"])

复制代码

1234vba

duquancai 发表于 2018-8-5 14:29
按照1楼 提供附件  ，代码如下：

谢谢老师的回复。。

现在在外面无法测试代码效果

1234vba

zpy2 发表于 2018-8-5 14:57
这个php网页的，需要复制粘贴到excel

谢谢老师，只是我更加不懂php

1234vba

fxl447098457 发表于 2018-8-5 17:05

再次感谢老师的解答。

明天回去才能测试效果了

我是来讨说法的

正则匹配

1234vba

我是来讨说法的 发表于 2018-8-6 09:45
正则匹配

老师好
那 另外一组的 正则呢？

1234vba

fxl447098457 发表于 2018-8-5 17:05

再次感谢老师。

测试过了。。能分别输出了。

·····
我好好研究一下python
·····