PQ网抓遇到的问题，请问我这到底是错在哪了。

fengbao008

今天试着抓取这个网站的数据http://fdc.zfj.xm.gov.cn/search/commercial_property，最后一步Web.Contents为什么就是解析不出来，提示Expression.Error: Web.Page 不支持 Web.Contents“内容”选项。，这个错误我遇到好几次了，到底是什么意思，网上也没有具体的讲法。

let
    PageList = {1..203},
    headers = [#"Content-Type"="application/json; charset=utf-8",Referer="http://fdc.zfj.xm.gov.cn/search/commercial_property"],
    url = "http://fdc.zfj.xm.gov.cn/home/Getzslp",
    content = "currentpage=1&pagesize=20&searchtj=&orderby=",
    自定义1 = Web.Page(Web.Contents(url, [Headers=headers,Content=Text.ToBinary(content)]))
in
    自定义1

Eric0236

let
    url = "http://fdc.zfj.xm.gov.cn/home/Getzslp",
    headers = [#"Content-Type"="application/x-www-form-urlencoded; charset=UTF-8"],
    content = Text.ToBinary("currentpage=1&pagesize=9999"),
    web = Text.FromBinary(Web.Contents(url, [Headers=headers, Content=content])),
    data = Text.Remove(Text.Range(web, Text.PositionOf(web, "[")+1, Text.PositionOf(web, "recordcount")-Text.PositionOf(web, "[")-5),"\"),
    list = Text.Split(Text.Replace(data, "},", "}|"), "|"),
    tb = Table.FromRecords(List.Transform(list, each Json.Document(_)))
in
    tb

fengbao008

Eric0236 发表于 2022-9-24 12:38
let
    url = "http://fdc.zfj.xm.gov.cn/home/Getzslp",
    headers = [#"Content-Type"="application ...

我想问的是我上面的步骤到底错在哪里呢。我看不出来啊。

Eric0236

fengbao008 发表于 2022-9-26 09:02
我想问的是我上面的步骤到底错在哪里呢。我看不出来啊。

Content-Type把请求头的内容复制进去，而不是响应头的内容

ryujehong

Eric0236 发表于 2022-9-26 12:31
Content-Type把请求头的内容复制进去，而不是响应头的内容

请问这网页的headers等参数是在哪找到的，我只会最基本的network-doc，找不到啊

Eric0236

打开网页按F12，点击网络，刷新一下页面，点击第一条，右边消息头里面找相关信息

fengbao008

Eric0236 发表于 2022-9-26 12:31
Content-Type把请求头的内容复制进去，而不是响应头的内容

晕死啊，半天看不出来。还以为是Content的问题。