程序師世界是廣大編程愛好者互助、分享、學習的平台,程序師世界有你更精彩!
首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫知識
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
 程式師世界 >> 編程語言 >> 更多編程語言 >> 編程綜合問答 >> 爬取網頁-python 抓取POST 網頁失敗,求大神幫忙看下代碼哪裡有問題

爬取網頁-python 抓取POST 網頁失敗,求大神幫忙看下代碼哪裡有問題

編輯:編程綜合問答
python 抓取POST 網頁失敗,求大神幫忙看下代碼哪裡有問題

![圖片說明](http://img.ask.csdn.net/upload/201504/02/1427958956_940687.png)圖片說明

這是網站請求的是Request Header 和攜帶的參數

import urllib
import urllib2

def GetFormDate( pageNum , catId ):
retValue = {}
retValue["module"] = "product"
retValue["from"] = "category"
retValue["page"] = "%d" % pageNum
paramJson = {"mobile" : False , "catalog" : "coo8Store" , "siteId" : "coo8Site" , "shopId" : "" , "regionId" : "31010100" , "pageName" : "list" , "et" : "" , "XSearch" : False , "startDate" : 0 , "endDate" : 0 , "pageSize" : 48 , "state" : 4 , "weight" : 0 , "more" : 0 , "sale" : 0 , "instock" : 1 , "filterReqFacets" : None , "rewriteTag" : False , "userId" : "" , "priceTag" : 0}
paramJson["catId"] = catId

retValue["paramJson"] = paramJson

return retValue

body=urllib.urlencode(GetFormDate(2,"cat15965738"))

request = urllib2.Request("http://www.gome.com.cn/p/asynSearch" )
request.add_header("Referer", "http://www.gome.com.cn/category/cat15965738.html")
request.add_header('Content-Type','application/json')
request.add_header('X-Requested-With','XMLHttpRequest')
request.add_header('HOST','www.gome.com.cn')
request.add_header('Accept-Language','zh-CN,zh;q=0.8,en-US;q=0.5,en;q=0.3')
request.add_header('Accept','application/json, text/javascript, /; q=0.01')
f = urllib2.urlopen(request , json.dumps(GetFormDate(2,"cat15965738")))

content = f.read()
print content

這樣寫的話,獲得的Content 一直是空,有哪位大神知道為什麼嗎,求解啊

最佳回答:


兩個格式是否完全一致?自己仔細對比一下

oyljerry
a530317920
  1. 上一頁:
  2. 下一頁:
Copyright © 程式師世界 All Rights Reserved