我需要爬去一个网站上得部分数据,网站是需要验证的。
前面的部分代码如下:
cookiejar = cookielib.LWPCookieJar()
urlOpener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookiejar), \
urllib2.HTTPHandler)
urllib2.install_opener(urlOpener)
然后我登陆成功了,但是去请求网站页面的时候还是会返回提示要我登陆。求解啊。是因为没有带什么cookie吗?
还有,res.close()这个函数有什么作用?