Python读取网页内容的方法
本文实例讲述了Python读取网页内容的方法。分享给大家供大家参考。具体如下:
importurllib2
#encoding=utf-8
classCrawler:
defmain(self):
#req=urllib2.Request('http://www.baidu.com/')
#req.add_header('User-Agent','Mozilla/5.0(Macintosh;IntelMacOSX10.6;rv:5.0)')
#urllib2.socket.setdefaulttimeout(10)#超时10秒
#page=urllib2.urlopen(req)
page=urllib2.urlopen('http://www.google.com',timeout=10)
data=page.read()
printdata
printlen(data)#计算字节长度
if__name__=='__main__':
me=Crawler()
me.main()
希望本文所述对大家的Python程序设计有所帮助。