python爬虫

import urllib.request

response = urllib.request.urlopen(url)
读取变量 = response.read()

#写入文件
with open("文件名","wb") as f:
    f.write(读取变量)

response = urllib.request.urlopen(url)
相当于
req = urllib.request.Request(url)获取request对象
response = urllib.request.urlopen(req)

response.geturl()获取url。
response.info()获取这个url的一些服务器等信息。
response.getcode()获得状态。

上一篇:【Python系列专栏】第四十五篇 Python中常用内建模块(urllib)


下一篇:urlopen()的参数