如下图,需要循环访问txt文件中的地址,如果每个都复制网址去访问或者是爬取数据就比较麻烦。
以下是代码循环访问网址,这里加个try、except(异常处理)可以防止某些网址访问不进去导致代码运行中止:
# -*- coding: utf-8 -*-
import urllib.request
for line in open("urls.txt"):
print(line)
try:
data = urllib.request.urlopen(line).read().decode()
print(data)
except:
continue