Python爬虫之requests+正则表达式抓取猫眼电影top100以及瓜子二手网二手车信息(四)...

 requests+正则表达式抓取猫眼电影top100

一.首先我们先分析下网页结构

 

可以看到第一页的URL和第二页的URL的区别在于offset的值，第一页为0，第二页为10，以此类推。

 

 

 

 

二.<dd>标签的结构（含有电影相关信息）

 

 

三、源代码

import requests
import re
import json
from requests.exceptions import RequestException