利用 requests 抓取豆瓣电影 Top 250：
import reimport requestsdef main(url):global numheaders = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36"}req = requests.get(url, headers=headers)pattern = pile(r"<span class=\"title\">(.*?)</span>", re.S)for name in re.findall(pattern, req.text):if name.startswith("&"):continueelse:print("%s: %s" % (num, name))num += 1if __name__ == '__main__':num = 1for i in range(0, 256, 25):url = "/top250?start=%s&filter=" % imain(url)
执行结果：
1: 肖申克的救赎2: 霸王别姬3: 这个杀手不太冷4: 阿甘正传5: 美丽人生6: 泰坦尼克号7: 千与千寻8: 辛德勒的名单9: 盗梦空间10: 忠犬八公的故事11: 机器人总动员12: 三傻大闹宝莱坞13: 海上钢琴师14: 放牛班的春天15: 楚门的世界16: 大话西游之大圣娶亲17: 星际穿越18: 龙猫19: 教父20: 熔炉21: 无间道22: 疯狂动物城23: 当幸福来敲门24: 怦然心动25: 触不可及26: 乱世佳人27: 蝙蝠侠：黑暗骑士28: 活着29: 少年派的奇幻漂流30: 天堂电影院31: 控方证人32: 鬼子来了33: 十二怒汉34: 指环王3：王者无敌35: 天空之城36: 飞屋环游记37: 摔跤吧！爸爸38: 大话西游之月光宝盒39: 搏击俱乐部40: 罗马假日41: 哈尔的移动城堡42: 闻香识女人43: 窃听风暴44: 辩护人45: 两杆大烟枪46: 飞越疯人院47: 死亡诗社48: 末代皇帝49: 指环王2：双塔奇兵50: V字仇杀队51: 教父252: 素媛53: 指环王1：魔戒再现54: 海豚湾55: 饮食男女56: 美丽心灵57: 狮子王58: 情书59: 寻梦环游记60: 钢琴家61: 美国往事62: 本杰明·巴顿奇事63: 小鞋子64: 黑客帝国65: 西西里的美丽传说66: 看不见的客人67: 让子弹飞68: 拯救大兵瑞恩69: 致命魔术70: 大闹天宫71: 七宗罪72: 哈利·波特与魔法石73: 被嫌弃的松子的一生74: 音乐之声75: 低俗小说76: 天使爱美丽77: 沉默的羔羊78: 勇敢的心79: 剪刀手爱德华80: 蝴蝶效应81: 猫鼠游戏82: 春光乍泄83: 心灵捕手84: 布达佩斯大饭店85: 禁闭岛86: 入殓师87: 穿条纹睡衣的男孩88: 幽灵公主89: 阿凡达90: 阳光灿烂的日子91: 第六感92: 玛丽和马克思93: 致命ID94: 狩猎95: 重庆森林96: 断背山97: 加勒比海盗98: 摩登时代99: 告白100: 大鱼101: 喜剧之王102: 一一103: 消失的爱人104: 射雕英雄传之东成西就105: 阳光姐妹淘106: 甜蜜蜜107: 爱在黎明破晓前108: 小森林 夏秋篇109: 侧耳倾听110: 红辣椒111: 倩女幽魂112: 驯龙高手113: 恐怖直播114: 风之谷115: 上帝之城116: 请以你的名字呼唤我117: 超脱118: 爱在日落黄昏时119: 菊次郎的夏天120: 幸福终点站121: 哈利·波特与死亡圣器(下)122: 小森林 冬春篇123: 杀人回忆124: 神偷奶爸125: 借东西的小人阿莉埃蒂126: 7号房的礼物127: 怪兽电力公司128: 萤火之森129: 唐伯虎点秋香130: 岁月神偷131: 超能陆战队132: 蝙蝠侠：黑暗骑士崛起133: 七武士134: 电锯惊魂135: 真爱至上136: 谍影重重3137: 疯狂原始人138: 萤火虫之墓139: 喜宴140: 东邪西毒141: 贫民窟的百万富翁142: 英雄本色143: 黑天鹅144: 无人知晓145: 记忆碎片146: 心迷宫147: 血战钢锯岭148: 傲慢与偏见149: 雨人150: 时空恋旅人151: 荒蛮故事152: 纵横四海153: 教父3154: 卢旺达饭店155: 玩具总动员3156: 达拉斯买家俱乐部157: 花样年华158: 完美的世界159: 海边的曼彻斯特160: 海洋161: 虎口脱险162: 恋恋笔记本163: 你看起来好像很好吃164: 被解救的姜戈165: 燃情岁月166: 二十二167: 头脑特工队168: 冰川时代169: 无敌破坏王170: 雨中曲171: 我是山姆172: 你的名字。173: 人工智能174: 爆裂鼓手175: 穿越时空的少女176: 魂断蓝桥177: 未麻的部屋178: 猜火车179: 三块广告牌180: 模仿游戏181: 一个叫欧维的男人决定去死182: 房间183: 罗生门184: 忠犬八公物语185: 完美陌生人186: 恐怖游轮187: 阿飞正传188: 魔女宅急便189: 香水190: 朗读者191: 浪潮192: 哪吒闹海193: 可可西里194: 黑客帝国3：矩阵革命195: 海街日记196: 谍影重重197: 战争之王198: 谍影重重2199: 牯岭街少年杀人事件200: 地球上的星星201: 一次别离202: 追随203: 青蛇204: 惊魂记205: 终结者2：审判日206: 疯狂的石头207: 撞车208: 源代码209: 再次出发之纽约遇见你210: 小萝莉的猴神大叔211: 步履不停212: 新龙门客栈213: 初恋这件小事214: 梦之安魂曲215: 爱在午夜降临前216: 东京物语217: 无耻混蛋218: 城市之光219: 天书奇谭220: 绿里奇迹221: 彗星来的那一夜222: 这个男人来自地球223: 海蒂和爷爷224: E.T. 外星人225: 末路狂花226: 血钻227: 勇闯夺命岛228: 聚焦229: 变脸230: 2001太空漫游231: 发条橙232: 秒速5厘米233: 黄金三镖客234: 卡萨布兰卡235: 黑鹰坠落236: 非常嫌疑犯237: 国王的演讲238: 我爱你239: 美国丽人240: 千钧一发241: 碧海蓝天242: 遗愿清单243: 疯狂的麦克斯4：狂暴之路244: 功夫245: 荒岛余生246: 英国病人247: 荒野生存248: 海盗电台249: 枪火250: 勇士
