爬取豆瓣喜剧类热门TOP60的电影

学习任务:爬取豆瓣喜剧类热门TOP60的电影并保存在douban.txt文件中。

代码示例：

import requests

url="https://movie.douban.com/j/new_search_subjects"
for i in range(0,60,20):#for循环，每次爬取的电影数量加20
    param = {
        "sort": "U",
        "range": "0,10",
        "tags": "",
        "start": i,
        "genres": "喜剧",
    }
    header = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.164 Safari/537.36"
    }
    resp = requests.get(url=url, params=param, headers=header)
    with open("douban.txt", mode="a", encoding="utf-8") as f:
        f.write(resp.text)
        print("爬取完成！")
        print(resp.text)

 

__EOF__

本文作者：CherriesOvO
本文链接：https://www.cnblogs.com/zyj3955/p/15050297.html
关于博主：评论和私信会在第一时间回复。或者直接私信我。
版权声明：本博客所有文章除特别声明外，均采用 BY-NC-SA 许可协议。转载请注明出处！
声援博主：如果您觉得文章对您有帮助，可以点击文章右下角【推荐】一下。您的鼓励是博主的最大动力！