python爬虫-User-Agent的伪造

  • 某些网站会识别python爬虫程序并阻断,通过构造User_Agent可以抵抗某些反爬虫机制
  • 用fake-useragent这个库就能很好的实现

pycharm中安装步骤
在这里插入图片描述

产生随机的User-Agent

只需一行代码

from fake_useragent import UserAgent

ua = UserAgent()
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)

在这里插入图片描述
会随机产生不同的User-agent

posted @ 2020-01-30 15:56  10nnn4R  阅读(403)  评论(0)  编辑  收藏  举报