python爬虫4猫眼电影的Top100
摘要：1 查看网页结构 (1)确定需要抓取的字段 电影名称 电影主演 电影上映时间 电影评分 (2) 分析页面结构 按住f12 >点击右上角(如下图2) >鼠标点击需要观察的字段 (3)BeautifulSoup解析源代码并设置过滤属性 1 soup = BeautifulSoup(htmll, 'lxm
阅读全文
posted @ 2019-11-25 20:02
随笔分类 - python爬虫
python爬虫3之去哪儿网
摘要：学习任务 获取去哪儿网的出发地列表 获取旅游景点列表 获取景点产品列表 存储数据 1 获取出发地站点 (1)访问touch.qunar.com (2)按F12，单击自由行，在自由行页面点击搜索框 (3)单击任意一个城市，切换到headers，查看request URL如下所示。但是需要工具还原编码咋
阅读全文
posted @ 2019-11-02 20:30
python爬虫2
摘要：学习任务 获取去哪儿网的出发地列表 获取旅游景点列表 获取景点产品列表 存储数据 1 获取出发地站点 (1)访问touch.qunar.com (2)按F12，单击自由行，在自由行页面点击搜索框 (3)单击任意一个城市，切换到headers，查看request URL如下所示。但是需要工具还原编码咋
阅读全文
posted @ 2019-11-02 20:29
python爬虫1
摘要：1 网页结构 html:超文本标记语言 >类似人的鼻子耳朵，长在那里，大体骨架就是那个样子 css:层叠样式表 >这个是外观的深化，比如贴个双眼皮，橙色眼睛。。。 js:动态脚本语言 >人的技能，跳舞rap 学习网站:w3cshool 2 requests使用 (1)开发环境使用pycharm (2
阅读全文
posted @ 2019-11-02 16:34
