12 2020 档案

从零开始--03-数据存储

摘要：数据存储前面已经实现了数据的下载和解析，接下来，我们需要把数据存储到数据库中，将来写接口的时候，可以直接读取我们自己的数据库获取数据，顺便练习一下python的数据库操作。准备工作数据库，这里我们选择使用mysql 数据库管理工具，我们选择免费的DBeaver PyMySQL 数组处理我们精阅读全文

posted @ 2020-12-26 21:33 真菜啊阅读(183) 评论(0) 推荐(0) 编辑

从零开始--02-数据下载

摘要：数据抓取上一节中，我们分析了网站的url，可以抓取视频的数据以及热词数据（搜索框提示数据） URL分析分析一下视频数据的url url = 'https://haokan.baidu.com/videoui/api/videorec?tab=yingshi&act=pcFeed&pd=pc&nu 阅读全文

posted @ 2020-12-20 21:33 真菜啊阅读(3222) 评论(0) 推荐(0) 编辑

从零开始--01-前期数据准备工作

摘要：在线视频数据爬取准备工作爬取好看视频网站的数据网站分析搜索框内的提示信息 url: https://haokan.baidu.com/videoui/api/hotwords?sfrom=pc { "errno": 0, "error": "成功", "data": { "requestPar 阅读全文

posted @ 2020-12-16 22:17 真菜啊阅读(1262) 评论(0) 推荐(0) 编辑