go语言之爬虫项目篇(mysql+redis+beego)

(基础要求:熟悉go语言,熟悉beego框架)

源码获取:https://github.com/dengdengkai/craw_movie

说明;在爬虫分析准备中有项目部署说明

爬虫逻辑介绍:

1.从豆瓣网爬取电影信息

2.存入mysql

3.使用redis来做消息队列

4.详细见下图

 

posted on 2018-08-28 14:27  久木  阅读(1312)  评论(0编辑  收藏  举报