摘要: 一 scrapy框架简介 1 介绍 Scrapy一个开源和协作的框架,其最初是为了页面抓取 (更确切来说, 网络抓取 )所设计的,使用它可以以快速、简单、可扩展的方式从网站中提取所需的数据。但目前Scrapy的用途十分广泛,可用于如数据挖掘、监测和自动化测试等领域,也可以应用在获取API所返回的数据 阅读全文
posted @ 2019-01-23 22:31 Mr·Yuan 阅读(406) 评论(0) 推荐(0) 编辑
摘要: mongodb 简介 MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。 MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。它支持的数据结构非常松散,是类似json的bson 阅读全文
posted @ 2019-01-23 22:16 Mr·Yuan 阅读(650) 评论(0) 推荐(1) 编辑