摘要：
本博文介绍了MongoDB，并详细指引读者在Ubuntu下MongoDB的安装和使用。本教程在Ubuntu14.04下测试通过。 一、MongoDB介绍 MongoDB 是一个是一个基于分布式文件存储的数据库，介于关系数据库和非关系数据库之间，是非关系数据库当中功能最丰富，最像关系数据库的。他支持的 阅读全文
摘要：
Asin = [{'Asin': b2b}] 取出其中的value，使用如下代码就可以了 [item[key] for item in Asin for key in item] 源地址"https://blog.csdn.net/dl_min/article/details/78259920" 阅读全文
摘要：
normalize,字面意思就是正规化 加入space 大概意思就是空格的处理了 官方解释是这样的: 通过去掉前导和尾随空白并使用单个空格替换一系列空白字符，使空白标准化。如果省略了该参数，上下文节点的字符串值将标准化并返回。 刚好在实际项目中碰到了这样的一个问题, 定位一个下来的时候,最开始的时候 阅读全文
摘要：
安装 1.下载安装包 下载完成后解压缩压缩包 2.安装准备 将MongoDB中移动到在/ usr /本地/服务器/ mongdb文件夹 创建数据库文件夹与日志文件 3.设置开机自启动 将MongoDB的启动项目追加入rc.local中保证的MongoDB在服务器开机时启动 启动mongodb cd到 阅读全文
摘要：
Mongodb:是一种NoSQL数据库，NoSQL:Not Only SQLSQL： 数据表->JDBC读取->POJO(VO、PO）->控制层转化为JSON数据->客户端这种转换太麻烦了，如果有直接数据库存放要显示的内容，就能够省略所有需要进行转换的过程。所以在实际开发中，往往除了关系型数据库之外 阅读全文
摘要：
爬取zol 网站图片,无法抓取. 在 setting.py 文件中 设置 日志 记录等级 LOG_LEVEL= 'DEBUG' LOG_FILE ='log.txt' 查看日志 发现报 2015-11-07 14:43:43+0800 [meizitu] DEBUG: Filtered offsit 阅读全文
摘要：
用正常的方式打开一个终端。 2.使用组合键 ctrl+shift+t , 这时就在同一个窗口中打开了另一个终端，当然再按一次ctrl+shift+t，会再生成一个，需要多少了大家可以自行决定。效果截图如下： 3.按组合键Alt+1，就会切换到第一个终端，按Alt+2，就会切换到第2个终端，Alt+n 阅读全文
摘要：
‘转载地址：http://www.cnblogs.com/rwxwsblog/p/4557123.html’ 这些天应朋友的要求抓取某个论坛帖子的信息，网上搜索了一下开源的爬虫资料，看了许多对于开源爬虫的比较发现开源爬虫scrapy比较好用。但是以前一直用的java和php，对python不熟悉，于 阅读全文
摘要：
爬虫是一个比较容易上手的技术，也许花5分钟看一篇文档就能爬取单个网页上的数据。但对于大规模爬虫，完全就是另一回事，并不是1*n这么简单，还会衍生出许多别的问题。 系统的大规模爬虫流程如图所示。 先检查是否有API API是网站官方提供的数据接口，如果通过调用API采集数据，则相当于在网站允许的范围内 阅读全文
摘要：
这是从我刚刚开始学习Python到现在上班中，总结的35个小技巧。希望对你有帮助，欢迎补充！ 1、拆箱 2、拆箱变量交换 3、扩展拆箱（只兼容python3） 4、负数索引 5、 切割列表 6、 负数索引切割列表 7、指定步长切割列表 8、负数步长切割列表 9、列表切割赋值 10、 命名列表切割方式 阅读全文