07 2018 档案
摘要:本文参考wikipedia的Web服务器比较页面的数据,选取了其中自己感兴趣的Web服务器的信息进行了对比,包括,Apache HTTP Server、Apache Tomcat、Nginx、Catty。 其中,最后一个Catty完全没有使用过。 参考链接: 1.https://en.wikiped
阅读全文
摘要:Ubuntu 18.04,Nginx 1.14.0, uWSGI 2.0.17.1,Flask, 前言 Windows不支持uWSGI!为了上线自己的项目,只能选择Linux。 自己前面开发了一个Flask应用webnews,现在,将它“移植”到Linux中。 注意,项目还会用到MongoDB数据库
阅读全文
摘要:Ubuntu 18.04,Python 3.6.5(最新3.7),virtualenv 16.0.0, 即将在Ubuntu上大张旗鼓地干活啦!那么,将之前安装的virtualenv运行起来吧(前面都是在Windows上使用virtualenv)! 步骤简介: 在用户主目录新建文件夹、 使用virtu
阅读全文
摘要:Ubuntu 18.04,Nginx 1.14.0, 一直想在Linux上安装Nginx,一直没找到契机,很大原因是自己不熟悉,Ubuntu没安装好吧!今天下午学习了Ubuntu安装软件的一些资料,那么,就从Nginx的安装开始吧! apt-get install安装的是Nginx 1.14.0,而
阅读全文
摘要:Ubuntu 18.04, 安装方式 目前孤知道的Ubuntu下安装软件方式有3种(命令): 1.make 2.apt/apt-get 3.dpkg 方式1基于软件源码安装,需要经历配置(可选)、编译、安装,获取源码可以直接从软件官网下载,或者,使用wget命令下载; 方式2可以安装Ubuntu的软
阅读全文
摘要:Windows 10家庭中文版,运行于VirtualBox上的Ubuntu 18.04,Redis 4.0.10, Redis,久仰大名!因为没有从事互联网行业,所以一直没有使用过。近期找工作,也隐约将其列入到了自己的学习计划之中,直到今天才第一次用了它。 在孤的认知中,Redis是一个缓存系统,可
阅读全文
摘要:前言 因为自己的网站需要,想要做一个左右布局的页面: 左边是导航菜单之类的东西、右边是文档内容(因为最近看的一些软件的文档页面都是这么布局的); 左边固定宽度——300像素、右边使用剩余的宽度; 左边、右边的高度都是100%,浏览器的滚动条不能出现; ... 最终效果如下:div#layout包含左
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,Flask 1.0.2, 提示: 1.请查看本文后面的“18-07-17 11:18重大纠正” ! 2.flask run命令运行时传入参数给create_app的方法也有了,参考后面的18-07-18 12:47更新! 3.请查看18-07
阅读全文
摘要:Chrome 66,Flask 1.0.2,MongoDB 3.6.3, 创建了一个Flask应用,在将MongoDB中的数据使用PyMongo包获取后,再使用jsonify转换为JSON格式发送回请求端。 此时,Chrome浏览器显示为Unicode字符编码——无法直接看懂: 而在Firefox浏
阅读全文
摘要:Ubuntu 18.04(虚拟机VirtualBox上),MongoDB 4.0, 听室友说,23点有世界杯决赛呢!可是,孤要写博文的啊!以记录这忙乱的下午和晚间成功安装了一个软件到Linux上。——2250 有两种方式在Linux上安装MongoDB:.deb packages(官方推荐,是有道理
阅读全文
摘要:在使用scrapy shell测试某网站时,其返回400 Bad Request,那么,更改User-Agent请求头信息再试。 DEBUG: Crawled (400) <GET https://www.某网站.com> (referer: None) 可是,怎么更改呢? 使用scrapy she
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,Scrapy 1.5.0, 提示:此文存在问题,真正测试, 请勿阅读, 07-14 14:26更新: 经过两个多小时的测试,发现此问题的原因是 昨天编写爬虫程序后,给爬虫程序添加了下面的属性: download_timeout = 20 此属
阅读全文
摘要:Windows 10家庭中文版,MongoDB 3.6.3, 前言 在前面的测试中,已经往MongoDB的数据库中写入了一些数据。现在要重新测试程序,数据库中的旧数据需要被清理掉,可是,又想保存之前写入的数据,于是,就需要导出数据(或备份)了——使用MongoDB提供的mongoexport命令。顺
阅读全文
摘要:Windows 10家庭中文版,VirtualBox 5.2.12,CentOS 7(Minimal版), 因为听到大家在谈论CentOS,阿里云上也有CentOS,CentOS还是Red Hat出品,于是,在没有更多了解的情况下,开始了这次安装。 最后,也安装成功了,可是,安装成功的系统没有图形化
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,PyMongo 3.7.0,MongoDB 3.6.3,Scrapy 1.5.0, 前言 在Python中,使用PyMongo访问MongodB,作者Mike Dirolf,维护人员Bernie Hackett <bernie@mongodb
阅读全文
摘要:Windows 10家庭中文版,MongoDB3.6.3, 前言 使用mongod命令基于某个空白文件夹(存放数据)启动MongoDB服务器时,要是没有使用--auth选项,启动后,任何客户端是可以无需认证就连接MongoDB服务器的。 比如,在MongoDB服务器启动后,在本机的终端输入mongo
阅读全文
摘要:MongoDB已经定义了一些内建角色,同时还提供了用户自定义角色的功能,以满足用户千差万别的需求。 官文User-Defined Roles中对其有简略介绍,但要熟悉怎么创建角色,还需要了解下面的这些概念: -(数据库)操作(Privilege Actions) -(数据库)资源(Resource)
阅读全文
摘要:本文展示了两张思维导图,分别是MongoDB 3.6、4.0的所有权限操作,未做深入研究,仅仅是列出来。 3.6总共9类105个操作,4.0版本比3.6多了两类操作,同时增加了3个操作,共11类108个操作。 程序员、架构师熟练掌握的操作的范围应该是不同的吧,根据自己的需要逐个熟悉、突破。 Mong
阅读全文
摘要:官文列举如下(文档不长,过英语四级者可以轻松阅读,就不需要看本文额)(基于MongoDB 3.6的文档,4.0也没有变化): Role-Based Access Control Built-In Roles(1) Built-In Roles(2)-详情 MongoDB中的角色包含了 对 操作和资源
阅读全文
摘要:本文展示MongoDB 3.6、4.0的官方Server文档的结构图——一眼可见完整的知识脉络图。不过,MongoDB除了Server的文档外,还有DRIVERS、CLOUD、TOOLS、DUIDES的文档。 MongoDB最新版本是4.0(已看到园友发布的安装博文),而孤使用的是3.6,所以,提供
阅读全文
摘要:Windows 10家庭中文版,MongoDB 3.6.3, 前言 刚刚安装好了MongoDB,启动了服务器-mongod命令,启动了MongoDB shell-mongo命令,不过,全程都没有使用username、password!震惊! 原来,MongoDB默认是没有用户认证的,也没有默认用户,
阅读全文
摘要:Windows 10家庭中文版,MongoDB 3.6.3, 最近在学习Scrapy,可以却从未将scraped data存储到数据库中。在看过一些文档后,Scrapy会和MongoDB结合使用(还有Redis),并将scraped data存储到其中。 为什么是MongoDB,而不是MySQL呢?
阅读全文
摘要:上月底开始学习Scrapy爬虫框架,看了一些中文文档,讲应用、讲基础的,对其有一些了解了。终于在28日打开Scrapy的官网,并制作了其文档的思维导图,进而开启了其文档的阅读之旅。 本文展示了从6月28日到7月3日每天阅读过的Scrapy文档,记录其整个过程和读后感。 不过,这是第一次做这样的记录,
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,Scrapy 1.5.0, 在创建了爬虫程序后,就可以运行爬虫程序了。Scrapy中介绍了几种运行爬虫程序的方式,列举如下: -命令行工具之scrapy runspider(全局命令) -命令行工具之scrapy crawl(项目级命令) -
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,Scrapy 1.5.0, 在Scrapy中,建立爬虫程序或项目的方式有两种(在孤读过Scrapy的大部分文档后): 1.继承官方Spider类(5个) 2.命令行工具scrapy genspider(4个) 方式一:继承官方Spider类
阅读全文
摘要:Windows 10家庭中文版,Python 3.6.4,Scrapy 1.5.0, 上午看了Scrapy的Spiders官文,并按照其中的SitemapSpider的示例练习,发现官文的示例存在问题——SitemapSpider下的Spider类没有name属性。 这导致孤编写的测试程序也没有na
阅读全文