05 2018 档案
摘要：简介 在下图中可以看到items.py与pipeline.py，其中items是用来定义抓取内容的实体；pipeline则是用来处理抓取的item的管道 Item管道的主要责任是负责处理有蜘蛛从网页中抽取的Item，他的主要任务是清晰、验证和存储数据。当页面被蜘蛛解析后，将被发送到Item管道，并经
阅读全文
摘要：前言 安装MySQL数据库与Navicat并不算难事，关键是怎么让他们工作花费了我整整一天的时间，最终才把弄好。遇到各种各样的问题，上网看了大量博客，发现很多博客都是直接copy或者并不能非常好的解答自己遇到的问题。这里记录一下自己遇到的问题和解救方案。 关于软件 Navicat和MySQL直接在官
阅读全文
摘要：在学习网络编程的时候，是需要处理客户端的并发请求的。一般解决办法有1.多线程/多进程模型;2.多路复用模型。 多线程/多进程在这里不讨论，涉及到进程间通信的问题以及处理访问冲突的一些问题，之后会介绍。在这里主要记录一下多路复用模型。谈到多路复用模型，最简单的自然是select机制。但是我们也知道大型
阅读全文
摘要：最近不论是在写网络编程还是在写小项目时候，都会提示让我用加个_s的函数........ 其实加上_s这个函数是为了确保函数的安全性，确保不会有内存不够或者溢出的情况。但是每次都需要重新看一下_s函数的新用法，尤其是在fopen_s函数的时候，提示了: 搜了fopen_s的用法又花了不少时间，所以决定
阅读全文
