Eric的新家

摘要： Linux要在hosts中添加自己的ip地址和机器名称，这样就不会出现no route to host这样的问题了。 1、 cat /etc/hosts 内容是： 2、添加本机的ip地址和名称 另起一行。 192.168.27.111 name 阅读全文

摘要： 1、进入 cd /etc/yum.repos.d 文件夹下。 2、找到Centos-Base.repo备份。 成为Centos-Base.repo.bak。 3、将新的源放到该文件夹下，并且修改为Centos-Base.repo。 阅读全文

摘要： 已经很久没有更新过博客，因为论文和自己的学习的事情，也因为自己的懒惰疏于书写。仿佛时间已经过去了很久，现在毕业了，因为一些原因没有参加秋招，而且也错过了春招，现在才开始到北京来面试找工作。寄居在同学这里，感谢他们的收留。第一家面试的公司是一家做K12的线上的公司，面试的题目不难，但是可能是第一次准备 阅读全文

摘要： 本文为转载：原文出处：https://www.cnblogs.com/saolv/p/6963314.html centos下安装pip时失败： [root@wfm ~]# yum -y install pipLoaded plugins: fastestmirror, refresh-packag 阅读全文

摘要： 第八课主要内容： 分布式爬虫框架简介（控制模式与自由模式） 消息队列 Redis介绍操作及队列应用 Scrapy-Redis介绍及项目实战 这节课主要是代码的讲解，并且讲解了scrapy-redis部分的源码；最后给出了一个爬虫代码实例。关于scrapy-redis的代码大家自行下载学习即可。 操作 阅读全文

摘要： 第七课主要内容： 多进程 多线程 FIFO,LIFO,优先队列 线程局部变量 进程与线程的选择 线程池 异步IO概念及twisted案例 股票数据抓取 Linux下实例： windows下实例（需要导入multiprocessing这个库）： 多线程运行实例： 如果想深入多线程，请参考书籍《unix 阅读全文

摘要： 第六课主要内容： 爬豆瓣文本例程 douban 图片例程 douban_imgs 1.爬豆瓣文本例程 douban 目录结构 –spiders–init.py bookspider.py douban_comment_spider.py doumailspider.py init.py 无代码 it 阅读全文

摘要： 第五课主要内容有： Scrapy框架结构，组件及工作方式 单页爬取-julyedu.com 拼URL爬取-博客园 循环下页方式爬取-toscrape.com Scrapy项目相关命令-QQ新闻 1.Scrapy框架结构，组件及工作方式 2.单页爬取-julyedu.com 3.拼URL爬取-博客园 阅读全文

摘要： 第四课主要内容： Requests库 Beautiful Soup HTML Parse SqlLite Douban登陆抓取案例 requests运行代码示例： BeautifulSoup代码示例： 在课程中用到了test.html,内容如下： 在课程中提到在安装markupbase中有个坑需要大 阅读全文

摘要： 第三课的主要内容有: CSS XPATH JSON及xml的处理 正则表达式 selenium简介及实战 css例子 以下四个html页面在浏览器中打开即可看到效果。 css_background_color.html: css_board_color.html: css_font_family.h 阅读全文