水墨黑

摘要： URLManager:爬虫系统的核心，负责URL的重要性排序，分发，调度，任务分配 ContentAcceptor:负责收集来自爬虫爬到的页面或其他内容，爬虫一般将一批页面打包发给ContentAcceptor，ContentAcceptor将其存储到分布式文件系统或分布式数据库或直接交给Conte 阅读全文

摘要： ''' 任务：制作词云图 需要安装的依赖库： # 词云 1.wordcloud # 中文分词 2.jieba # 画图 3.matplotlib # 计算 4.numpy ''' from os import path from scipy.misc import imread import mat 阅读全文

摘要： 001.百度贴吧 # 是告诉操作系统执行这个脚本的时候，调用/usr/bin下的python3解释器； # !/usr/bin/python3 # -*- coding: utf-8 -*- """ 请求URL分析 https://tieba.baidu.com/f?kw=魔兽世界&ie=utf-8 阅读全文

摘要： 1.代理服务器（中间人） # -*- coding: utf8 -*- import requests if __name__ == '__main__': url = "https://www.baidu.com" # 1.设置代理地址 proxy = '163.204.246.126:9999' 阅读全文

摘要： 环境安装 Windows:Anaconda python环境的一键安装包（通过文件镜像安装比较快） Anaconda中Scripts文件夹：各种各样的可执行文件coda,pip等 coda list：列出所有Anaconda安装的包 官方安装python 官网下载对应版本安装包，点击运行，下一步，增 阅读全文

摘要： 想法：考试失败后的失落→心情低落，学习效率低下，更多的是迷茫→考试又来了，看起来短时间内难以提高→自己也在鄙视自己思考：几个月怎么过，怎么和同学交往的，怎么学习的→娱乐消遣是大头，做事和学习总是三心二意，这是迷失的根源打赌：我能不能真正专心的学习10分钟？→计时器（形状像一个番茄）→番茄工作法尝试： 阅读全文

摘要： 如何写简历 简历目标：获得面试机会 企业想要的人： 稳定踏实，智商高（高学历），情商高，学习能力强，积极向上（不希望将前途想的非常渺茫的人），有创新意识 工资少 一个顶三 你想找的企业 钱多，活少（国企），离家近 福利好（外国公司，外面） 高大上 如何写简历 让负责筛选的人相信，你就是他们要找的人 阅读全文

摘要： 101.描述用浏览器访问 www.baidu.com 的过程 先要解析出 baidu.com 对应的 ip 地址 要先使用 arp 获取默认网关的 mac 地址 组织数据发送给默认网关(ip 还是 dns 服务器的 ip，但是 mac 地址是默认网关的 mac 地址) 默认网关拥有转发数据的能 阅读全文

摘要： 1.Linux基础 操作系统： 1.桌面操作系统（个人电脑） Windows(个人,用户群体大，应用软件多） Linux（应用软件少） macOS（开发人员,,苹果公司，Unix） 2.服务器操作系统 Linux(安全，稳定，免费，占用率高) Ubuntu国内镜像：http://mirrors.16 阅读全文

摘要： 1.continue和 break有什么区别？ continue:跳过当前循环剩余的语句执行下一次循环 break:结束整个循环 2.python中的作用域 作用域指变量的生效范围，由被赋值的地方所决定 遇到一个变量，搜索路径为：LEGB L:Local(局部),首先在局部作用域查找变量的声明和值 阅读全文