摘要： 转载自 https://www.cnblogs.com/gl1573/p/9480022.html 概述 bs4 全名 BeautifulSoup，是编写 python 爬虫常用库之一，主要用来解析 html 标签。 一、初始化 from bs4 import BeautifulSoup soup 阅读全文

摘要： 转载自： https://www.cnblogs.com/Nicholas0707/p/9021672.html 目录 （一）、日志相关概念 1、日志的作用 2、日志的等级 3、日志字段信息与日志格式 4、日志功能的实现 （二）logging模块 1、 logging模块的日志级别 2、loggin 阅读全文

摘要： 今天在服务器上清空一个文件夹的时候，提示我rm的参数过长： cd /home/yyq/htmls # 删除当前文件夹下的所有文件，只能是文件比较少的 rm -r ./* # 文件多的可以这么删除： ls | xargs -n 10 rm -fr ls 命令解释： ls 输出所有的文件名(用空格分割) 阅读全文

摘要： 转载于 https://www.jianshu.com/p/2ffeb3a3aa90 例子 [root@VM_16_17_centos bin]# free total used free shared buff/cache available Mem: 1882892 785272 280428 阅读全文

摘要： 总的来说：三种高亮显示 一、plain highlight（默认） 二、posting highlight（性能） 对磁盘的消耗更少 将文本切割为句子，并且对句子进行高亮，效果更好 性能比plain highlight高，因为不需要重新对高亮文本进行分词 三、fast vector highligh 阅读全文

摘要： 一、 准备工作： 安装参考文档: ELK官网：https://www.elastic.co/ ELK官网文档：https://www.elastic.co/guide/index.html ELK中文手册：https://www.elastic.co/guide/cn/elasticsearch/g 阅读全文

摘要： 安装包1.7和1.8两个版本的JDK安装包： 正常安装，先装1.7，再装1.8.（1.7安装的时候，有一个地方不让修改路径，所以最终2个版本的JDK都安装在了C盘） 安装完成后的路径： 网上都说安装完需要配置环境变量，但是我配置了，没有效果，CMD中执行“java -version”依旧是1.8. 阅读全文

摘要： 转载自： https://www.cnblogs.com/dengshihuang/p/8145776.html 本文采用os.walk()和os.listdir()两种方法，获取指定文件夹下的文件名。 一、os.walk() 模块os中的walk()函数可以遍历文件夹下所有的文件。 该函数可以得到 阅读全文

摘要： 今天被坑的够惨，就这个模式的代码，传参进门前是str，进家再出来就成tuple了，为啥？在家发生了啥。 一顿操作，最终发现，原来是每个self语句后边本应该什么都没有,只接受值，如果接收到值+逗号，就会把值和逗号组合当成元祖处理了。。 阅读全文

摘要： 采集过程中，遇到了一个token是经过JS加密生成的，于是乎进行JS断点追踪，生成了完整的生成token值的JS函数文件。 这个JS函数需要在Python代码中调用，通过输入一个参数，然后会输出一个token值。 所需模块： pip install pyexecjs 注意：这里安装的模块叫：pyex 阅读全文