03 2021 档案
摘要：帮助指令的简单介绍： 当我们对某个指令不熟悉时，我们可以使用Linux提供的帮助指令来了解这个指令的使用方法。 man获得帮助信息 命令：man [命令或配置文件] （功能描述，获得帮助信息） 查看ls命名的帮助信息 help指令 命令：help 命令 （功能描述，获得shell内置命令的帮助信息）
阅读全文
摘要：运行级别的基本介绍 0：关机 1：单用户【找回丢失密码】 2：多用户状态没有网络服务 3：多用户状态有网络服务 4：系统未使用保留给用户 5：图形界面 6：系统重启 注意：常用的运行级别是3和5，要修改默认的运行级别可修改文件/etc/inittab 切换到指定运行级别的指令 1> runlevel
阅读全文
摘要：Linux的用户管理 Linux系统是一个多用户多任务的操作系统，任何一个要使用系统资源的用户，都必须首先向系统管理员申请一个账号，然后以这个账号的身份进入系统 Linux的用户需要至少属于一个组【也可以属于多个组】 用户管理规则示意图： 添加用户 useradd [选项] 用户名 1>userad
阅读全文
摘要：关机、重启命令 1>立刻进行关机：shutdown -h now 2>一分钟后开始关机：shutdown -h 1 3>现在重新启动计算机：shutdown -r now 4>关机：halt 5>现在重新启动计算机：reboot 6>把内存中的数据同步到磁盘：sync 需要注意的是：不管是重启系统还
阅读全文
摘要：vi和vim的基本介绍 所有的Linux系统都会内建vi文本编辑器。 vim具有程序编辑的能力，可以看做是vi的增强版本，可以主动的以字体颜色辨别语法的正确性，方便程序设计。 代码补完、编译及错误跳转等方便编程的功能特别丰富，在程序员中被广泛使用 vi和vim常用的三种模式 正常模式： 在正常模式下
阅读全文
摘要：为什么需要远程登录Linux 当公司开发的时候，具体的情况是这样的： 1>Linux服务器是开发小组共享的 2>正式上线的项目是运行在公网的 3>因此程序员需要远程登录到CentOS进行项目管理或者开发 4>画出简单的网络拓扑图 5>远程登录客户端有Xshell，Xftp，我们学习使用这两个就够了，
阅读全文
摘要：为什么需要远程登录Linux 当公司开发的时候，具体的情况是这样的： 1>Linux服务器是开发小组共享的 2>正式上线的项目是运行在公网的 3>因此程序员需要远程登录到CentOS进行项目管理或者开发 4>画出简单的网络拓扑图 5>远程登录客户端有Xshell，Xftp，我们学习使用这两个就够了，
阅读全文
摘要：su与sudo命令 su root就是切换成root用户 sudo在centos中表示以管理员权限运行某条指令 基本介绍 Linux的文件系统是采用级层式的树状目录结构，在此结构中的最上层是根目录”/”，然后在此目录下再创建其它的目录。 需要注意:在Linux世界里，一切皆文件。 Linux具体的目
阅读全文
摘要：su与sudo命令 su root就是切换成root用户 sudo在centos中表示以管理员权限运行某条指令 vmtools安装 1>可以直接粘贴命令在windows和centos系统之间 2>可以设置windows和centos的共享文件夹 3>示意图 安装centos的步骤 1>进入cento
阅读全文
摘要：安装VMware虚拟机和Linux系统(CentOS) 学习Linux需要一个环境，我们需要创建一个虚拟机，然后在虚拟机上安装要给CentOS系统来学习 1>在windows 10环境下，安装VM(Virtual Machine)软件,这里我们选择版本vm12 2>通过VM软件创建一个虚拟机空间 2
阅读全文
摘要：Linux介绍 Linux是一款操作系统，免费、开源、高效、稳定，处理高并发非常强悍，现在很多的企业级的项目都部署到Linux服务器上 目前Linux主要的发行版：Ubuntu、CentOS Linux学习方向 Linux与Windows的比较 注意：这里需要注意的是，Linux虽然也有图形界面，但
阅读全文
摘要：四种数据存储部分:1.JSON文件格式处理2.CSV文件格式处理3.Excel文件处理4.MySQL数据库处理 Excle处理：在爬虫开发中，我们主要关注Excel文件的读写，不会过多关心Excel中的一些样式。如果想要读写Excel文件，需要借助两个库xlrd 和xlwt，其中xlrd是用于读的，
阅读全文
摘要：四种数据存储部分:1.JSON文件格式处理2.CSV文件格式处理3.Excel文件处理4.MySQL数据库处理 CSV模块： CSV（逗号分隔符）文件是表格与数据库操作之中最常用的输入输出格式。在RFC4180中的文件描述标准对CSV格式进行规范之前，CSV格式文件就已经被应用了很多年了。 Pyth
阅读全文
摘要：四种数据存储部分:1.JSON文件格式处理2.CSV文件格式处理3.Excel文件处理4.MySQL数据库处理 JSON字符串： JSON(JavaScript Object Notation,JS对象标记)是一种轻量级的数据交换格式。它基于ECMAScript(w3c制定的js规范)的一个子集，采
阅读全文
摘要：什么是正则表达式： 通俗理解：按照一定的规则，从某个字符串中匹配出想要的数据。这个规则就是正则表达式 re模块是python自带的标准库，不需要安装，直接导入 import re 1.单字符匹配： 点(.):匹配任意的字符（除了'\n'） \d:匹配任意的数字 \D:匹配任意的非数字 \s:匹配的是
阅读全文
摘要：BeautifulSoup4库：和lxml一样，Beautiful Soup也是一个HTML/XML的解析器，主要的功能也是如何解析和提取HTML/XML数据。lxml只会局部遍历，而Beautiful Soup是基于HTML DOM(Document Object Model)的，会载入整个文档，
阅读全文
摘要：什么是XPth?xpath(XML Path Language)是一门在XML和HTML文档中查找信息的语言，可用来在XML和HTML文档中对元素和属性进行遍历XPath开发工具：Chrome插件XPath Helper XPath节点在XPath中，有七种类型的节点：元素、属性、文本、命名空间、处
阅读全文
摘要：requests库：Requests:让HTTP服务人类虽然python的标准库中urllib模块已经包含了平常我们使用的大多数功能，但是它的API使用起来让人感觉不太好，而Requests宣传是"HTTP for Humans",说明使用起来更简洁方便Requests是用python语言编写，基于
阅读全文
摘要：urllib库urllib库是Python中最基本的网络请求库，可以模拟浏览器的行为，向指定的服务器发送一个请求，并可以保存服务器返回的数据注意:urllib是python自带的标准库，无需安装，直接可以用 一、基本函数详解 1.urlopen函数详解：创建一个表示远程url的类文件对象，然后像本地
阅读全文
摘要：什么是网络爬虫： 通俗的理解，爬虫是一个模拟人类请求网站行为的程序。可以自动请求网页、并把数据抓取下来， 然后使用一定的规则提取有价值的数据 为什么要用python写爬虫： 语法优美、代码简洁、开发效率高、支持的模块多。相关的HTTP请求模块和HTML解析模块非常丰富。 还有Scrapy和Scarp
阅读全文
