10 2024 档案

千峰Linux云计算-徐磊-文件管理

摘要：虚拟机：Hyper-V 操作系统：CentOs9 作业：通过创建文件/目录、复制、移动、删除等文件管理命令，创建如图所示的文件和目录打开终端，创建更改工作目录至/home/lingyun/文档，在此工作目录下创建要求的目录和文件，使用的命令为cd /home/lingyun/文档先创建姓名目录，阅读全文

posted @ 2024-10-24 17:30 松鼠q 阅读(21) 评论(0) 推荐(0) 编辑

在win10安装和使用wsl

摘要：WSL wsl（Windows Subsystem for Linux）是微软在Windows操作系统中引入的一个功能，它允许用户直接在Windows上运行Linux发行版的二进制可执行文件，而无需使用虚拟机或双启动系统。WSL提供了一个兼容层，使得Linux应用程序能够运行在Windows的内核上阅读全文

posted @ 2024-10-23 13:29 松鼠q 阅读(454) 评论(0) 推荐(0) 编辑

单线程与多线程爬虫

摘要：单线程爬虫在执行爬取任务时，程序一次只处理一个任务。这意味着在一个时刻，它只能向一个服务器发送请求，并等待该请求的响应。完成这个请求后，它才会发送下一个请求。单线程爬虫的结构简单，易于理解和实现，但效率较低，特别是在网络延迟较大或需要处理大量数据时。爬虫多为IO密集型程序，而IO处理速度并不是很阅读全文

posted @ 2024-10-14 23:49 松鼠q 阅读(10) 评论(0) 推荐(0) 编辑

提取猫眼电影正在热映电影以及评分

摘要：目标：提取热映电影的名称和评分首先获取响应内容 from fake_useragent import UserAgent import requests # url地址 url = 'https://www.maoyan.com/films?showType=1' # 设置请求头 headers 阅读全文

posted @ 2024-10-09 15:59 松鼠q 阅读(32) 评论(0) 推荐(0) 编辑

使用jsonpath快速提取json的数据

摘要：jsonpath对于json相当于xpath对于xml，jsonpath提供多种语言实现版本包括python，javascript，php和java等，jsonpath是第三方库，需要安装，cmd中输入pip install jsonpath 安装后输入pip show jsonpath可查看详细信阅读全文

posted @ 2024-10-04 17:49 松鼠q 阅读(36) 评论(0) 推荐(0) 编辑

JSON数据

摘要：JSON（JavaScript Object Notation）是一种轻量级的数据交换格式，易于人阅读和编写，同时也易于机器解析和生成。它基于JavaScript的一个子集，但JSON是独立于语言的，很多编程语言都支持JSON格式的数据的生成和解析。 JSON的特点包括：文本格式： JSON是纯文阅读全文

posted @ 2024-10-03 15:47 松鼠q 阅读(67) 评论(0) 推荐(0) 编辑

使用re和lxml的xpath功能提取纵横中文网小说推荐榜前3页标题

摘要：re提取纵横中文网推荐榜前3页小说标题：观察到纵横中文网推荐榜的数据需要从动态网页获取。（动态网页中发起的请求通过JavaScript进行的网络请求（通常使用Fetch API或XMLHttpRequest即XHR）会出现在浏览器开发者工具的网络面板中，并且可以通过Fetch/XHR筛选器查看这些阅读全文

posted @ 2024-10-03 10:03 松鼠q 阅读(21) 评论(0) 推荐(0) 编辑