Ajax数据爬取

简介

数据加载是异步加载,局部刷新。web开发的前后端分离通常都用Ajax交互,降低了服务器直接渲染页面带来的压力

基本原理

  1. 发送请求

  2. 解析内容

  3. 渲染网页

其实就是 向后端指定接口发送请求,返回数据,渲染页面

JS对Ajax底层的实现,实际上是新建了一个XMLHttpRequest对象

 

Ajax分析方法

发送的请求类型为 XHR ;Request Headers 中就有一条信息为 X-Request-With:XMLHttpRequest ,这就标记了该请求为Ajax请求;返回的数据可能是json 也可能HTML 。

 

实例

例如腾讯招聘,微博等;这些网站都是前后端分离的

 

补充

Croptydomex 密码库 des aes rsa

pip install execjs # 执行代码的模块

/# 安装nodejs

sudo apt-get install nodejs

 import execjs
 
 print(execjs.eval('var a = "hello world"'))

 

 # 修改某文件/文件夹所有权限
 sudo chmod -R 777 folder
 sudo chmod -RF 777 file