py之秀人网详情链接

在这里插入图片描述

 import requests
from lxml import etree
cookies = {
    'Hm_lvt_1e6428f355435b22644f2fc429cf38a4': '1702806796',
    'Hm_lpvt_1e6428f355435b22644f2fc429cf38a4': '1702806850',
}
 
headers = {
    'authority': 'www.zps.im',
    'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7',
    'accept-language': 'zh-CN,zh;q=0.9',
    'cache-control': 'no-cache',
    # Requests sorts cookies= alphabetically
    # 'cookie': 'Hm_lvt_1e6428f355435b22644f2fc429cf38a4=1702806796; Hm_lpvt_1e6428f355435b22644f2fc429cf38a4=1702806850',
    'pragma': 'no-cache',
    'referer': 'https://www.zps.im/',
    'sec-ch-ua': '"Not_A Brand";v="8", "Chromium";v="120", "Google Chrome";v="120"',
    'sec-ch-ua-mobile': '?0',
    'sec-ch-ua-platform': '"Windows"',
    'sec-fetch-dest': 'document',
    'sec-fetch-mode': 'navigate',
    'sec-fetch-site': 'same-origin',
    'sec-fetch-user': '?1',
    'upgrade-insecure-requests': '1',
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36',
}
 
response = requests.get('https://www.zps.im/page/2/', cookies=cookies, headers=headers)
 
html=etree.HTML(response.text)
res=html.xpath('//div[@class="column col-12"]/ol/li/p/a/@href')
print(res)

posted @ 2023-12-17 17:58 萧海~ 阅读(1081) 评论(0) 编辑收藏举报

刷新页面返回顶部

登录后才能查看或发表评论，立即登录或者逛逛博客园首页

相关博文：

· python之秀人网图片下载

· py福利图网址获取

· 2022/3/27 lmxl练习

· 猿人学web端爬虫攻防大赛赛题第3题——访问逻辑 - 推心置腹

· request请求但脚本爬取

历史上的今天：
2020-12-17 C++11中的std::bind
2020-12-17 解决vs2013 MFC工程不能使用多字符集

公告

侧边栏

昵称：萧海~
园龄： 4年11个月
粉丝： 4
关注： 88

+加关注

2025年3月

日

一

二

三

四

五

六

萧海~

记录自己和别人的博客

py之秀人网详情链接

公告

搜索

常用链接

随笔分类

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论

	import requests
	from lxml import etree
	cookies = {
	'Hm_lvt_1e6428f355435b22644f2fc429cf38a4': '1702806796',
	'Hm_lpvt_1e6428f355435b22644f2fc429cf38a4': '1702806850',
	}

	headers = {
	'authority': 'www.zps.im',
	'accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,/;q=0.8,application/signed-exchange;v=b3;q=0.7',
	'accept-language': 'zh-CN,zh;q=0.9',
	'cache-control': 'no-cache',
	# Requests sorts cookies= alphabetically
	# 'cookie': 'Hm_lvt_1e6428f355435b22644f2fc429cf38a4=1702806796; Hm_lpvt_1e6428f355435b22644f2fc429cf38a4=1702806850',
	'pragma': 'no-cache',
	'referer': 'https://www.zps.im/',
	'sec-ch-ua': '"Not_A Brand";v="8", "Chromium";v="120", "Google Chrome";v="120"',
	'sec-ch-ua-mobile': '?0',
	'sec-ch-ua-platform': '"Windows"',
	'sec-fetch-dest': 'document',
	'sec-fetch-mode': 'navigate',
	'sec-fetch-site': 'same-origin',
	'sec-fetch-user': '?1',
	'upgrade-insecure-requests': '1',
	'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36',
	}

	response = requests.get('https://www.zps.im/page/2/', cookies=cookies, headers=headers)

	html=etree.HTML(response.text)
	res=html.xpath('//div[@class="column col-12"]/ol/li/p/a/@href')
	print(res)