04 2020 档案
摘要：[TOC] 常用函数 1 htonl、htons、ntohl、ntohs 函数原型： 使用方法： 函数功能 之所以需要这些函数是因为计算机数据表示存在两种字节顺序：NBO与HBO 网络字节顺序NBO（Network Byte Order） 按从高到低的顺序存储，在网络上使用统一的网络字节顺序，可以避
阅读全文
摘要：1. JSON与JsonPATH JSON(JavaScript Object Notation) 是一种轻量级的数据交换格式，它使得人们很容易的进行阅读和编写。同时也方便了机器进行解析和生成。适用于进行数据交互的场景，比如网站前台与后台之间的数据交互。 JSON和XML的比较可谓不相上下。 Pyt
阅读全文
摘要：1. 介绍 之前 BeautifulSoup 的用法，这个已经是非常强大的库了，不过还有一些比较流行的解析库，例如 lxml，使用的是 Xpath 语法，同样是效率比较高的解析方法。如果大家对 BeautifulSoup 使用不太习惯的话，可以尝试下 Xpath "官网" http://lxml.d
阅读全文
摘要：今天在爬一个网站的时候，各个国家的名称是中文的，但要使用pyecharts.map绘图时要输入的国家名称却是英文的。 这时就需要一个字典来实现中英文名称的映射关系： nameMap = { 'Singapore Rep.':'新加坡', 'Dominican Rep.':'多米尼加', 'Pales
阅读全文
摘要：0 需求 爬取拉勾网（https://www.lagou.com/）上与“嵌入式软件”关键字有关的职位信息。 1 分析 在网页的源代码中搜索我们所要的信息（公司名称等），无匹配，说明是数据动态获取的 打开检查工具，重新刷新网页，从Network下抓取到的包中找到返回数据的包。（可以使用XHR和JS标
阅读全文
