随笔分类 - Python

python爬取安居客二手房网站数据（转）

摘要：之前没课的时候写过安居客的爬虫，但那也是小打小闹，那这次呢，还是小打小闹哈哈，现在开始正式进行爬虫书写首先，需要分析一下要爬取的网站的结构：作为一名河南的学生，那就看看郑州的二手房信息吧！在上面这个页面中，我们可以看到一条条的房源信息，从中我们发现了什么，发现了连郑州的二手房都是这么的贵，阅读全文

posted @ 2019-04-22 20:17 谦信君阅读(3291) 评论(0) 推荐(0) 编辑

使用python抓取并分析数据—链家网(requests+BeautifulSoup)（转）

摘要：本篇文章是使用python抓取数据的第一篇，使用requests+BeautifulSoup的方法对页面进行抓取和数据提取。通过使用requests库对链家网二手房列表页进行抓取，通过BeautifulSoup对页面进行解析，并从中获取房源价格，面积，户型和关注度的数据。准备工作首先是开始抓取前阅读全文

posted @ 2017-05-31 12:01 谦信君阅读(4925) 评论(0) 推荐(0) 编辑

Python异步IO --- 轻松管理10k+并发连接

摘要：前言异步操作在计算机软硬件体系中是一个普遍概念，根源在于参与协作的各实体处理速度上有明显差异。软件开发中遇到的多数情况是CPU与IO的速度不匹配，所以异步IO存在于各种编程框架中，客户端比如浏览器，服务端比如node.js。本文主要分析Python异步IO。Python 3.4标准库有一个新模块as... 阅读全文

posted @ 2015-04-16 11:35 谦信君阅读(1726) 评论(0) 推荐(0) 编辑