上一页 1 2 3 4 5 6 7 8 ··· 10 下一页
摘要: 一、selenium模块 之前,我们爬虫是模拟浏览器,但始终不是用的浏览器,但今天我们要说的是另一种爬虫方式,这次不是模拟浏览器,而是用程序去控制浏览器进行一些列操作,也就是selenium。selenium是python的一个第三方库,对外提供的接口可以操控浏览器,比如说输入、点击,跳转,下拉等动 阅读全文
posted @ 2019-03-04 22:35 W的一天 阅读(1424) 评论(0) 推荐(3) 编辑
摘要: 一、啥是数据解析 在上一篇关于爬虫的博客里,我提到过,整个爬虫分为四个部分,上一篇博客已经完成了前两步,也就是我说的最难的地方,接下来这一步数据解析不是很难,但就是很烦人,但只要你有耐心,一步一步查找、排除就会提取出目标信息,这一步就相当于从接收到的庞大数据中提取出真正想要、有意义的信息,所以对于爬 阅读全文
posted @ 2019-03-03 09:05 W的一天 阅读(4324) 评论(1) 推荐(0) 编辑
摘要: 一、爬虫 我所理解的爬虫就是编写程序,模拟浏览器发送请求,然后服务端把数据响应给我,然后我再对响应的数据做解析,拿到我想要的那一小部分,这就是整个爬虫过程。说起来很简单哈,其实不然,门户网站是很不希望他们的数据被爬虫程序拿到,有可能说有些不怀好意的人拿数据干见不得人的勾当,或者说现在大数据时代,有数 阅读全文
posted @ 2019-03-02 15:15 W的一天 阅读(2576) 评论(0) 推荐(0) 编辑
摘要: 长期以来都想用python对Excel进行一些列的操作,但由于某种神秘的力量控制着我,一直未果,今天有幸用requests模块和BeautifulSoup模块进行爬虫练习,拿到了一大批数据,照我以前,都只是用字典啊、列表啊,或者文本文件存放,之前没觉得哪里不好,但今天的我很奇怪,怎么看怎么不爽,而且 阅读全文
posted @ 2019-03-01 22:32 W的一天 阅读(2293) 评论(0) 推荐(0) 编辑
摘要: 一、功能介绍 这是一个基于前端页面js代码的动态效果和后端对数据库数据更新的操作,主要实现的是会议室的预定功能,当员工进入预定页面后可以看到某天的某个会议室的某个时段是否被预定,当没被预定的情况下,就可以预定会议室,这相当于对于会议室这种共享资产的合理化分配,快速便捷的完成会议室的预定。前端页面时长 阅读全文
posted @ 2019-02-27 20:31 W的一天 阅读(4394) 评论(0) 推荐(1) 编辑
摘要: 对于后台管理工具,会根据员工的角色不同,从而拥有不同的权限,所能访问的页面不同,首先要给员工分配角色,然后再给角色分配权力,这样就完成了权限分配。其实基于stark组件做的权限管理,我们可以一个一个页面的去完成权限分配,但其实我们有更好的方法去实现,把员工、角色、权力都放在一个页面上,一目了然的查看 阅读全文
posted @ 2019-02-26 22:24 W的一天 阅读(1168) 评论(0) 推荐(0) 编辑
摘要: 一、人口分析 现在有三个文本文件,state-abbrevs.csv存放的是每个州的名字及简写;state-areas.csv存放的州名和占地面积;state-population.csv存放的州名简写和人口信息。 1,题目要求 2,导入文件,查看每个表的数据 3,将人口数据和各州的简称数据合并,然 阅读全文
posted @ 2019-02-22 21:17 W的一天 阅读(879) 评论(0) 推荐(1) 编辑
摘要: 一、引子 在我们浏览很多页面时,会发现一般情况下都有一个分类的功能,而且还是多个类别同时控制,这就是多级过滤。如下图: 一行代表一个类别,第一行就是展示了所有的出版社,选中后就会以出版社分类,第二行就是以作者分类,当都选择了,就共同控制。此时选中了‘人民出版社’和‘余华’,数据就会以这两者共同过滤, 阅读全文
posted @ 2019-02-22 11:09 W的一天 阅读(217) 评论(0) 推荐(0) 编辑
摘要: 首先都得导模块。 一、绘制单线图 1,直线图 2,抛物线 3,正弦图 这里得到图形取决于x跟y的关系 二、绘制多个曲线的图 1,连续调用多次plot函数 2,也可以在一个plot函数中传入多对x,y值 3,将多个曲线绘制在一个table区域中:对象形式创建表图 三、plt的一些样式设置 1,设置网格 阅读全文
posted @ 2019-02-22 10:45 W的一天 阅读(1291) 评论(0) 推荐(0) 编辑
摘要: 一、Series 类似于一位数组的对象,第一个参数为数据,第二个参数为索引(索引可以不指定,就默认用隐式索引) 1,索引和切片 2,属性 3,去重 4,加法 索引相同的加在一起,当索引不一致的项,就用NaN填充 5,数据清洗 主要用isnull()判断值是否为空,notnull()判断值是否不为空, 阅读全文
posted @ 2019-02-21 10:48 W的一天 阅读(472) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 ··· 10 下一页