摘要: 之前写了一些小爬虫,数据存储到mongodb之类的数据库,后面觉得单纯的存到数据库用处并不大,如果能够直接展示在页面上就非常的直观了。 这里就简单的说明一下python取数据库中的数据,通过前端js将数据返回。后续再将爬虫结合起来,做一些有意义的数据分析 使用python的web框架Flask作为后 阅读全文
posted @ 2017-07-18 17:00 进击的大乐 阅读(17990) 评论(0) 推荐(0) 编辑
摘要: 对于一些需要登陆的网址爬取数据,需要登录才能访问。本文介绍如何利用python进行模拟登陆 准备工具: 1.搭建django 框架 用于模拟登陆 2.fiddler抓包工具,chrome浏览器 3.pycharm 编辑器 步骤: 1.开启django 服务,这里就不多描述,直接百度一下,就能找到很多 阅读全文
posted @ 2017-07-06 17:57 进击的大乐 阅读(412) 评论(0) 推荐(0) 编辑
摘要: 有一个加密的zip文件需要解压,目前知道密码为0-9的三位数的密码 利用 itertools生成字典,然后使用zipfile模块,进行解密操作。 打开dictionary这个文件,可以看到生成的密码。 its.product(words, repeat=6)是这段代码最主要的部分,从给定的字母表中返 阅读全文
posted @ 2017-06-27 09:55 进击的大乐 阅读(4758) 评论(2) 推荐(1) 编辑
摘要: Flask开发接口 在之前那篇直接操作数据库的基础上作出的改进,这个版本可能更加适合项目中的使用,同样实现俩个功能,增加和查询功能,基本机构如下: 操作步骤: 1.在app下,新建一个 __init__.py文件,这里是项目结构,在蓝本中定义路由地址 2.新建一个models.py,这里面是数据结构 阅读全文
posted @ 2017-04-27 14:54 进击的大乐 阅读(5924) 评论(0) 推荐(0) 编辑
摘要: # python 3.5.2 from selenium import webdriver import time import urllib # 爬取页面地址 url = "https://stocksnap.io/" # 目标元素的xpath xpath = "/html/body/div[4]/div[3]/div[2]/div//a/img" # 启动Firefo... 阅读全文
posted @ 2017-04-25 16:40 进击的大乐 阅读(20676) 评论(0) 推荐(0) 编辑
摘要: Selenium自动化登陆验证码网站 该脚本 能识别简单字母、数字的验证码 脚本思路: 1. yz_code(): 打开网页,将浏览器最大化。然后定位验证码的位置,截取验证码对应的区域,将图片保存,然后进行二值化处理,再进行文本识别。 其实这么做的原因很简单:不会将验证码图片直接进行保存,然后再识别 阅读全文
posted @ 2017-04-21 16:50 进击的大乐 阅读(1299) 评论(0) 推荐(0) 编辑
摘要: Flask接口直接操作数据库 环境准备: 环境的问题就到这里,百度一下各种教程,这里就不罗嗦 步骤一: 新建一个sqllite数据库: 新建记事本,将记事本名字改为:info.db 使用pycharm打开info.db,创建student表,包含id,name,age。 使用pycharm新建一个f 阅读全文
posted @ 2017-04-17 17:00 进击的大乐 阅读(6268) 评论(0) 推荐(0) 编辑
摘要: 使用RF进行接口测试时,需要使用到的第三方包支持 HttpLibrary.HTTP 是模拟http请求的库 Selenium2Library 对于需要登录认证的网址,接口可以用这个库来添加cookie 模拟一个http的请求: 1.Create Http Context 创建http请求 2.Set 阅读全文
posted @ 2017-04-11 17:04 进击的大乐 阅读(7337) 评论(2) 推荐(0) 编辑
摘要: 在《Flask Web开发》里,作者为博客添加了一个Markdown编辑器,但是我觉得这种编辑器对不懂html的人很不友好,所以打算换一个编辑器。 查了一下资料,推荐的有ckeditor,和uediotr。这里我使用的是ckeditor。参考资料http://www.phperz.com/artic 阅读全文
posted @ 2016-12-19 17:49 进击的大乐 阅读(3011) 评论(2) 推荐(0) 编辑
摘要: 第一步:数据库的表单中新增用户头像这一字段models.py中 第二步:在编辑资料的表单中增加头像上传, 第三步:在编辑资料的路由界面,添加用户提交头像的功能,参考博客 http://ncitycode.com/python/flask/2016/6/18/ 将数据库中头像存储的路径修改为 到这里, 阅读全文
posted @ 2016-12-16 11:23 进击的大乐 阅读(2876) 评论(0) 推荐(1) 编辑