摘要: rpa自动化这个词,在今天的这个时代相应大家并不陌生,自动化可以帮人做掉很多繁琐的事情,它可以不休息,只要给他写好程序,配置部署就可以一直在工作,废话不多说,直接上干货 1、selenium的sessionid的使用 selenium分为本地打开和远程模式打开,有时候我们不想在操作自动化的过程中,通 阅读全文
posted @ 2024-02-26 13:50 WangHello 阅读(69) 评论(0) 推荐(0) 编辑
摘要: 现在是大数据的时代,大家对于ElasticSearch 简称 es这块应该并不陌生,但是说到es就要讲讲 Lucene 和 es 的前世今生 了。 Lucene 和 es 的前世今生 Elasticsearch 是基于 Lucene 实现的。Lucene 是一个开源的全文检索引擎库,它可以用于构建各 阅读全文
posted @ 2023-08-29 16:10 WangHello 阅读(15) 评论(0) 推荐(0) 编辑
摘要: 其实讲到nginx服务,很多人都是一件很头疼的事情,其实他很简单的 第一:我们先来讲述一下nginx的安装和部署 第二:我们讲一下nginx的方向代理,端口映射配置对应的域名地址 第三:我们讲一个前后端如何共用一个域名地址,不然前端要配置一个域名,服务端也要配置一个域名,实属没必要 第一步:ngin 阅读全文
posted @ 2022-11-24 10:21 WangHello 阅读(1233) 评论(0) 推荐(0) 编辑
摘要: 自动部署来咯,虽然曾今也有搞过但是没整理成笔记,网上也有千千万万的坑,附jenkins安装 第一步 首先安装jenkins 要先安装jdk yum search java|grep jdk yum install java-1.8.0-openjdk source /etc/profile 第二步 阅读全文
posted @ 2021-11-24 16:55 WangHello 阅读(146) 评论(0) 推荐(0) 编辑
摘要: 其实在我们编码过程中,不管是爬虫还是服务端还是做数据分析的业务场景,都需要对数据库进行一些数据管理操作,那怎么连库呢? pymysql是python用来连数据库比较常用的之一,接下来我们简单介绍一下正常pymysql连接和利用ssh通道在借助pymysql连接的使用 首先直接连接的 那是非常简单的 阅读全文
posted @ 2021-09-30 17:35 WangHello 阅读(3518) 评论(0) 推荐(0) 编辑
摘要: 近期呢,公司来了一个小白自动化测试,带带她的同时,觉得整理一份好的接口文档还是非常必要的,于是下面接介绍如何搭建接口文档,市面上接口文档有很多,这边我们使用yapi。 首先我们需要一台服务器去搭建,这里我的系统是centos的阿里云服务器。要安装以下三个模块 (1)nodejs (2)git (3) 阅读全文
posted @ 2021-04-14 15:09 WangHello 阅读(1237) 评论(0) 推荐(0) 编辑
摘要: 说到爬虫,除了页面元素解析,大家也不会陌生接口解析,有些通过浏览器F12调试模式即可查看,但是有些浏览器的网站调试模式不让开启,这个只能使用抓包工具来抓取啦。 推荐两款抓包工具 charles fiddler 最近在配置的时候,看到很多人反映网上的抓包配置不太能解决问题,根本抓不到东西,很多都是44 阅读全文
posted @ 2021-01-27 13:42 WangHello 阅读(215) 评论(0) 推荐(0) 编辑
摘要: 利用python做了爬虫,服务端,自动化测试,也都做了相应的编码以及架构处理,近期就想来玩玩数据分析,这个才是好前景呀! 我们来看看这个网站,url = "http://www.compassedu.hk/qs",爬取里面的table数据, 今天就来爬虫这个地址,并保存csv以及自动创建数据库 在还 阅读全文
posted @ 2020-12-04 11:09 WangHello 阅读(276) 评论(0) 推荐(0) 编辑
摘要: 人工智能这么火爆的时代,近来正好有时间就想研究以下智能语音这块的内容,虽然感觉自带的模块应该识别不太准确,不然就不会有百度的padder,google的tensorflow等框架,但是路要一步步走,饭也要一步步吃,初学的时候总要各种尝试一下。以下内容是我最近两天的尝试结果。 环境win10,pyth 阅读全文
posted @ 2020-07-09 14:38 WangHello 阅读(13099) 评论(3) 推荐(2) 编辑
摘要: 近来身边很多人问,爬虫怎么实现免登入,这边介绍几种方法。 1、scrapy的FormRequest模块 2、requests的post实现免登入 3、selenium实现自动化登入过程 接下来,我们来实现http://oursteps.com.au/的免登入 我们先说前两种的情况,使用scrapy和 阅读全文
posted @ 2020-04-14 15:57 WangHello 阅读(1561) 评论(0) 推荐(0) 编辑